本发明公开了一种驾驶员疲劳检测系统，包括图像预处理模块将图像处理为预设格式；面部以及面部特征点检测模块采用第一卷积神经网络检测获得面部区域和面部特征点；面部区域调整归一化模块根据人脸特征点形成面部位置框，利用面部位置框裁剪面部区域，将裁剪后的面部区域归一化处理；面部特征提取网络模块采用第二卷积神经网络在归一化后的图像中获取面部特征并获取各面部特征的置信度；疲劳程度及疲劳状态判断模块，根据疲劳判断规则获取当前图像疲劳程度，根据前图像疲劳程度利用PERCLOS算法获得驾驶员疲劳状态。本发明还公开了一种驾驶员疲劳检测方法。本发明能精确获取驾驶员的面部信息，并进行融合决策准确判断驾驶员疲劳状态。