本发明涉及一种卡片式文件图像识别方法和装置，所述方法包括：对目标卡片式文件图像进行文字识别，以得到文件字符集合，其中，所述字符包括文字、数字和符号中的一种或多种；对目标卡片式文件图像进行图像处理，至少得到每个字符的图像特征；对所述文件字符集合中的字符按语义进行抽取，至少根据语义特征和字符的图像特征对文件字符集合中的字符进行合并和/或拆分以得到多个类别的字段内容；以及生成包括所述多个类别的字段内容的文件识别文本。本发明采用多种辅助方式能够更加准确地识别出卡片式文件图像中的文字、数字、字符，并且能够从识别出的文本中抽取出类别，使得本发明的应用范围更加广泛。