本发明提供的基于人工智能的绘本阅读方法，其包含：步骤一：在绘本阅读模式下，采集得到绘本图像，对绘本图像进行视觉识别；步骤二：对绘本图像进行翻页检测，判断绘本是否处于翻页阅读状态；步骤三：若绘本处于非翻页阅读状态，对绘本图像进行指读检测，判断绘本是否处于指读阅读状态或执手阅读状态；步骤四：在翻页阅读状态或指读阅读状态或执手阅读状态下，向用户反馈多模态阅读数据。本发明将用户阅读状态分为翻页阅读状态、指读阅读状态以及执手阅读状态，在用户进行阅读时能够分辨不同的阅读状态，针对性的提供相应的辅助阅读服务，改善了用户的阅读体验，减少了阅读的误判率，进一步提升了阅读舒适度。