本申请实施例提供一种跟踪对象确定方法、设备和手持相机，跟踪对象确定方法包括：对当前拍摄图像帧进行图像识别，获得用于标识当前拍摄图像帧中的识别对象的识别信息；根据所述识别信息和用于标识已拍摄图像帧中的跟踪对象的跟踪信息，对所述识别对象与所述跟踪对象进行匹配，获得匹配信息；根据所述匹配信息，更新所述跟踪信息。由此，使得在多目标追踪拍摄过程中，可以将当前拍摄图像帧与上一图像帧进行对比通过寻找当前拍摄图像帧中识别对象与已拍摄图像帧中跟踪对象之间的匹配关系，更新跟踪对象的跟踪信息，更新跟踪目标的跟踪状态，实现以更实时且准确的进行跟踪对象的管理维护跟踪对象的信息。