本发明公开识别四棱锥全景视频的方法及系统，该方法包括：在播放器中，设置用于判定四棱锥全景视频的侧边像素方差阈值、间隙像素对方差阈值；从数据库中获取视频的图像帧并计算图像帧的宽高比值；在图像帧的宽高比值为1:1时，将图像帧的每条边上到该边中点距离相等的两个像素作为一个侧边像素对，并计算侧边像素对的像素方差；在图像帧的所有边上，侧边像素对的像素方差都小于或等于侧边像素方差阈值时，获取图像帧上相邻两边中点连线两侧的间隙像素对，并计算间隙像素对的像素方差；在图像帧中，所有间隙像素对的像素方差都大于或等于间隙像素对方差阈值时，判定视频为四棱锥全景视频。本发明实现了四棱锥全景视频的自动识别。