本发明实施例公开了一种船舶实时视频全景拼接方法，包括：获取多路实时视频图像并进行校准；通过全景像素映射矩阵对校准后的多路实时视频图像进行变换，并进行全景拼接融合，得到第一全景拼接图像；检测第一全景拼接图像的拼接效果，当达标时，对第一全景拼接图像进行滤波处理，平滑相邻两帧融合图像之间的亮度，得到第二全景拼接图像并输出，反之重新标定获得全景像素映射矩阵，对校准后的多路实时视频图像进行变换，并进行全景拼接融合。本发明实施例还公开了一种船舶实时视频全景拼接系统。本发明充分利用内河船舶上已经安装的多个摄像机，可节省设备资源，并检测拼接效果，可自动更新拼接参数，提高拼接图像的精度。