本发明公开了一种基于视频的生猪行为预测方法，属于图像数据处理技术领域。该生猪行为预测方法通过多点位信号发射器获取耳标的位置数据，根据背景图像与关键帧获取前景图像，从前景图像提取耳标对应的特征图，并将耳标的位置数据标记至监控装置获取的视频流的关键帧中。基于图像处理技术分析特征图，构建生猪的形态参数集，根据耳标的位置数据不断更新生猪的形态参数集。通过形态参数集和行为模型预测生猪的独立行为和交互行为。进一步的，当关键帧中存在耳标丢失，本发明根据历史位置数据和生猪体尺参数集重新预测丢失耳标对应的特征图，保证特征图在时间上的连续性，实现在全养殖周期内对生猪日常行为的监测。