本发明公开了一种基于视觉识别的鱼类姿态判定方法，首先获取待判定姿态的鱼图像，对鱼图像进行预处理，得到灰度图像和二值图像；对二值图像进行轮廓提取，获得鱼体轮廓图像；以鱼体头尾两个定位点为圆心，以相同的半径绘制圆形，判断两个圆形内鱼体面积的大小，面积大的定位点为鱼头方向；鱼体腹背姿态判定，将鱼体近似看为一个椭圆，对鱼体轮廓图像进行椭圆拟合，得到鱼体轮廓的椭圆方程，椭圆的长轴看作是鱼体的中轴线；以中轴线为分界线将灰度图像中椭圆轮廓内图形分别定义为R1区域和R2区域，对R1区域和R2区域分别进行灰度值求均值计算，均值大的区域为鱼腹方向。本发明无需建立数据库模型，无需接触，通过视觉识别可以直接判断，快速高效。