11月7日,中国水产学会范蠡学术大会“水产绿色健康养殖”分会场在宁波顺利举行。渔机所渔业机器人创新科技团队专业带头人刘祥勇博士作了题为“融合多源框架信息提升渔业机器人细粒度感知”的研究报告。
报告提出了一种基于Transformer与CNN并行融合的新型Transformer模型,针对水下光照弱、散射高的问题,通过结合Transformer的局部上下文捕获和CNN的全局特征提取能力,自学习增强弱光照条件下的水下图像分辨率,大大提高了目标图像特征识别准确率。新模型采用PSNR注意力和线性运算,降低计算复杂度并减少颜色伪影,通过时域和频域特征结合的全局特征提取网络,丰富了图像特征。该模型有别于主流算法,提升了主观感知质量,同时,结合多模态视觉信息,构建融合模型,预测了鱼体活跃健康度,为水下养殖对象行为监测提供了技术支持。