CN109784200B - 基于双目视觉的奶牛行为图像获取与体况智能监测*** - Google Patents
基于双目视觉的奶牛行为图像获取与体况智能监测*** Download PDFInfo
- Publication number
- CN109784200B CN109784200B CN201811579615.9A CN201811579615A CN109784200B CN 109784200 B CN109784200 B CN 109784200B CN 201811579615 A CN201811579615 A CN 201811579615A CN 109784200 B CN109784200 B CN 109784200B
- Authority
- CN
- China
- Prior art keywords
- cow
- cameras
- images
- processing module
- data processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
本发明特别涉及一种基于双目视觉的奶牛行为图像获取与体况智能监测***,包括安装在奶牛行走通道上的数据采集模块和数据处理模块,所述的数据采集模块由两个同型号的摄像头构成,两个摄像头采集牛尾图像并输出至数据处理模块,数据处理模块通过视差处理得到牛尾到摄像头的距离并利用人工智能处理算法进行处理得到奶牛的评分数据。本***采用人工智能技术,将体况评分转化为分类问题,利用深度学习算法,具有精度高、可靠性高、实时性强等特点;同时,本***完全自动化,不需要人工辅助,不需要奶牛的配合,自动捕获关键部位并进行评分;另外,由于这里不需要昂贵的深度相机,只需使用普通的相机,成本大幅降低,非常适合推广使用。
Description
技术领域
本发明涉及智能监测设备技术领域,特别涉及一种基于双目视觉的奶牛行为图像获取与体况智能监测***。
背景技术
奶牛体况评分,英文:Dairy Cow Body Condition Score,简称BCS,是国际畜牧业近30年来总结的最优评价体系,它可以客观、合理地评估奶牛个体的能量储备,并比较科学地反应动物饮食状况,繁殖能力等。BCS的评分体制有多种形式,除了早期澳大利亚Earle等提出的8分(1~8)制BCS***,英国学者Mulvaney等提出的6分(1~6)制外,还有新西兰Macdonald等提出的10分(1~10)制BCS***。当然目前普遍采用的是美国Wildman提出的5分(1~5)制BCS***,它通过视觉评估和触觉判断的方法,对奶牛的几个关键部位进行评分得到一个综合结果,通过观察牛背部的脊椎是否突出、肋骨是否清晰可见、臀部两侧是否凹陷等一系列的特征,来判断奶牛个体是否胖瘦。在计算机信息技术未普及之前,牛的体况评分基本采用触摸评估和肉眼观察二者相结合的方法;该方法有一定的主观性,但却是目前被广泛使用的评估奶牛体能储备是否平衡的一种实用方法。这种方法的缺点是,效率低下,容易对奶牛造成应激反应,在评分过程中人员可能会遭到攻击而受伤。
随着计算机技术的普及,越来越多的人开始使用图像处理技术来进行奶牛评分,现有的方案都有不足之处。方案一,张海亮和何东键等利用图像处理技术,对肉牛图像进行分析和检测,间接对体长、胸宽、胸深的功能指标进行测量,然后利用测量值进行体况评分,但由于间接测量误差较大,导致体况评分精度较低;方案二,吴复争等对集中研究奶牛尾部图像,收集大量奶牛尾部图像建立图像库,提出了给予Kernel-PCA的奶牛体况评分方法,但该方案误差区间太大,达到±0.5;方案三,Fischer等使用3D相机获取奶牛后背深度图,并手动标注四个关键点,结合主成分分析方法,利用多元现行回归模型进行建模,进行体况评分,但该***不能全自动体况评分,而且3D相机成本较高;方案四,Spoliansky等用三维Kinect相机实现体况自动评分,但该模型需要附加信息,比如奶牛体重、年龄等,而且精度仅能达到0.75,与人工分数相差甚远;方案五,Fischer等利用3D相机的方法和Spoliansky等利用的Kinect相机内部虽然都有双目结构,但这些相机相对脆弱,不能应用在牧场这种复杂光照、风吹日晒的极端环境。
发明内容
本发明的目的在于提供一种基于双目视觉的奶牛行为图像获取与体况智能监测***,
为实现以上目的,本发明采用的技术方案为:一种基于双目视觉的奶牛行为图像获取与体况智能监测***,包括安装在奶牛行走通道上的数据采集模块和数据处理模块,所述的数据采集模块由两个同型号的摄像头构成,两个摄像头采集牛尾图像并输出至数据处理模块,数据处理模块通过视差处理得到牛尾到摄像头的距离并利用人工智能处理算法进行处理得到奶牛的评分数据。
与现有技术相比,本发明存在以下技术效果:本***采用人工智能技术,将体况评分转化为分类问题,利用深度学习算法,具有精度高、可靠性高、实时性强等特点;同时,本***完全自动化,不需要人工辅助,不需要奶牛的配合,自动捕获关键部位并进行评分;另外,由于这里不需要昂贵的深度相机,只需使用普通的相机,成本大幅降低,非常适合推广使用。
附图说明
图1是两个摄像头的位置示意图。
具体实施方式
下面结合图1,对本发明做进一步详细叙述。
一种基于双目视觉的奶牛行为图像获取与体况智能监测***,包括安装在奶牛行走通道上的数据采集模块和数据处理模块,所述的数据采集模块由两个同型号的摄像头构成,两个摄像头采集牛尾图像并输出至数据处理模块,数据处理模块通过视差处理得到牛尾到摄像头的距离并利用人工智能处理算法进行处理得到奶牛的评分数据。本***采用人工智能技术,将体况评分转化为分类问题,利用深度学习算法,具有精度高、可靠性高、实时性强等特点;同时,本***完全自动化,不需要人工辅助,不需要奶牛的配合,自动捕获关键部位并进行评分;另外,由于这里不需要昂贵的深度相机,只需使用普通的相机,成本大幅降低,非常适合推广使用。
参阅图1,为了简化数据处理模块的处理难度,本发明中优选地,所述的两个摄像头轴距固定、光轴彼此平行,两个摄像头光心连线与光轴相垂直,图1中T就是两个摄像头的轴距,左摄像头的光轴为Olcx left,左摄像头的光轴为Orcx right,两个摄像头光心连线即cx leftcx right,数据处理模块输出控制信号至两个摄像头控制两个摄像头同步拍照;这样设置以后,拍摄出来的两幅图像类似于人的左右眼看到的图像,就可以很方便的进行后续的视差处理。
视差算法和人工智能算法有很多,本实施例中优选地,所述的数据处理模块按如下步骤进行处理:(A)利用Fast YOLO图像定位算法实时对两个摄像头同一时刻采集的图像进行牛尾部定位,YOLO是现有技术中一种成熟的目标检测方法,该算法的特点是实现快速检测的同时还达到较高的准确率,该算法采用单个神经网络直接预测物品边界和类别概率,实现端到端(end to end)的物品检测;同时,该方法检测速非常快,基础版可以达到45帧/s的实时检测;Fast YOLO可以达到155帧/s,非常适合在这里实现牛尾部定位。(B)当牛尾部在图像的边缘或显示不完全时,此时处理得到的牛尾部距离也是不准确的,所以这里根据两幅图像中标定框的大小来判断牛是否运动到适合评分的位置,若奶牛运动到合适的评分位置,则执行下一步;若奶牛未运动到合适的评分位置,则返回步骤A重新拍摄图像;(C)利用视差法对两幅图像进行处理,拟合牛尾部到摄像头的距离,获得深度维度的图像矩阵;(D)将图像矩阵除以255归一化到0~1之间得到归一化的距离矩阵;(E)将距离矩阵输入到卷积神经网络中进行运算,提取特征;(F)将特征输入到softmax分类器中进行分类,并利用线性回归对分类结果进行校准得到奶牛体况评分。以上所有步骤都是自动完成的,无需人工介入,只需要将奶牛赶到行走通道上,当奶牛一个个的通过行走通道时,数据采集模块和数据处理模块会自动拍摄牛尾部照片并进行处理得到该奶牛对应的评分数据,使用起来非常的方便、快捷,并且该方法不依赖人眼观看,评分结果误差小、精度高。
为了保证能够可靠的对奶牛进行评分,本发明中优选地,所述的步骤B中,若两幅图像标定框的长度均大于图像总长度的三分之一且标定框的高度均大于图像总宽度的四分之一,则视为奶牛运动到合适的评分位置;否则视为奶牛未运动到合适的评分位置。这里的三分之一和四分之一只是实际过程中选用的一个优选参数,以供参考。该参数的选择还与摄像头的布置位置相关,在实际使用时,选择合适的大小,保证每次能够完整的拍摄牛尾部图像即可。
Claims (3)
1.一种基于双目视觉的奶牛行为图像获取与体况智能监测***,其特征在于:包括安装在奶牛行走通道上的数据采集模块和数据处理模块,所述的数据采集模块由两个同型号的摄像头构成,两个摄像头采集牛尾图像并输出至数据处理模块,数据处理模块通过视差处理得到牛尾到摄像头的距离并利用人工智能处理算法进行处理得到奶牛的评分数据;
所述的数据处理模块按如下步骤进行处理:
(A)利用Fast YOLO图像定位算法实时对两个摄像头同一时刻采集的图像进行牛尾部定位;
(B)根据两幅图像中标定框的大小来判断牛是否运动到适合评分的位置,若奶牛运动到合适的评分位置,则执行下一步;若奶牛未运动到合适的评分位置,则返回步骤A重新拍摄图像;
(C)利用视差法对两幅图像进行处理,拟合牛尾部到摄像头的距离,获得深度维度的图像矩阵;
(D)将图像矩阵归一化到0~1之间得到归一化的距离矩阵;
(E)将距离矩阵输入到卷积神经网络中进行运算,提取特征;
(F)将特征输入到softmax分类器中进行分类,并利用线性回归对分类结果进行校准得到奶牛体况评分。
2.如权利要求1所述的基于双目视觉的奶牛行为图像获取与体况智能监测***,其特征在于:所述的两个摄像头轴距固定、光轴彼此平行,两个摄像头光心连线与光轴相垂直,数据处理模块输出控制信号至两个摄像头控制两个摄像头同步拍照。
3.如权利要求1所述的基于双目视觉的奶牛行为图像获取与体况智能监测***,其特征在于:所述的步骤B中,若两幅图像标定框的长度均大于图像总长度的三分之一且标定框的高度均大于图像总宽度的四分之一,则视为奶牛运动到合适的评分位置;否则视为奶牛未运动到合适的评分位置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811579615.9A CN109784200B (zh) | 2018-12-24 | 2018-12-24 | 基于双目视觉的奶牛行为图像获取与体况智能监测*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811579615.9A CN109784200B (zh) | 2018-12-24 | 2018-12-24 | 基于双目视觉的奶牛行为图像获取与体况智能监测*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109784200A CN109784200A (zh) | 2019-05-21 |
CN109784200B true CN109784200B (zh) | 2022-09-30 |
Family
ID=66497934
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811579615.9A Active CN109784200B (zh) | 2018-12-24 | 2018-12-24 | 基于双目视觉的奶牛行为图像获取与体况智能监测*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109784200B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110415282A (zh) * | 2019-07-31 | 2019-11-05 | 宁夏金宇智慧科技有限公司 | 一种奶牛体重预测*** |
CN110728208B (zh) * | 2019-09-24 | 2022-05-27 | 内蒙古大学 | 基于体况评分在牦牛放牧管理中的信息处理方法及*** |
CN111259978A (zh) * | 2020-02-03 | 2020-06-09 | 东北农业大学 | 一种融合多区域深度特征的奶牛个体身份识别方法 |
CN111339850B (zh) * | 2020-02-14 | 2024-03-15 | 中国农业大学 | 一种基于支撑时相的奶牛跛行检测方法与*** |
MX2022014600A (es) * | 2020-05-21 | 2023-04-04 | Univ Michigan State | Sistemas y procedimientos de análisis sanitario automático y no invasivo de ganado. |
CN112419414B (zh) * | 2020-12-07 | 2023-03-07 | 河南科技大学 | 一种获取奶畜***区域三维点云的装置 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105844534A (zh) * | 2016-04-08 | 2016-08-10 | 北京农业信息技术研究中心 | 奶牛体况自动评分方法及装置 |
-
2018
- 2018-12-24 CN CN201811579615.9A patent/CN109784200B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105844534A (zh) * | 2016-04-08 | 2016-08-10 | 北京农业信息技术研究中心 | 奶牛体况自动评分方法及装置 |
Non-Patent Citations (1)
Title |
---|
图像信息技术在奶牛生产中的应用;孙雨坤等;《动物营养学报》;20180515(第05期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN109784200A (zh) | 2019-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109784200B (zh) | 基于双目视觉的奶牛行为图像获取与体况智能监测*** | |
AU2019101786A4 (en) | Intelligent pig group rearing weighing method and apparatus, electronic device and storage medium | |
CN110426112B (zh) | 一种生猪体重测量方法及装置 | |
KR102062609B1 (ko) | 3d 영상을 이용한 휴대형 가축 무게 측정시스템 | |
CN109508907A (zh) | 基于深度学习与远程视频的奶牛体况智能评分*** | |
CN105784083A (zh) | 基于立体视觉技术的奶牛体型测量方法和*** | |
CN110839557A (zh) | 母猪发情监测方法、装置、***、电子设备及存储介质 | |
CN111723729A (zh) | 基于知识图谱的监控视频犬类姿态和行为智能识别方法 | |
Zhang et al. | Algorithm of sheep body dimension measurement and its applications based on image analysis | |
KR102296501B1 (ko) | 깊이 영상카메라 및 소리 센서를 활용한 모돈의 발정기 및 수정적기 판단 시스템 | |
CN110569735A (zh) | 一种基于奶牛背部体况的分析方法及装置 | |
CN114463701B (zh) | 一种基于多源大数据动物养殖数据挖掘的监测预警*** | |
CN110307903B (zh) | 一种家禽特定部位无接触温度动态测量的方法 | |
CN110456050B (zh) | 便携式智能数字化寄生虫体外诊断仪 | |
CN113096178A (zh) | 猪只体重的估测方法、装置、设备和存储介质 | |
CN112288793B (zh) | 畜类个体背膘检测方法、装置、电子设备及存储介质 | |
CN112861872A (zh) | 一种南美白对虾表型数据测定方法、装置、计算机设备及存储介质 | |
EP4402657A1 (en) | Systems and methods for the automated monitoring of animal physiological conditions and for the prediction of animal phenotypes and health outcomes | |
CN115812626A (zh) | 一种种猪性能测定*** | |
Chowdhury et al. | Deep learning based computer vision technique for automatic heat detection in cows | |
CN117351404A (zh) | 一种奶牛分娩应激程度判识方法及*** | |
CN117029904A (zh) | 一种智能化笼养家禽巡检*** | |
CN114022831A (zh) | 一种基于双目视觉的牲畜体况监测方法及*** | |
Wu et al. | Body condition score for dairy cows method based on vision transformer | |
CN205608801U (zh) | 奶牛体况自动评分装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |