首页 / 行业
如何利用AI追踪或研究大型的小动物群落
2021-08-13 10:54:00

研究动物有多种原因,无论是为了医学研究还是为了更深入地了解它们的行为。特别是斑马鱼,它们不仅可用性高,且与人类共有70%的基因,并且具有与我们相似的基因结构而被普遍研究。已知与人类疾病相关的基因中,有84%都在斑马鱼中有对应基因。 但是我们该如何追踪或研究大型的小动物群落呢?idtracker.ai是一个旨在识别和追踪群体中每个个体的位置,而不需考虑动物的种类或大小的工具。
基于idtracker.ai的机器视觉
idtracker.ai是由葡萄牙里斯本Champalimaud研究所集体行为实验室的团队创建的,它是一个旨在识别和追踪集体中每个个体的位置,而不管动物的种类或大小的工具。在这种情况下,idtracker.ai可以追踪多达100条幼年斑马鱼的大型群落,准确率高达99.9%。该系统还可以跟踪单个个体。为此,该系统使用两个深度网络。一个用来检测动物何时接触或交叉,另一个用来识别每个个体。
系统装配
该系统由一个直径70厘米的定制水箱和一个水循环系统组成。水箱被放置在一个盒子里,盒子由白色哑光的亚克力墙和一个门组成,方便进出。
采用28毫米蔡司Distagon镜头的虹科EVT单色HT-20000相机位于水箱表面上方70厘米处。HT-20000是一款2000万像素的相机,采用AMS的CMV20000 CMOS传感器。其高速RJ45 10GBaseT接口为许多应用和100米长的电缆提供了经济高效的解决方案。
红外和RBG LED条带和位于相机周围的圆柱形可伸缩光漫射器提供均匀照明。使用运行64位Windows 10和NorPix StreamPix软件的RAID 2TB台式计算机录制视频。
个体的识别和检测
idtracker.ai使用两个深度卷积神经网络(CNN)。一个用于检测动物何时接触或穿越(深度穿越探测器),另一个用于识别动物(识别网络)。 系统通过在每秒25到50帧的范围内采集图像数据来启动该进程。这使得系统能够收集属于同一个体的图像,并将其组织成图像碎片,以便准确追踪和识别,而不会使系统过载,产生冗余的图像数据。
从视频中提取代表单个或多个接触动物的图像。每个图像被标记为单个个体或交叉点。表示相同个体(或交叉)的视频的后续帧中的图像组分别被命名为个体和交叉的片段。idtracker.ai依靠个体的视觉特征来跟踪个体。 单个片段集合的子集,其中所有个体在视频的同一部分中可见,然后用于生成带有相应标识的单个图像的数据集。然后利用这个数据集训练第二个CNN根据图像的身份(识别网络)对图像进行分类。
从标记图像的第一个数据集获得的信息将允许准确地分配单个片段的整个集合,或者通过在整个视频中合并安全地识别的单个片段来增加第一个数据集。最后,通过一系列的后处理例程来纠正微小的识别错误,并在最后一个计算核中推断交叉片段的身份。
10 GigE HT-20000高速相机
HT-20000相机采用CMV20000 CMOS传感器,成像区尺寸达35mm。在最大分辨率(5120×3840)下,每秒可以采集32帧图像。其采用10GBase-T接口,小尺寸,通过CAT6A线缆连接,这款相机与GigE相机相似,但速度却是GigE相机的10倍。使用CAT6A线缆,可以满足1米-100米的连接长度。HT-20000提供小于1μs精度多相机同步技术,低CPU开销,具有出色的性价比。
最新内容
- Efuse是什么?聊聊芯片级的eFuse
- 英飞凌推出XENSIV胎压传感器,满足智能胎压监测系统的需
- FPGA学习笔记:逻辑单元的基本结构
- 创造多样信号的万能工具:函数/任意波形发生器
- 位移传感器结构类型及工作原理与应用
- 开关电源供应器的功能、应用场景以及重要性
- 重庆东微电子推出高性能抗射频干扰MEMS硅麦放大器芯片
- 拒绝一次性芯片,新技术:无线升级芯片
- 芯片迈向系统化时代:EDA软件的创新之路
- 智能安全帽功能-EIS智能防抖摄像头4G定位生命体征监测
- 卫星应用受关注,GNSS导航芯片/模块发展加速
- AI边缘智能分析设备:智慧食堂明厨亮灶的智能化应用
- 美光低功耗内存解决方案助力高通第二代骁龙XR2平台
- 浅谈芯片常用的解密器
- 电路板技术水平和质量水平,影响着机器人赛道的发展前景
- 直播回顾 | 宽禁带半导体材料及功率半导体器件测试
- 写flash芯片时为什么需要先擦除?
- DigiKey 凭借品牌更新荣获四项 MarCom 大奖
- 高精度3D视觉技术,助力工业机器人实现汽车零部件高效上
- 不只是芯片 看看传感器技术我们离世界顶级有多远
- 加特兰毫米波雷达SoC芯片赋能室内安防新应用
- 所有遥不可及,终因AI触手可及
- 一种基于聚合物的化学电阻式传感器使患者检测更容易
- MTK天玑9300重磅发布:全大核时代到来,330亿参数AI大模型
- 如何测量温度传感器的好坏?
- ACCEL光电芯片,性能超GPU千倍,新一代计算架构将更早来临
- 如何利用示波器快速测量幅频特性?有何注意事项?
- 射频连接器使用技巧与注意事项
- STC15W芯片A/D、D/A转换的简单使用
- 群芯微车规级认证的光电耦合器备受电池BMS和电驱电控
- 芯朋微:服务器配套系列芯片已通过客户验证 可应用于AI
- 新能源高压连接器高压互锁(HVIL)功能详解
- FPGA和AI芯片算哪一类?芯片的不同分类方式
- MPS全系列电机驱动产品,助力新能源汽车实现更好的智能
- 基于穿隧磁阻效应(TMR)的车规级电流传感器
- 豪威发布新款 4K 分辨率图像传感器,适用于安防摄像头
- 苹果发布M3系列新款MacBook Pro/iMac:业界首批PC 3nm芯
- 硅谷:设计师利用生成式 AI 辅助芯片设计
- 电容式触摸按键屏中应用的高性能触摸芯片
- DigiKey 推出《超越医疗科技》视频系列的第一季

手机 |
相关内容
位移传感器结构类型及工作原理与应
位移传感器结构类型及工作原理与应用,工作原理,类型,结构,位移传感器,常见,效应,FDV302P位移传感器是一种用于测量物体位移或位置的电流互感器作用 电流互感器为什么
电流互感器作用 电流互感器为什么一端要接地?,作用,误差,原因,连接,测量,短路故障,电流互感器(Current Transformer,简称CT)是一种用于基于穿隧磁阻效应(TMR)的车规级电
基于穿隧磁阻效应(TMR)的车规级电流传感器,车规级,效应,导致,自旋,测量,电动汽车,随着电动汽车的快速发展和智能化驾驶技术的成熟,对豪威发布新款 4K 分辨率图像传感器
豪威发布新款 4K 分辨率图像传感器,适用于安防摄像头,分辨率,新款,区域,像素,运行,图像,豪威科技最近发布了一款全新的4K分辨率BAS70智能传感器助力打造数字经济数字世
智能传感器助力打造数字经济数字世界,数字,经济,传感器,助力,智能,及时发现,PCM1801U智能传感器是一种能够感知环境并将感知结果转低耗能,小安派-LRW-TH1传感器通用板
低耗能,小安派-LRW-TH1传感器通用板,一块板即可连接多种传感器!,传感器,多种,连接,一块,通用,接口,小安派-LRW-TH1传感器通用板是一款不只是芯片 看看传感器技术我们离
不只是芯片 看看传感器技术我们离世界顶级有多远,传感器,芯片,位置,测量,交通,用于,传感器技术是现代科技中至关重要的一部分,它们被消除“间隙”:力敏传感器如何推动新
消除“间隙”:力敏传感器如何推动新颖的HMI设计,传感器,智能手机,交互,交互方式,操作,用户,随着科技的不断发展,人机交互界面(HMI)的设