首页
TVP 最新优惠活动
学习
活动
专区
工具
返回腾讯云官网
HOTA: A Higher Order Metric for Evaluating Multi-object Tracking是IJCV 2020的paper,在此之前以MOTChallenge为主的多目标跟踪benchmark一直采用以 MOTA为排名的评价标准,虽然MOTChallenge的metrics中也有IDF1,但是排名还是以MOTA为准。
但是MOTA有些情况下不足以衡量出多目标跟踪的性能,甚至都不如IDF1,所以这篇文章重新考量了多目标跟踪任务,并提出一种Higher Order Tracking Accuracy 的Metric。HOTA可以更好的对齐评价得分与人的视觉上的观感。
MOTA为主的评价在2006年就被提出,并经过MOTChallenge的加持,仍是目前主流的多目标跟踪评价标准,而HOTA刚刚提出不久,目前只有KITTI MOT在使用。即便后续真的替换了MOTA,也将需要很久。
MOTA的评价过分强调检测的效果,根据MOTA的计算方式,一种极端情况是,检测的性能非常优秀,但是所有检测到的目标不做跟踪,而是全部分配一个相同的track id,此时的MOTA会非常高,因为IDsw=0。
但是很显然,这个极端情况的跟踪表现为0。
MOTP更是如此,在根源是就没有跟踪什么事,而是只评价检测结果。
虽然IDF1可以评价跟踪的效果,但是排名是靠着MOTA的。
如上图,gt的长度为100,跟踪表现C把gt分为了4段,这个表现其实是比较差的了,但是MOTA高达97%。
定义没有IDsw的MOTA为MODA,也就是多目标检测的准确率(Multi Object Detection Accuracy),其公式如下:
可以发现,如果检测的Precision小于等于0.5的话,MODA就会为0,甚至出现负值,而检测的Recall小于等于0.5却不会造成这样的影响。
HOTA
HOTA评价是个双重杰卡德系数,也就是取了两遍交并比,首先是
为当前的interest-c对应的GT tracklet,计算得到的True Positive Associations,False Positive Associations与False Negative Associations,这是第一层杰卡德系数,需要注意的是interest-c不值一个,所有需要SUM。如下图所示。
第二层杰卡德系数为SUM后的
比上检测得到的TP,FN,FP。
最后,
是一个固定的阈值,所以
是一个固定阈值下的结果,而HOTA是:
就是类似于coco的AP计算。
本文分享自 作者个人站点/博客 前往查看
如有侵权,请联系 cloudcommunity@tencent.com 删除。
本文参与 腾讯云自媒体同步曝光计划 ,欢迎热爱写作的你一起参与!
玻璃钢生产厂家玻璃钢动物雕塑品牌安徽艺点玻璃钢雕塑爆款玻璃钢动物雕塑潞城玻璃钢十二生肖雕塑玻璃钢雕塑心形花盆定制深圳郑成功玻璃钢人物雕塑云龙玻璃钢花盆花器福州rtm法玻璃钢雕塑厂家吉林定做玻璃钢花盆山西火烈鸟玻璃钢雕塑安装商场美陈报道台州玻璃钢人物雕塑多少钱桂林精神堡垒玻璃钢雕塑吉安玻璃钢雕塑多少钱一平米四川常见商场美陈价格玻璃钢人物雕塑平台哪个好卡通玻璃钢雕塑品牌静安区正宗玻璃钢雕塑择优推荐太空球玻璃钢雕塑长春做商场美陈玻璃钢人物雕塑的制作标准河北玻璃钢迎宾人物雕塑上海人物玻璃钢雕塑商场大型唐风美陈玻璃钢麦兜雕塑玻璃钢雕塑厂简介周口标牌标识校园玻璃钢雕塑阜阳售楼部商场美陈制作机构加工玻璃钢雕塑哪家好乐山仿古玻璃钢雕塑厂家推荐香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声单亲妈妈陷入热恋 14岁儿子报警汪小菲曝离婚始末遭遇山火的松茸之乡雅江山火三名扑火人员牺牲系谣言何赛飞追着代拍打萧美琴窜访捷克 外交部回应卫健委通报少年有偿捐血浆16次猝死手机成瘾是影响睡眠质量重要因素高校汽车撞人致3死16伤 司机系学生315晚会后胖东来又人满为患了小米汽车超级工厂正式揭幕中国拥有亿元资产的家庭达13.3万户周杰伦一审败诉网易男孩8年未见母亲被告知被遗忘许家印被限制高消费饲养员用铁锨驱打大熊猫被辞退男子被猫抓伤后确诊“猫抓病”特朗普无法缴纳4.54亿美元罚金倪萍分享减重40斤方法联合利华开始重组张家界的山上“长”满了韩国人?张立群任西安交通大学校长杨倩无缘巴黎奥运“重生之我在北大当嫡校长”黑马情侣提车了专访95后高颜值猪保姆考生莫言也上北大硕士复试名单了网友洛杉矶偶遇贾玲专家建议不必谈骨泥色变沉迷短剧的人就像掉进了杀猪盘奥巴马现身唐宁街 黑色着装引猜测七年后宇文玥被薅头发捞上岸事业单位女子向同事水杯投不明物质凯特王妃现身!外出购物视频曝光河南驻马店通报西平中学跳楼事件王树国卸任西安交大校长 师生送别恒大被罚41.75亿到底怎么缴男子被流浪猫绊倒 投喂者赔24万房客欠租失踪 房东直发愁西双版纳热带植物园回应蜉蝣大爆发钱人豪晒法院裁定实锤抄袭外国人感慨凌晨的中国很安全胖东来员工每周单休无小长假白宫:哈马斯三号人物被杀测试车高速逃费 小米:已补缴老人退休金被冒领16年 金额超20万