明(míng)景跨镜追踪行(xíng)人(rén)再识别技術(shù)--北京明(míng)景科技

• 2020/01/21

电影《速度与激情7》中的“天眼”系统，可(kě)以整合全球所有數(shù)据采集、监控设备，通(tōng)过手机音頻(pín)、监控摄像头等采集大量數(shù)据，再使用大數(shù)据和(hé)人(rén)脸识别等技術(shù)迅速进行(xíng)分析和(hé)处理，在极短的時(shí)間(jiān)內(nèi)就找到目标人(rén)物(wù)和(hé)目标车辆进行(xíng)追踪，让人(rén)或物(wù)无所遁形。

人(rén)脸识别技術(shù)越来越广泛运用到生活中，但(dàn)仍然存在盲点，比如(rú)低(dī)头或是在角落，摄像头往往无法识别到完整人(rén)脸。怎样才能(néng)不刷脸也能(néng)识人(rén)？当下(xià)，跨镜追踪技術(shù)已成為(wèi)计算机視(shì)觉研究领域熱(rè)门方向。

跨镜追踪技術(shù)的定义

什么是跨镜追踪技術(shù)？

跨镜追踪（Person Re-Identification，简称 ReID）技術(shù)是当前计算机視(shì)觉研究的熱(rè)门方向，主要(yào)解决跨摄像头跨场景下(xià)行(xíng)人(rén)的识别与检索。是利用计算机視(shì)觉技術(shù)判断图像或者視(shì)頻(pín)序列中是否存在特定行(xíng)人(rén)的技術(shù)。它可(kě)以无需人(rén)脸，只看(kàn)穿着、体态、发型就能(néng)识别某个人(rén)。作(zuò)為(wèi)人(rén)脸识别技術(shù)的重要(yào)补充，可(kě)以对无法获取清晰人(rén)脸的行(xíng)人(rén)进行(xíng)跨摄像头连续跟踪。

跨镜追踪（ReID）技術(shù)能(néng)够根据行(xíng)人(rén)的穿着、体态、发型等信息认知行(xíng)人(rén)，与人(rén)脸识别技術(shù)结合能(néng)够适用于更多新的应用场景，提供更加丰富的服务，将人(rén)工(gōng)智能(néng)的认知水平提高到一(yī)个新的阶段。

明(míng)景跨镜追踪行(xíng)人(rén)再识别技術(shù)

明(míng)景跨镜追踪行(xíng)人(rén)再识别技術(shù)实现在摄像头的部署环境中，通(tōng)过上(shàng)传特定人(rén)物(wù)的照片，同時(shí)检测多个不同位置的摄像头數(shù)据，精准找出所有摄像头抓拍到的目标人(rén)物(wù)图像，并生成他(tā)/她的行(xíng)动時(shí)空轨迹，达到跨镜追踪的目的。

由于多个摄像头下(xià)拍摄行(xíng)人(rén)的角度、光(guāng)线等条件不同，图像中的行(xíng)人(rén)很(hěn)难被判断為(wèi)同一(yī)个人(rén)。所以就要(yào)找到行(xíng)人(rén)上(shàng)的局部不变的部分，比如(rú)：衣服颜色，衣服纹理，手提包，背包等。同時(shí)行(xíng)人(rén)兼具刚性和(hé)柔性的特性 ，外(wài)观易受穿着、尺度、遮挡、姿态和(hé)視(shì)角等影响，行(xíng)人(rén)再识别是一(yī)个既具研究价值同時(shí)又极富挑战性的课题，為(wèi)了(le)提升Re-ID的可(kě)识别率，北京明(míng)景科技做(zuò)了(le)多方面的算法优化，致力于加速Re-ID的应用落地(dì)。

行(xíng)人(rén)检测，任务是在给定图片中检测出行(xíng)人(rén)位置的矩形框。

行(xíng)人(rén)分割以及背景替换，行(xíng)人(rén)分割比行(xíng)人(rén)检测更精准，预估每个行(xíng)人(rén)在图片里的像素概率，把這(zhè)个像素分割出来是人(rén)或是背景，這(zhè)時(shí)用到很(hěn)多P图的场景，比如(rú)背景替换。如(rú)网紅(hóng)直播時(shí)，可(kě)以把实時(shí)直播的背景替换成外(wài)景。

骨架关键点检测及姿态识别，一(yī)般识别出人(rén)体的几个关键点，比如(rú)头部、肩部、手掌、脚掌，用到行(xíng)人(rén)姿态识别的任务中。

行(xíng)人(rén)跟踪“ MOT (多目标)”的技術(shù)，主要(yào)是研究人(rén)在单个摄像头里行(xíng)进的轨迹，每个人(rén)后面拖了(le)一(yī)根线，這(zhè)根线表示這(zhè)个人(rén)在摄像头里行(xíng)进的轨迹，和(hé) ReID 技術(shù)结合在一(yī)起可(kě)以形成跨镜头的细粒度的轨迹跟踪。

动作(zuò)识别，动作(zuò)识别是基于視(shì)頻(pín)的內(nèi)容理解做(zuò)的，技術(shù)更加复雜(zá)一(yī)点，但(dàn)是它与人(rén)类的认知更加接近，应用场景会更多，這(zhè)个技術(shù)目前并不成熟。动作(zuò)识别可(kě)以有非常多的应用，比如(rú)闯紅(hóng)灯，还有公共场合突发事件的智能(néng)认知，像偷窃、聚众斗殴，摄像头识别出這(zhè)样的行(xíng)為(wèi)之后可(kě)以采取智能(néng)措施，比如(rú)自(zì)动报警。

行(xíng)人(rén)属性结构化，把行(xíng)人(rén)的属性提炼出来，比如(rú)他(tā)衣服的颜色、裤子的类型、背包的颜色。