Yo nan lòd yo adapte yo ak anviwònman an iben louvri, kò entelijan bezwen pran mouvman yo ki nan kò a nan ki antoure moun yo ak estrikti a nan sèn nan nan tan reyèl. Pèsepsyon tradisyonèl la vle di ki baze sou detèktè inèrsyèl ak kamera, ki gen pwoblèm ki gen nan tan long flote ak sansiblite nan limyè ak anviwònman chanjman dinamik, respektivman, yo difisil a satisfè demann lan pou mouvman kò moun ak kaptire sèn nan anviwònman konplèks nan aplikasyon an Jaden nan kondwi entelijan, sèvis robotic, ak fòmasyon espò.
Depi 2022, ekip la nan professeur Cheng Wang ak professeur Chenglu Wen te premye a ki pwopoze lidar teknoloji mouvman imen kaptire nan tèren entènasyonal la (lidarcap, CVPR 2022; HSC4D, CVPR 2022; Sloper4d, CVPR 2023). Nan piblikasyon sa a, HISC4D, ekip la kraze nan yon metòd pou pran divès mouvman entèraksyon de-moun ak sèn 3D nan premye moun ki wè nan gwo-echèl sèn andedan kay la ak deyò. Metòd la konstwi yon milti-etap fondasyon optimize jwenti pa fizyon konsèy inèrsyèl ak done lidar, ki efektivman rezoud pwoblèm nan flote ki te koze pa konsèy inèrsyèl ak siyifikativman amelyore presizyon nan sèn rekonstriksyon ak pwolonje ranje a nan espasyal, mouvman imen ak kaptire entèraksyon. An menm tan an, se premye multimodal de-moun entèraksyon dataset la lage, ki kouvri diferan kalite sèn ak divèsifye mouvman moun, bay fòmasyon done resous pou jaden rechèch ki gen rapò.hisc4d itilize lidar kòm Capteur a nwayo rekonstwi mouvman imen ak sèn 3D nan Menm lè a, ki ouvè yon nouvo fason pou panse pou entèlijans incorporée pou yo ale nan deyò yo vas ak entegre nan foul moun yo.
