จาก Beating monitor รถยนต์ไฟฟ้า (EV) ของ Xiaomi ได้ประกาศ Xiaomi EV World Model (JointWM architecture) โดยผสานโมดูลการสร้างภาพ 3D และการสร้างวิดีโอเข้าด้วยกันสำหรับการจำลองการขับขี่แบบอัตโนมัติ กรอบงานดังกล่าวยึดฉากด้วยเรขาคณิต 3D เป็นแกนหลักเชิงกายภาพ ขณะที่โมดูลการสร้างจะเติมรายละเอียดภาพและคาดการณ์พื้นที่ที่ไม่ได้สังเกตเห็น ระบบทำได้ 28.48 PSNR ในการทดสอบความแม่นยำการสร้างของ Waymo และยังคงรักษาสมรรถนะระดับแนวหน้าในการทดสอบ nuScenes แบบ zero-shot generalization ความเร็วในการสร้างอยู่ที่ 0.19 วินาทีสำหรับการประมวลผลมุมมองเดียว และ 0.46 วินาทีสำหรับการประมวลผลสามมุมมอง รองรับการสร้างวิดีโอนานสูงสุด 1 นาที ซึ่งเร็วกว่า baseline แบบ autoregressive Epona ถึง 5.6 เท่า โซลูชันนี้ถูกนำไปใช้ใน 3 สถานการณ์ ได้แก่ การฝึกโมเดลการรับรู้ด้วยข้อมูลสังเคราะห์มากกว่า 100,000 ชิ้น การสร้างการจำลองแบบ closed-loop ที่มีความละเอียดสูงสำหรับเคสขอบ และการขับเคลื่อนคู่มือการขับในแอปด้วยคำแนะนำวิดีโอแบบ generative

news.view.source

news.article.disclaimer

news.related.news

2 ชั่วโมง ที่แล้ว

Zero One Motors เสร็จสิ้นการระดมทุนรอบ $200M Series B2 เมื่อวันที่ 26 พฤษภาคม

2 ชั่วโมง ที่แล้ว

สถาบันวิจัยโลหะของจีนพัฒนาวัสดุคอมโพสิตอะลูมิเนียมทนความร้อนสูง

4 ชั่วโมง ที่แล้ว

SK Hynix เปิดตัวเทคโนโลยีการระบายความร้อน iHBM สำหรับ HBM5 และหน่วยความจำเจเนอเรชันถัดไป วันนี้

19 ชั่วโมง ที่แล้ว

Huawei, USTC และมหาวิทยาลัยปักกิ่งทำความเร็วเพิ่มขึ้น 58% บน Ascend A3 สำหรับการฝึกโมเดล MoE

19 ชั่วโมง ที่แล้ว