英伟达在2024年推出了Holoscan Sensor Bridge(HSB),旨在通过以太网技术革新车载摄像头视频传输方案。这项技术革新不仅提升了数据传输效率,也为
目前,车载摄像头视频传输主要依赖于MIPI CSI-C或D等解串行方案,这种方案的痛点在于延迟较高。HSB通过使用以太网替代传统的解串行方案,实现了低延迟的优势。英伟达的数据显示,HSB的延迟比USB摄像头低5倍,比MIPI摄像头低1.5倍,玻璃到玻璃的延迟低至17毫秒。这对于需要实时操作的边缘系统至关重要。通过使用RDMA和以太网摄像头,HSB可以将数据直接传输到GPU内存,CPU利用率几乎为零,从而缩短响应时间。
必一运动官网
HSB并非简单的技术堆叠,而是一套完整的软硬件系统。其核心优势体现在以下几个方面:
针对最新的Thor平台,HSB配备了4个25GbE以太网接口,总带宽达到十万兆,足以支持多个高分辨率摄像头。相比之下,Orin平台的以太网接口数量有限,难以满足多摄像头需求。
HSB的低延迟特性使其更适用于对实时性要求极高的应用场景,例如自动驾驶和机器人。200万像素10比特色彩下,HSB比GMSL要快大约16秒,分辨率越高,HSB低延迟越明显。
HSB采用用户空间API取代传统的内核空间驱动,开发者无需为摄像头和控制功能创建单独的驱动。这种简化的方法使开发者能够专注于应用程序逻辑,而不是低级驱动开发。
以太网的另一个关键优势是便于时间同步,特别是通过TSN协议中的802.1AS-2020标准。HSB能够将内部时钟与主机系统同步,确保采集时对每一项传感器数据进行精确的时间记。这对于
虽然目前HSB主要面向具身智能领域,但其在汽车领域的应用潜力同样巨大。然而,HSB目前面临的挑战在于成本和复杂性。由于使用了FPGA和接口转换芯片,其价格较高,在车载领域的推广面临挑战。但是,随着技术的不断发展和成本的降低,HSB有望在车载市场占据一席之地。未来,HSB在汽车领域中的应用将主要集中在高级驾驶辅助系统(ADAS)和自动驾驶领域。此外,随着边缘计算和传感器融合技术的不断发展,对低延迟、高带宽的摄像头传输方案的需求将持续增长。
必一运动官网