自動駕駛汽車的挑戰
對於自動駕駛,將多個感測器組合在一起,並將其數據傳輸到所謂的ECU(電子中央單元),在該ECU(電子中央單元)中,來自感測器的數據被聯合分析並計算相關動作。來自這些感測器的數據需要以最大的回應能力進行處理,因此意味著整個數據流的延遲非常低。
在實現方面,考慮到感測器的數量,需要盡可能地限制功耗。車內的布線也很關鍵。高解析度攝像機和有限的介面頻寬需要智慧壓縮,以減少低延遲傳輸和/或聚合一個埠/電纜上的多個感測器流期間的頻寬。我們的解決方案適用於任何協定,如MIPI或汽車乙太網,並在 FPGA, ASIC, CPU 或 GPU.
車載傳輸(或資訊娛樂系統)是車輛硬體和軟體的集合,提供音訊或視頻娛樂,如汽車導航系統、視頻播放機、USB 和藍牙連接、Carputers、車載互聯網和WiFi。 intoPIX 能夠以無損品質和微秒級延遲傳輸視頻,並採用新技術,例如 JPEG XS(參見 TicoXS)
汽車總是需要更多的攝像頭來產生令人難以置信的數據量,因此頻寬更大。
我們的目標與新的 RAW CFA壓縮(參見TicoRAW)是為了避免沉重的電纜的倍增,這意味著額外的成本,額外的空間需求和額外的功耗。此外,在這種極其敏感的使用中,我們不能忽視延遲;最輕微的延遲可能會產生災難性的後果。
intoPIX 汽車解決方案概述
用於汽車感測器數據的TicoRAW
我們的TicoRAW解決方案能夠優化 RAW 拜耳(和其他CFA數據)在捕獲、傳輸、存儲和機器學習過程中以光速進行。相機功耗低,能夠捕獲、存儲和流式傳輸 RAW (CFA,拜耳),包括尺寸和頻寬減少10倍的HDR。我們的產品系列 FPGA & ASIC 內核(編碼器/解碼器)支援高解析度(從 2MP 到 64MP 或更高),解析度為 30、60、120 fps(或更高),可處理 RGGB、RYYCy、RCCC 和其他從 8 位到 16 位的 CFA 模式。
無損(數學上)壓縮能力也是一個內在功能。我們的編碼/解碼軟體庫面向 x86-64 CPU , ARM64 CPU 和 Nvidia GPU 具有令人難以置信的性能!軟體功能也是用於開發目的的車輛數據採集的關鍵優勢。
TicoXS (JPEG XS) 用於汽車視頻連接
intoPIX 具有廣泛的範圍 JPEG XS實現來自 IP-核心 FPGA & ASIC 到軟體庫。新的輕量級低延遲ISO標準旨在取代未壓縮的視頻,保留微秒級延遲,無損品質,編碼/解碼複雜性最小,完美滿足汽車行業的需求。
的終極好處 intoPIX 汽車解決方案
TicoRAW | TicoXS | |
---|---|---|
極低延遲 | ||
原始品質 無損用於人類或機器視覺 | ||
帶寬較低 | ||
降低設備的成本和功耗 | ||
支援高解析度 | ||
相容 MIPI 介面或汽車乙太網 | ||
更少的介面,更少的電纜,更少的存儲 |
TicoRAW 頻寬縮減 示例
用於通過MIPI或自動乙太網連接感測器數據
例如,TicoRAW感測器壓縮比為4:1(如下表所示),它將使用(至少)4倍的頻寬,或者在相同頻寬,相同數量的MIPI通道上支援(至少)4倍以上的解析度,或在同一根電線上傳輸4倍以上的感測器。
請注意,對於下面提到的許多格式,TicoRAW可以壓縮到10:1並低於1 Gbps。
< 2.5 Gbps |
< 5 Gbps |
< 10 Gbps |
定期 RAW (單位:千兆位/秒)
格式 | 幀率 | 8 位 | 10 位 | 12 位 | 14 位 | 16 位 |
---|---|---|---|---|---|---|
1MP/720p | 30 | 0.22 | 0.28 | 0.33 | 0.39 | 0.44 |
1MP/720p | 60 | 0.44 | 0.55 | 0.66 | 0.77 | 0.88 |
2MP/1080p | 30 | 0.50 | 0.62 | 0.75 | 0.87 | 1.00 |
2MP/1080p | 60 | 1.00 | 1.24 | 1.49 | 1.74 | 1.99 |
4MP | 30 | 0.91 | 1.13 | 1.36 | 1.59 | 1.81 |
4MP | 60 | 1.81 | 2.27 | 2.72 | 3.1 | 3.63 |
4K 超高清 | 30 | 1.99 | 2.49 | 2.99 | 3.48 | 3.98 |
4K 超高清 | 60 | 3.98 | 4.98 | 5.97 | 6.97 | 7.96 |
10MP | 30 | 2.26 | 2.83 | 3.40 | 3.96 | 4.53 |
10MP | 60 | 4.53 | 5.66 | 6.79 | 7.93 | 9. 06 |
TicoRAW(單位:千兆位/秒)
格式 | 幀率 | 8 位 | 10 位 | 12 位 | 14 位 | 16 位 |
---|---|---|---|---|---|---|
1MP/720p | 30 | 0.06 | 0.07 | 0.08 | 0.10 | 0.11 |
1MP/720p | 60 | 0.11 | 0.14 | 0.17 | 0.19 | 0.22 |
2MP/1080p | 30 | 0.12 | 0.16 | 0.19 | 0.22 | 0.25 |
2MP/1080p | 60 | 0.25 | 0.31 | 0.37 | 0.44 | 0.50 |
4MP | 30 | 0.23 | 0.28 | 0.34 | 0.40 | 0.45 |
4MP | 60 | 0.45 | 0.57 | 0.68 | 0.78 | 0.91 |
4K 超高清 | 30 | 0.25 | 0.62 | 0.75 | 0.87 | 1.00 |
4K 超高清 | 60 | 1.00 | 1.25 | 1.49 | 1.74 | 1.99 |
10MP | 30 | 0.57 | 0.71 | 0.85 | 0.99 | 1.13 |
10MP | 60 | 1.13 | 1.41 | 1.70 | 1.98 | 2.27 |