intoPIX-기반
오토모티브 및 자율 주행 솔루션
비용 효율적이고 효율적인 첨단 운전자 지원 시스템(ADAS) 또는 자율 주행(ADS) 구축에 대한 수요가 증가함에 따라 센서에서 처리 장치까지의 이미징 파이프라인을 간소화하기 위해 새로운 등급의 압축 IP 코어가 필요합니다. intoPIX 은 ADAS / AD 시스템의 설계, 테스트 및 배포에서 전송 대역폭을 줄이고 스토리지 용량을 늘리는 획기적인 솔루션을 제공합니다.
다중 비전 기반 알고리즘을 위해 매우 낮은 복잡성, 짧은 대기 시간 및 무손실 이미지 품질로 실행되는 최신 이미지 센서 성능을 통합하는 문제를 해결하는데, intoPIX TicoRAW 및 TicoXS IP-코어는 이상적입니다.
자율주행차의 과제
자율주행을 위해, 여러 개의 센서 데이터들은 결합되어 공동으로 분석하고 관련 동작을 계산하기 위해 이른바 ECU(Electronic Central Unit)로 전송됩니다. 이러한 센서의 데이터는 최대 응답성으로 처리되어야 하므로 전체 데이터 흐름에서 대기 시간이 매우 짧아야 합니다.
구현 측면에서 센서 수를 감안하면, 전력 소비는 가능한 한 제한되어야 합니다. 차량 내부의 케이블도 중요합니다. 고해상도 카메라와 제한된 인터페이스 대역폭을 사용하는 환경에서는 저지연 전송 중 대역폭을 줄이고/또는 하나의 포트/케이블에 여러 센서 스트림을 집계하기 위한 스마트 압축이 필요합니다. 당사 솔루션은 MIPI 또는 자동차 이더넷과 같은 모든 프로토콜에 적합하며 FPGA, ASIC, CPU 또는 GPU에서 실행됩니다.
차량 내 전송 또는 인포테인먼트는 차량 내 내비게이션 시스템, 비디오 플레이어, USB 및 블루투스 연결, 카컴퓨터, 차량 내 인터넷 및 WiFi와 같은 오디오 또는 비디오 엔터테인먼트를 제공하는 차량 내 하드웨어 및 소프트웨어의 모음입니다. intoPIX JPEG XS(TicoXS 참조)와 같은 신기술을 통해 무손실 품질 및 마이크로초 지연 시간내에 비디오를 전송할 수 있습니다.
앞으로 자동차에는 엄청난 양의 데이터를 생성하는 더 많은 카메라가 필요하므로 더 많은 대역폭이 필요합니다.
새로운 RAW CFA 압축 (TicoRAW 참조)의 목표는 추가 비용, 추가 공간 요구 사항 및 추가 전력 소비를 의미하는 무거운 케이블의 증가를 방지하는 것입니다. 더욱이 이러한 종류의 극도로 민감한 사용에서는 대기 시간을 무시할 수 없습니다. 약간의 지연이 치명적인 결과를 초래할 수 있습니다.
intoPIX 오토모티브 솔루션 개요
TicoRAW 오토모티브 센서 데이터 압축
당사의 TicoRAW 솔루션은 캡처, 전송, 저장 및 머신러닝 중에 빛의 속도로 RAW Bayer(및 기타 CFA 데이터)를 최적화할 수 있습니다. 카메라에서 저전력만 사용하여 10배 감소된 크기와 대역폭에서 HDR을 포함한 RAW(CFA, Bayer)를 캡처, 저장 및 스트리밍할 수 있습니다. 당사의 다양한 FPGA 및 ASIC 코어(인코더/디코더)는 30, 60, 120fps(또는 그 이상)에서 고해상도(2MP~64MP 이상)를 지원하고 RGGB, RYYCy, RCCC 및 기타 CFA 패턴을 8~16bit 까지 처리합니다.
무손실(수학적) 압축 기능도 이제 본질적인 기능입니다. 당사의 인코딩/디코딩 소프트웨어 라이브러리는 믿을 수 없는 성능으로 x86-64 CPU, ARM64 CPU 및 Nvidia GPU를 대상으로 운영됩니다! 이 소프트웨어 기능은 또한 개발 목적으로 차량에서 데이터를 수집하는 데 있어 중요한 이점을 제공합니다.
차량용 비디오 커넥티비티를 위한 TicoXS(JPEG XS)
intoPIX는 FPGA 및 ASIC용 IP-코어에서 소프트웨어 라이브러리에 이르기까지 광범위한 JPEG XS 구현을 제공합니다. 새로운 경량 저지연 ISO 표준은 압축되지 않은 비디오를 대체하도록 설계되었으며, 오토모티브 산업의 요구에 완벽하게 응답하는 최소 인코딩/디코딩 복잡성으로 마이크로초 지연, 무손실 품질을 보존합니다.
intoPIX 오토모티브 솔루션의 궁극적인 이점
TicoRAW | TicoXS | |
---|---|---|
매우 낮은 대기 시간 | ||
깨끗한 품질 휴먼 또는 머신 비전을 위한 무손실 | ||
낮은 대역폭 | ||
장치의 비용 및 전력 소비 감소 | ||
고해상도 지원 | ||
MIPI 인터페이스 또는 오토모티브 이더넷 준수 | ||
인터페이스 감소, 케이블 감소, 스토리지 감소 |
TicoRAW 대역폭 감소 예시
MIPI 또는 오토모티브 이더넷을 통한 센서 데이터 인터페이스
예를 들어 TicoRAW 센서 압축이 4:1인 경우(아래 표 참조) 동일한 대역폭, 동일한 수의 MIPI 레인에서 (최소) 4배 더 적은 대역폭을 사용하거나 (최소) 4배 더 많은 해상도를 지원하거나 또는 동일한 케이블에서 4배 더 많은 센서 데이터를 전송합니다.
TicoRAW는 아래에 언급된 여러 형식에 대해 10:1까지 무손실 압축하고 대역폭을 1Gbps 미만으로 떨어뜨릴 수 있습니다.
< 2.5 Gbps |
< 5 Gbps |
< 10 Gbps |
일반 RAW (Gbit/s)
형식 | Fps | 8 비트 | 10 비트 | 12 비트 | 14 비트 | 16 비트 |
---|---|---|---|---|---|---|
1MP/720p | 30 | 0.22 | 0.28 | 0.33 | 0.39 | 0.44 |
1MP/720p | 60 | 0.44 | 0.55 | 0.66 | 0.77 | 0.88 |
2MP/1080p | 30 | 0.50 | 0.62 | 0.75 | 0.87 | 1.00 |
2MP/1080p | 60 | 1.00 | 1.24 | 1.49 | 1.74 | 1.99 |
4MP | 30 | 0.91 | 1.13 | 1.36 | 1.59 | 1.81 |
4MP | 60 | 1.81 | 2.27 | 2.72 | 3.1 | 3.63 |
4K 울트라HD | 30 | 1.99 | 2.49 | 2.99 | 3.48 | 3.98 |
4K 울트라HD | 60 | 3.98 | 4.98 | 5.97 | 6.97 | 7.96 |
10MP | 30 | 2.26 | 2.83 | 3.40 | 3.96 | 4.53 |
10MP | 60 | 4.53 | 5.66 | 6.79 | 7.93 | 9.06 |
TicoRAW (Gbit/s)
형식 | Fps | 8 비트 | 10 비트 | 12 비트 | 14 비트 | 16 비트 |
---|---|---|---|---|---|---|
1MP/720p | 30 | 0.06 | 0.07 | 0.08 | 0.10 | 0.11 |
1MP/720p | 60 | 0.11 | 0.14 | 0.17 | 0.19 | 0.22 |
2MP/1080p | 30 | 0.12 | 0.16 | 0.19 | 0.22 | 0.25 |
2MP/1080p | 60 | 0.25 | 0.31 | 0.37 | 0.44 | 0.50 |
4MP | 30 | 0.23 | 0.28 | 0.34 | 0.40 | 0.45 |
4MP | 60 | 0.45 | 0.57 | 0.68 | 0.78 | 0.91 |
4K 울트라HD | 30 | 0.25 | 0.62 | 0.75 | 0.87 | 1.00 |
4K 울트라HD | 60 | 1.00 | 1.25 | 1.49 | 1.74 | 1.99 |
10MP | 30 | 0.57 | 0.71 | 0.85 | 0.99 | 1.13 |
10MP | 60 | 1.13 | 1.41 | 1.70 | 1.98 | 2.27 |