A Sony revela o sensor ISX038 com saída de imagem RAW e YUV simultânea para sistemas de assistência e direção autônoma

A Sony revela o sensor ISX038 com saída simultânea de imagens RAW e YUV para sistemas de assistência e direção autônoma. (Fonte da imagem: Sony Semiconductor Solutions Corporation)

David Chien (traduzido por Ninh Duy), Published 10/05/2024 🇺🇸 🇫🇷 ...

A Sony revelou o sensor ISX038 com saída simultânea de imagens RAW e YUV para sistemas de assistência e direção autônoma, reduzindo o número de sensores de câmera necessários em veículos automotivos modernos. O sensor é compatível com o popular sistema em um chip Mobileye EyeQ 6 usado por muitos fabricantes de automóveis como a Porsche para seus sistemas avançados de assistência ao motorista (ADAS) https://www.nhtsa.gov/vehicle-safety/driver-assistance-technologies.

O sensor CMOS de 1/1,7 polegada tem pixels de 2,1 μm, o que proporciona ao sensor um intervalo dinâmico de até 130 dB no modo HDR. O sensor tem um intervalo dinâmico de 106 dB quando o modo anti-cintilação de LED está ativado, excedendo a linha de base de 100 dB necessária para a detecção adequada de objetos em cenas com iluminação intensa e crepuscular. O sensor produz vídeo a 30 fps em uma resolução de 3.857 × 2.177 pixels, ou 8,39 megapixels. Isso fornece aos sistemas de assistência ao motorista imagens com resolução e detalhes suficientes para detectar pessoas e barreiras e parar os veículos com segurança antes do impacto.

Os leitores que quiserem ver no escuro podem experimentar uma câmera de visão noturna colorida Sionyx Aurora(vendida aqui na Amazon).

O uso de um sensor em vez de dois também reduz a complexidade dos sistemas, a quantidade de fiação necessária e a carga elétrica nos sistemas elétricos do veículo. Os sistemas típicos de direção autônoma devem usar pelo menos quatro pares de sensores tradicionais para cobrir a visão completa de 360 graus em torno de um automóvel.

Amostras do sensor podem ser adquiridas por ¥15.000 (~US$100). O sensor vem em um pacote BGA de 192 pinos com um tamanho físico de 11,85 × 8,60 mm (0,47 x 0,34 pol.). Os dados são transmitidos por uma saída padrão MIPI Camera Serial Interface 2 (CSI-2).

O sensor ISX038 da Sony reduz a complexidade dos sistemas de direção ao diminuir o número de sensores de câmera necessários. (Fonte da imagem: Sony Semiconductor Solutions Corporation)

Fonte(s)

Comunicado de imprensa da Sony Semiconductor Solutions Corporation

▶ ▼ Comunicado à imprensa

Sony Semiconductor Solutions lança o primeiro sensor de imagem CMOS do setor para câmeras automotivas que pode processar e produzir simultaneamente imagens RAW e YUV

Contribuindo para sistemas simplificados ao expandir os aplicativos de câmera única

Sony Semiconductor Solutions Corporation

Atsugi, Japão - A Sony Semiconductor Solutions Corporation (SSS) anunciou hoje o próximo lançamento do sensor de imagem CMOS ISX038 para câmeras automotivas, o primeiro produto*1 do setor que pode processar e produzir simultaneamente imagens RAW*2 e YUV*3.

O novo sensor possui ISP*4 proprietário em seu interior e pode processar e gerar imagens RAW e YUV simultaneamente. As imagens RAW são necessárias para a detecção e o reconhecimento do ambiente externo em sistemas avançados de assistência ao motorista (ADAS) e sistemas de direção autônoma (AD), enquanto as imagens YUV são fornecidas para aplicações de infoentretenimento, como o gravador de direção e a realidade aumentada (AR).

Ao expandir as aplicações que uma única câmera pode oferecer, o novo produto ajuda a simplificar os sistemas de câmeras automotivas e economiza espaço, custo e energia.

*1 Entre os sensores CMOS para câmeras automotivas. De acordo com a pesquisa da SSS (a partir do anúncio em 4 de outubro de 2024).

*2 Imagem para reconhecimento em um computador.

*3 Imagem para visualização do motorista, como gravação ou exibição em um monitor.

*4 Processador de sinal de imagem - um circuito para processamento de imagens.

ISX038 Sensor de imagem CMOS para câmeras automotivas

Nome do modelo Data de envio da amostra

Preço da amostra

(incluindo impostos)

ISX038 Tipo 1/1.7 (9,30 mm de diagonal)

8.39 megapixels efetivos*5

Sensor de imagem CMOS

Outubro de 2024 ¥15.000*6

*5 Com base no método de especificação de pixel efetivo do sensor de imagem.

*6 Pode variar dependendo do volume enviado e de outras condições.

As funções das câmeras automotivas continuam a se diversificar de acordo com os avanços em ADAS e AD e com as crescentes necessidades e exigências relacionadas à experiência do motorista. Por outro lado, o espaço para a instalação dessas câmeras é limitado, impossibilitando a adição de mais câmeras indefinidamente, o que, por sua vez, criou uma demanda para fazer mais com uma única câmera.

O ISX038 é o primeiro*1 sensor de imagem CMOS do setor para câmeras automotivas que pode processar e produzir simultaneamente imagens RAW e YUV. Ele usa uma estrutura empilhada que consiste em um chip de pixel e um chip lógico com circuito de processamento de sinal, com o ISP proprietário da SSS no chip lógico. Esse design permite que uma única câmera forneça recursos de detecção e reconhecimento de alta precisão do ambiente fora do veículo e informações visuais para auxiliar o motorista como aplicativos de infoentretenimento. Quando comparado aos métodos convencionais, como um sistema com várias câmeras ou um sistema que emite imagens RAW e YUV usando um ISP externo, o novo produto ajuda a simplificar os sistemas de câmeras automotivas, economizando espaço, custos e energia.

O ISX038 oferecerá compatibilidade com o EyeQ™6 System-on-a-Chip (SoC) oferecido atualmente pela Mobileye, para uso em tecnologia ADAS e AD.

Principais recursos

o primeiro sensor do setor*1 capaz de processar e gerar imagens RAW e YUV simultaneamente

O novo sensor é equipado com ISPs dedicados para imagens RAW e YUV e é capaz de gerar dois tipos de imagens simultaneamente com qualidade de imagem otimizada para cada aplicação em duas interfaces independentes. A expansão das aplicações que uma única câmera pode oferecer ajuda a criar sistemas que economizam espaço, custos e energia em comparação com sistemas com várias câmeras ou sistemas com um ISP externo.

ampla faixa dinâmica mesmo durante o uso simultâneo de HDR e atenuação de cintilação de LED

Na condução de automóveis, os objetos devem ser detectados e reconhecidos com precisão, mesmo em ambientes rodoviários com diferenças significativas de brilho, como entradas e saídas de túneis. As câmeras automotivas também precisam suprimir a cintilação do LED, mesmo no modo HDR, para lidar com a crescente prevalência de sinais de LED e outros dispositivos de tráfego. A estrutura proprietária de pixels e o método exclusivo de exposição desse produto melhoram a iluminação de saturação, produzindo uma ampla faixa dinâmica de 106 dB, mesmo quando se emprega simultaneamente HDR e atenuação de cintilação de LED (quando se usa o modo de prioridade de faixa dinâmica, a faixa é ainda mais ampla, de 130 dB). Esse design também ajuda a reduzir os artefatos de movimento*7 gerados durante a captura de objetos em movimento.

*7 Ruído gerado durante a captura de objetos em movimento com HDR.

compatibilidade com produtos convencionais*8

Esse produto compartilha a mesma compatibilidade com os produtos convencionais da SSS*8 , que já construíram um histórico comprovado de aplicações ADAS e AD com vários fabricantes de automóveis. O novo produto possibilita a reutilização de ativos de dados coletados em produtos anteriores, como dados de direção de câmeras automotivas. Isso ajuda a simplificar o desenvolvimento de ADAS e AD para fabricantes de automóveis e parceiros.

*8 Sensor de imagem CMOS IMX728 1/1.7 tipo 8,39 megapixels efetivos da SSS.

em conformidade com os padrões exigidos para aplicativos automotivos

O produto é qualificado para testes de confiabilidade de componentes eletrônicos automotivos AEC-Q100 Grau 2 por produção em massa. Além disso, a SSS introduziu um processo de desenvolvimento em conformidade com o padrão de segurança funcional de veículos rodoviários ISO 26262, no nível de integridade de segurança automotiva ASIL-B(D). Isso contribui para melhorar a confiabilidade do sistema de câmeras automotivas.

Principais especificações

Nome do modelo ISX038

Pixels efetivos 3.857×2.177(H×V), aprox. 8,39 megapixels

Tamanho da imagem Diagonal 9,30 mm (tipo 1/1,72)

Tamanho da célula unitária 2,1 μm×2,1 μm (H×V)

Taxa de quadros (todos os pixels) 30 fps (saída dupla RAW&YUV)

Sensibilidade (valor padrão F5.6, 1/30 segundo cumulativo) 880 mV (pixel verde)

Faixa dinâmica (padrão EMVA 1288)

106 dB (com atenuação de cintilação de LED)

130 dB (prioridade de faixa dinâmica)

Interface Saída serial MIPI CSI-2

(Porta única com 4 vias / Porta dupla com 2 vias por porta)