ルネサスは、このたび、MM Solutionsとの協業により、ルネサスの高性能な車載用SoC（System-On-Chips）の「R-Car V3M」および「R-Car V3H」をベースとした車載用スマートカメラアプリケーションの開発を容易化し、迅速化する、オープンなISP（Image Signal Processor）ソリューションを発表する。フロントカメラやサラウンドビューカメラなどのカメラアプリケーションを開発する際に、MM Solutionsの自動車用カメラ開発キット（AutoCDK）を活用することにより、Tier1メーカは、R-Car V3xに内蔵するISPのセンサ調整やチューニングプロセスが容易になる。これにより、競争が厳しい自動車産業において、高い柔軟性と、製品の市場投入にかかる時間短縮を実現する。
このソリューションは、Renesas autonomyプラットフォームの一環として、幅広い開発ニーズに対応。具体的には、ISPに精通したユーザはオープンなインタフェースによりISP機能を自らプログラミングすることができる一方、画質に関する専門知識があればMM Solutionsのツールを活用することにより、開発作業をすぐに始めることが可能だ。
自動運転時代におけるクルマは、周辺環境を検知することが求められる。この時、フロントカメラやサラウンドビューシステムを含むスマートカメラは、交通標識、車線、歩行者、車両、その他の障害物をリアルタイムで検知し、安全・安心な運転環境を実現するために、重要な役割を果たす。高性能なコンピュータビジョンへのニーズに応えるためには、例えば、雨や霧などの厳しい環境でもノイズが少なく、人間の目に近い、あるいはそれ以上の広いダイナミックレンジに対応し、信頼性が高く、柔軟に設定可能なISPが必要だ。同時に、クルマの周囲のリアルな映像を見たいというドライバのニーズに対しても、ISPが画像調整の役割を果たす。
ルネサスは、MM Solutionsとの協業を通じて、人と機械の両方の目をサポートするイメージセンサの、設定や調整を支援するISPソリューションを開発した。ISPの画像処理ソフトウェアを高性能なR-Car V3xに組み込むことにより、特定のカメラに依存しないアプローチを実現。これによってTier1メーカやカメラメーカは、スマートカメラ市場に参入する場合でも、先進の設計をさらに改良する場合でも、自社で選んだECUおよびセンサソリューションを使って柔軟に対応することが可能になる。
ソニーセミコンダクタソリューションズの車載事業部副事業部長である春田勉氏は、次のように述べている。「ADASカメラシステムにおいては、極めて広いダイナミックレンジとLEDフリッカーの抑制を同時に実現することが大きな課題でした。ルネサスのISPソリューションとソニーのイメージセンサを組み合わせることにより、当社の自動車部門のお客様は、この課題を克服し、さらなる高画質を実現することが可能になります」
MM SolutionsのManaging DirectorであるIvan Poibrenski氏は、次のように述べている。「フロントカメラ、サラウンドビュー、およびその他の自動車用カメラアプリケーション向けに、卓越したカメラ品質を達成しながら、市場投入にかかる時間をますます短縮していくためには、複数のプラットフォームに対応したターンキーISPソリューションが不可欠です。我々は、当社の画質に関する優れた専門知識とルネサスの業界をリードするSoC設計を組み合わせて、カメラプラットフォームの選択をサポートする容易に実装可能なソリューションを提供します」
ルネサスのオートモーティブソリューション事業本部のVice PresidentであるJean-Francois Chouteau氏は、次のように述べている。「当社のR-Car V3x SoCに搭載されているISPは、優れた柔軟性と卓越した画質をお客様に提供します。また、カメラシステムのBOMを大幅に削減することで、競争力のある製品を迅速に市場に投入できるようになります。Renesas autonomyプラットフォームの一環として本ソリューションを提供することにより、お客様にとっては、堅牢なミドルウェアが利用可能になるだけでなく、世界的に有名な当社のパートナであるMM Solutionsの画質に関する専門知識も優先的に活用できるようになります」
本ISPソリューションとMM SolutionsのAutoCDKの主な機能
（1）高い柔軟性とコスト効率
ルネサスは、SoCに内蔵したISPを使って各種センサとのPOC（Proof Of Concept）開発をするなど、業界をリードするセンササプライヤとのコラボレーションを続けている。センサに依存しないソリューションにより、特定のセンサ用ISPが不要になるため、ユーザの開発時間を短縮し、システムコストを削減する。
（2）優れた性能と豊富な機能
本ISPソリューションは、複数カメラ用途にも使用できる画素処理性能により、業界最高レベルのセンサ解像度に対応する。ISPソリューションには、シェーディング補正機能や、ローカルおよびグローバルでのトーンマッピング機能などが統合されている。これにより、カメラアプリケーションの高画質を実現する。サラウンドビューシステムでは、ISPソリューションにより色や明るさを調整。具体的には、複数カメラ配列の中で、個別のカメラのパラメータ管理を一元化する。
（3）ISPの幅広い専門知識に対応しており、展開も容易
ISP用ファームウェアAPIにより、ISPソフトウェア開発の専門家にとってのISPのプログラミングプロセスを管理しやすくする。MM SolutionsのAutoCDKにより、画質チューニングの自動化機能を実現した。これにより、多大な学習を必要とすることなく、ユーザは市場投入にかかる時間を短縮することが可能。メインのオペレーティングシステム上でAutoCDKがサポートされているため、先進的なイメージアルゴリズムを自由に追加できるほか、自動露出制御や自動ホワイトバランスなどの機能も埋め込むことができる。
