De Renesas Electronics Corporation kondigde de gezamenlijke ontwikkeling aan van een op deep learning gebaseerde objectherkenningsoplossing voor slimme camera's die worden gebruikt in geavanceerde rijhulpsystemen van de volgende generatie en camera's voor ADAS-niveau 2 en hoger. Deze nieuwe slimme camera-oplossing maakt gebruik van deep learning voor objectherkenning met hoge precisie en laag stroomverbruik; het versnelt ook de wijdverbreide aanpassing van ADAS.
Door de samenwerking tussen Renesas en StradVision is deze nieuwe technologie in staat kwetsbare weggebruikers (VRU's) zoals voetgangers en fietsers te herkennen, maar ook andere voertuigen en rijstrookmarkeringen. De StradVision heeft hun software geoptimaliseerd voor de Renesas R-Car automotive system-on-chip (SoC) -producten R-Car V3H en R-Car V3M die het trackrecord hebben als de in massa geproduceerde voertuigen. Deze R-Car-apparaten hebben een speciale engine voor deep learning-verwerking genaamd CNN-IP (Convolution Neural Network Intellectual Property), waardoor ze het SVNet automotive deep learning-netwerk van StradVision met hoge snelheid kunnen gebruiken.
Belangrijkste kenmerken
1) De oplossing ondersteunt een eerdere evaluatie van massaproductie
De SVNet deep learning-software van StradVision is een krachtige AI-perceptie-oplossing voor massaproductie van ADAS-systemen vanwege het vermogen om nauwkeurig te herkennen bij weinig licht en het vermogen om met occlusie om te gaan wanneer objecten gedeeltelijk worden verborgen door andere objecten. De basissoftware van de R-Car V3H kan tegelijkertijd het voertuig, de persoon en de rijstrook herkennen door het beeld te verwerken met een snelheid van 25 frames per seconde, wat een snelle evaluatie en POC-ontwikkeling mogelijk maakt. Met behulp van deze basismogelijkheden kan een ontwikkelaar de software aanpassen door tekens, markeringen en andere objecten toe te voegen als herkenningsdoel.
2) R-Car V3H en R-Car V3M SoC's verhogen de betrouwbaarheid van het slimme camerasysteem en verlagen de kosten
De Renesas R-Car V3H en R-Car V3M zijn voorzien van de IMP-X5-beeldherkenningsengine. Door op diep leren gebaseerde complexe objectherkenning en zeer verifieerbare beeldherkenningsverwerking te combineren met door de mens gemaakte regels, kan de ontwerper een robuust systeem bouwen. De on-chip Image Signal Processor (ISP) kan de sensorsignalen omzetten voor beeldweergave en herkenningsverwerking. Het is dus mogelijk om een systeem te configureren met goedkope camera's zonder ingebouwde ISP. Dit maakte het mogelijk om een systeem te configureren met goedkope camera's, waardoor de totale stuklijstkosten (BOM) werden verlaagd.
De nieuwe gezamenlijke deep learning-oplossing, inclusief software- en ontwikkelingsondersteuning van StradVision, zal begin 2020 beschikbaar zijn voor de ontwikkelaars.