Smart Eye - King of automotive’s Interior Sensing AI?

En huomaa täällä vielä jaetun Smart Eyen viikko sitten julkaisemaa e-kirjasta “How Euro NCAP will make DMS the New Safety Standard”. Redeyen kommentti ilmeisesti viittaa Euro NCAPin kannalta tuohon, ladattavissa yhteystietoja vastaan täältä:

https://smarteye.se/blogs/how-euro-ncap-will-make-driver-monitoring-systems-dms-the-new-safety-standard/

Vahva usko siihen, että kameralla toteutettu DMS on osa Euro NCAP 5 tähden vaatimusta perustuu siihen, että Smart Eye on mukana vaikuttamassa vaatimusten ja arvioinnin määrittämiseen ja pystyy roolistaan tarjoamaan tällaista sneak peekia tuleviin vaatimuksiin.

So, while we can’t be one hundred percent sure of the details of the 2023 assessment protocol, we can tell you what we know so far thanks to our involvement in the Euro NCAP OSM group.

Tarkemmin Smart Eye on mukana ensinnäkin EuroNCAPin OSM-ryhmän (Occupant Status Monitoring) hyödyntämän CLEPAn (the European Association of Automotive Suppliers) jäsenenä ja Skandinavian organisaatio FKG:n edustajana. Lisäksi SE tuottaa OSM-ryhmälle tietoa OSM:n erikseen hyödyntämän Tier 2 -ryhmän kautta. Aika himmeli :smiley:

Vaatimusten raamit lienevät jo hyvin selvillä, kirjasesta löytyy seuraavia tiedonmurusia aiheesta “How will Driver Monitoring Systems be tested?”

The assessment of Driver Monitoring Systems will be based on three different types of road safety risks: distraction from forward road, fatigue, and unresponsive driver/sudden sickness.

Distraction from forward road refers to any type of situation that takes the driver’s eyes off the road ahead … To receive top marks without falsely annoying the driver, it will need to be able to differentiate between different types of distractions with a very high level of accuracy.

Fatigue will be assessed based on the KSS … the scale we use at Smart Eye when developing our driver monitoring systems, which ensures that the estimates made by our software correspond with how Euro NCAP measures sleepiness.

Kirjasessa esitetään selkeästi, että kamera (EuroNCAP terminologialla “direct driver monitoring”) tulee olemaan vaatimus 5 tähteen.

Euro NCAP refers to camera-based systems as direct driver monitoring, which will be necessary for a car model to receive a five-star rating in the future

Is Smart Eye’s Driver Monitoring Solution Euro NCAP-ready?

As a member of both CLEPA and the Tier 2 group, Smart Eye is helping Euro NCAP formulate the tests and assessment protocol which will be used to rate Driver Monitoring Systems by 2023. … That is why we feel confident that our Driver Monitoring solution is fully prepared to be tested by Euro NCAP – and receive a top rating

Sneak peekia myös vähän kauemmas tulevaan, OMS läpilyönti voi olla paljon lähempänä kuin arvataankaan! Itselleni ainakin tulee yllätyksenä tieto siitä, että EuroNCAP palkitsisi jo ensi vuonna yksinäisten lasten tunnistamisesta autossa:

By including Driver Monitoring in the next assessment protocol, Euro NCAP acknowledges the importance of analyzing not just the state of the car, but the people within it … These emerging technologies are called Interior Sensing and will likely be recognized by Euro NCAP in future iterations of the protocol. For example, from 2022, Euro NCAP will be rewarding points for Child Presence Detection, which can detect a child alone in a car and alert the owner or emergency services to avoid heatstroke fatalities. The same technology can be used for Pet Detection, to avoid heatstroke fatalities in pets left behind in vehicles.

Kyllähän uutisvirta tuntuu keikauttavan taas Smartin sijoituscasea positiivisemmalle laidalle, kun nämä DMS-vaatimukset ovatkin tulossa heti 14 kuukauden päästä, osa autonvalmistajista alkaa jo toipua sirupulasta ja jenkeissäkin regulaatio etenee. Jokerina OMS saattaa oikeasti olla jo varsin lähellä kuten Martin on vihjaillutkin.

40 tykkäystä

Aika lailla Smartin keisi perustuu yhä DMS tai muuhun auton interior sensingiin esim. Redeyen teksteissä. Lopulta se on tosiaan niche-alue. On tietty myös tärkeä referenssi eli jos toimii autossa, niin…

Viime aikaisten yritysostojen kautta avautuu kyllä huomattavasti suurempi TAM. Kaikki muutkin konenäön sovellutukset eikä tarvita hattuun edes kovin monta alumiinifoliorullaa; katseohjaus kaiken maailman laitteisiin, markkinoinnin tehokkuus, kun saadaan välitön palaute katsojasta, esim missä katse harhailee, tunnetilat, pupillareaktiot, ilmeen värähdykset etc, robotiikka, jossa kone lukee interaktiossa kasvoja, koulutus, jota aiemmin ketjussa ollut videokin käsitteli, jos ilmeet ovat hämmentyneitä, voi sanomaa tehostaa etc.

Silmät ovat sielun peili. Markkina ei taida vielä tätä hinnoitella Smarttiin?

19 tykkäystä

Uusi artikkeli Smartin työntekijöiltä. Lukusuositus.

Tässä mielenkiintoinen pätkä, koska Seeingin leiri ml. Colin on huudellut, että vain Seeing osaa tehdä hyvin performoivia ja energiatehokkaita DMS-ratkaisuja.

We also needed to ensure that our deep-learning algorithms could run efficiently on vehicles’ embedded computers, which are based on what is called a system on a chip (SoC). Deep-learning algorithms are typically quite large and these automotive SoCs often run a lot of other code that also requires bandwidth. What’s more, there are many different automotive SoCs, and they vary in how many operations per second they can execute. Affectiva had to design its neural-network software in a way that takes into account the limited computational capacity of these chips.

Our first step in developing this software was to conduct an analysis of the use-case requirements; for example, how often does the system need to check whether the driver is drowsy? Understanding the answers to such questions helps put limits on the complexity of the software we create. And rather than deploying one large all-encompassing deep neural-network system that detects many different behaviors, Affectiva deploys multiple small networks that work in tandem when needed.

We use two other tricks of the trade. First, we use a technique called quantization-aware training, which allows the necessary computations to be carried out with somewhat lower numeric precision. This critical step reduces the complexity of our neural networks and allows them to compute their answers faster, enabling these systems to run efficiently on automotive SoCs.

The second trick has to do with hardware. These days, automotive SoCs contain specialized hardware accelerators, such as graphics processing units (GPUs) and digital signal processors (DSPs), which can execute deep-learning operations very efficiently. We design our algorithms to take advantage of these specialized units.

Alla olevassa pätkässä avataan kahta mahdollista interior sensing kehityspolkua. Voisin kuvitella, että joidenkin vuosien päästä kuluttaja saa itse valita antaako auton kerätä dataa oppiakseen kuskien ajotavoista.

Privacy is also a paramount concern at our company as we contemplate two future directions for Affectiva’s technology. One idea is to go beyond the visual monitoring that our systems currently provide, potentially adding voice analysis and even biometric cues. This multimodal approach could help with tricky problems, such as detecting a driver’s level of frustration or even rage.

Drivers often get irritated with the “intelligent assistants” that turn out to be not so intelligent. Studies have shown that their frustration can manifest as a smile—not one of happiness but of exasperation. A monitoring system that uses facial analysis only would misinterpret this cue. If voice analysis were added, the system would know right away that the person is not expressing joy. And it could potentially provide this feedback to the manufacturer. But consumers are rightly concerned about their speech being monitored and would want to know whether and how that data is being stored.

We’re also interested in giving our monitoring systems the ability to learn continuously. Today, we build AI systems that have been trained on vast amounts of data about human emotions and behaviors, but that stop learning once they’re installed in cars. We think these AI systems would be more valuable if they could gather data over months or years to learn about a vehicle’s regular drivers and what makes them tick.

4 tykkäystä

Tämä on varmasti tulevaisuutta. Yksi asia ihmetyttää: Kiinassa ihmisiä valvotaan kameroin, joista tekoäly tunnistaa ihmisten tunnetiloja. Esimerkiksi kouluissa. Luulisi, että kiinalaisia toimijoita olisi alalla eturintamassa, mutta en ole ainakaan itse kuullut kiinalaisista yhtiöistä. Toki, voi olla, ettei kiinalaisten tätäkään teknologiaa pidetä tietoturvallisena länsimaissa.

3 tykkäystä

Hyviä pointteja, etenkin toi OMS huomio. Smart osti affectivan jotta OMS tuote saatiin kiihdytettyä. Redeyen seminaarissa Martin kommentoi yleisesti m&a markkinaa että firmoja ostetaan kun huomataan että pitää nopeasti saada kompetenssia jota itsellä ei ole…

2 tykkäystä

Sitten on vielä tämäkin suunta
https://www.iaa.de/en/mobility/newsroom/mobility-stories/cars/the-car-as-health-coach

Smart Eye tarvitsee tässä vielä kumppaneita mutta asetelmat näyttävät kyllä hyviltä

8 tykkäystä

Tästä hyötyjä Smartille?

17 tykkäystä

Nyt kun Smartti on noussut luokkaa 35% edellisiltä pohjilta melko nopealla tahdilla, huomio viime aikojen kurssin käyttäytymisestä:

Edellisillä kerroilla kun on noustu yhtä nopeasti ylimyydyn puolelle (RSI), niin paluu lähtötelineisiin on ollut lähes yhtä nopeaa. Ihan vain huomio jos muitakin FOMOttaa tällä hetkellä. :wink:

Toki tällä kertaa voi myös olla toisin.

Disclaimer: ei tietenkään suositus, ja omistan position Smarttia, mutta aina voisi omistaa lisää. :smiley:

39 tykkäystä

Itse tarkastelin myös TA:n kannalta aikaisemmin päivällä. Nyt on noustu MA50, MA100 ja MA200 päälle yhtä kyytiä. Tuon 225.87 SEK / MA200 päälle olisi hyvä sulkea ja tarkkailen myös osalla positiotani jos sen alle uudestaan lähdetään

7 tykkäystä

Tänään noin klo 17.40 Smartin CFO äänessä sijoittajapäivillä

Edit: linkki Smart Eye sijoituskohteena | Sijoittajapäivä 15.11.2021 - YouTube

22 tykkäystä

Smarttisijoittajille tuttu setti. Alla päivitetty kuvaaja. Lisäksi puhetta myös siitä että tulevaisuudessa kameran lisäksi voi olla muitakin tapoja tarkkailla kuljettajaa ja siihen kehitykseen imotions tuo tukea. Imotionshan tekee enemmän liikevaihtoa kuin smartti…

26 tykkäystä

Ei suoraan liiketoimintaa liity, mutta Smart Eye lähetti twitterissä terveisiä lahden toiselle puolelle.

Olisi kiva tietää mikäköhän luku jossakin toisessa universumisissa olisi ilman Timontin tutkimuksia.

109 tykkäystä

Näkeekö kukaan muu tätä mahdollisena uhkana?

Pari vuotta Smartin kelkassa olleena tämä on ollut isoin downside omissa pohdinnoissa . Omat ESG kriteerit eivät kyllä enää kohtaa jos tämä teknologia myydään kaiken maailman Zuckerbergeille kohdennetun mainonnan keinoihin - puhumattakaan mikäli tällä kerättäisiin populaatiotason dataa myöhemmin päätettävää tarvetta varten.

Ja toki toisaalta voi innolla odottaa tuota potentiaalia…

4 tykkäystä

Kiinassa Guangzhoussa ja Los Angelesissa on menossa isot automessut. Erityisesti Kiinassa on esitelty paljon mielenkiintoisia uutuuksia. Muutamia poimintoja tässä.

Huawei esitteli Premium automerkin Avatr:n esikoisen yhdessä akkuvalmistaja CATLin ja autovalmistaja Changanin kanssa.

Huawei on hakenut patenttia DMS analytiikalle. Hakemuksessa mainitaan DMS-toimittajana Smart Eye.

https://worldwide.espacenet.com/publicationDetails/biblio?II=4&ND=3&adjacent=true&locale=en_EP&FT=D&date=20211118&CC=US&NR=2021357670A1&KC=A1

Buick esittelee tulevaisuuden visioitaan sähkötila-autollaan.

Auton ja matkustajien vuorovaikutusta kuvataan seuraavasti ” For the driver, there is an intelligent cockpit system with a side screen that arcs gently towards them for easy use. Most of the infotainment features, though, can be operated using voice-controls. A VR vision system, meanwhile, creates a new “immersive human-vehicle interaction experience”

Xpengin Adas-järjestelmä on ehtinyt jo neljänteen sukupolveen. Esittelyssä kansainväliseen myyntiin tuleva G9. DMS mukana toista sukupolvea.

Losissa on nähtävänä myös suomalaista DMS-osaamista. Basemark yhdessä Unikien kanssa esittelee ADAS-järjestelmät yhdelle sirulle yhdistävää Rocksolid Corea.

Samaan aikaan Geelyn premium-brändi Zeekr on aloittanut 001 toimitukset. Näissä kaiketi Smart Eye sisällä

Maksumuurin takana kerrotaan auton tunnistavan etumatkustajien kasvot ja asettelevan säädöt sopiviksi.

35 tykkäystä

“Vaikka Tesla-pomo Elon Musk onkin useaan otteeseen antanut ymmärtää, että täysi autonomisuus on aivan nurkan takana, on totuus toinen. CNN:n toimittaja toteaa, ettei vielä olla lähelläkään itsenäisesti ajavia autoja. Kommenttina olikin, että Teslan full self-driving on tässä vaiheessa enemmänkin kavereille esiteltävä kiva temppu kuin oikeasti hyödyllinen varuste.”

Smart Eyen avoimet positiot. Affectivalla ja iMotionsilla omansa.

16 tykkäystä

Toimialakuulumisia. Kiinnostavaa myös Smartin osakkeenomistajille

12 tykkäystä

Kovin hiljaista on ollut Smart Eye palstalla kun kaikki tonkii Evolutionia. Puhuttaisiinko välillä vaikka tästä?

40 tykkäystä

Eli tiivistettynä (lainaus Aptivin Q3 earnings callista): “business reward with Mercedes-Benz to provide multipurpose interior sensing solutions on their next gen electric vehicle platform”.

Tietääkseni Aptivin toistaiseksi ainoa dms/oms toimittaja on ollut Smart Eye.

34 tykkäystä

Smart Eye mukana huomenna Redeyen teknologiapäivässä. 20 minuutin puheenvuoro kello 11.27.
https://www.redeye.se/events/815894/redeye-technology-day-2021
Rekisteröitymällä pääsee katsomaan

15 tykkäystä

Ainakin tämä kosketusnäyttöpula koskettaa juuri Smartin BMW-malleja (CLAR-alusta). Listassa on poisluettuna i4, mikä viittaisi siihen että BMW priorisoi näytöt tällä hetkellä EV-malleihin (niissä taas Seeing on vakiona mukana).

Uudet 3-sarjan autot, 4-sarjan Coupe, Convertible ja Gran Coupe, pl. i4, sekä X5, X6, X7 ja Z4 toimitetaan toistaiseksi ilman kosketusnäyttöä.

Hyvin mahdollista, että vaikuttaa myös DMS-kameroiden asennukseen koska yleensä ainakin diginäyttö ja DMS-kamera ovat samassa lisävarustepaketissa olleet (driving assistant professional).

13 tykkäystä