Smart Eye - King of automotive’s Interior Sensing AI?

Tänään noin klo 17.40 Smartin CFO äänessä sijoittajapäivillä

Edit: linkki Smart Eye sijoituskohteena | Sijoittajapäivä 15.11.2021 - YouTube

22 tykkäystä

Smarttisijoittajille tuttu setti. Alla päivitetty kuvaaja. Lisäksi puhetta myös siitä että tulevaisuudessa kameran lisäksi voi olla muitakin tapoja tarkkailla kuljettajaa ja siihen kehitykseen imotions tuo tukea. Imotionshan tekee enemmän liikevaihtoa kuin smartti…

26 tykkäystä

Ei suoraan liiketoimintaa liity, mutta Smart Eye lähetti twitterissä terveisiä lahden toiselle puolelle.

Olisi kiva tietää mikäköhän luku jossakin toisessa universumisissa olisi ilman Timontin tutkimuksia.

109 tykkäystä

Näkeekö kukaan muu tätä mahdollisena uhkana?

Pari vuotta Smartin kelkassa olleena tämä on ollut isoin downside omissa pohdinnoissa . Omat ESG kriteerit eivät kyllä enää kohtaa jos tämä teknologia myydään kaiken maailman Zuckerbergeille kohdennetun mainonnan keinoihin - puhumattakaan mikäli tällä kerättäisiin populaatiotason dataa myöhemmin päätettävää tarvetta varten.

Ja toki toisaalta voi innolla odottaa tuota potentiaalia…

4 tykkäystä

Kiinassa Guangzhoussa ja Los Angelesissa on menossa isot automessut. Erityisesti Kiinassa on esitelty paljon mielenkiintoisia uutuuksia. Muutamia poimintoja tässä.

Huawei esitteli Premium automerkin Avatr:n esikoisen yhdessä akkuvalmistaja CATLin ja autovalmistaja Changanin kanssa.

Huawei on hakenut patenttia DMS analytiikalle. Hakemuksessa mainitaan DMS-toimittajana Smart Eye.

https://worldwide.espacenet.com/publicationDetails/biblio?II=4&ND=3&adjacent=true&locale=en_EP&FT=D&date=20211118&CC=US&NR=2021357670A1&KC=A1

Buick esittelee tulevaisuuden visioitaan sähkötila-autollaan.

Auton ja matkustajien vuorovaikutusta kuvataan seuraavasti ” For the driver, there is an intelligent cockpit system with a side screen that arcs gently towards them for easy use. Most of the infotainment features, though, can be operated using voice-controls. A VR vision system, meanwhile, creates a new “immersive human-vehicle interaction experience”

Xpengin Adas-järjestelmä on ehtinyt jo neljänteen sukupolveen. Esittelyssä kansainväliseen myyntiin tuleva G9. DMS mukana toista sukupolvea.

Losissa on nähtävänä myös suomalaista DMS-osaamista. Basemark yhdessä Unikien kanssa esittelee ADAS-järjestelmät yhdelle sirulle yhdistävää Rocksolid Corea.

Samaan aikaan Geelyn premium-brändi Zeekr on aloittanut 001 toimitukset. Näissä kaiketi Smart Eye sisällä

Maksumuurin takana kerrotaan auton tunnistavan etumatkustajien kasvot ja asettelevan säädöt sopiviksi.

35 tykkäystä

“Vaikka Tesla-pomo Elon Musk onkin useaan otteeseen antanut ymmärtää, että täysi autonomisuus on aivan nurkan takana, on totuus toinen. CNN:n toimittaja toteaa, ettei vielä olla lähelläkään itsenäisesti ajavia autoja. Kommenttina olikin, että Teslan full self-driving on tässä vaiheessa enemmänkin kavereille esiteltävä kiva temppu kuin oikeasti hyödyllinen varuste.”

Smart Eyen avoimet positiot. Affectivalla ja iMotionsilla omansa.

16 tykkäystä

Toimialakuulumisia. Kiinnostavaa myös Smartin osakkeenomistajille

12 tykkäystä

Kovin hiljaista on ollut Smart Eye palstalla kun kaikki tonkii Evolutionia. Puhuttaisiinko välillä vaikka tästä?

40 tykkäystä

Eli tiivistettynä (lainaus Aptivin Q3 earnings callista): “business reward with Mercedes-Benz to provide multipurpose interior sensing solutions on their next gen electric vehicle platform”.

Tietääkseni Aptivin toistaiseksi ainoa dms/oms toimittaja on ollut Smart Eye.

34 tykkäystä

Smart Eye mukana huomenna Redeyen teknologiapäivässä. 20 minuutin puheenvuoro kello 11.27.
https://www.redeye.se/events/815894/redeye-technology-day-2021
Rekisteröitymällä pääsee katsomaan

15 tykkäystä

Ainakin tämä kosketusnäyttöpula koskettaa juuri Smartin BMW-malleja (CLAR-alusta). Listassa on poisluettuna i4, mikä viittaisi siihen että BMW priorisoi näytöt tällä hetkellä EV-malleihin (niissä taas Seeing on vakiona mukana).

Uudet 3-sarjan autot, 4-sarjan Coupe, Convertible ja Gran Coupe, pl. i4, sekä X5, X6, X7 ja Z4 toimitetaan toistaiseksi ilman kosketusnäyttöä.

Hyvin mahdollista, että vaikuttaa myös DMS-kameroiden asennukseen koska yleensä ainakin diginäyttö ja DMS-kamera ovat samassa lisävarustepaketissa olleet (driving assistant professional).

13 tykkäystä

Ei näköjää linkkiä avannut enemmän foorumisofta mutta preceptistä eli kolmosesta juttua

4 tykkäystä

Kaikkia ei pelota.

image

25 tykkäystä

NCAP-protokolla julkaistu, voimaan 2023.

Nyt alkaa tulla mustaa valkealla konkreettisempia teknisiä vaatimuksia teknologialle :slight_smile:

52 tykkäystä

Toyotan ADAS-järjestelmää valittu tekemään ilmeisesti Mobileye ja ZF. Mobileye on ainakin ennen tehnyt yhteistyötä cipian kanssa…

Kolme ev-adas leiriä lienee Mobileye, nvidia ja qualcomm.

The Toyota bZ EV models should feature several new driving assistant systems, some of which may allow autonomous driving. Toyota has chosen ZF and Mobileye, an Intel company, to develop advanced driver-assistance systems (ADAS) for its future models.
ZF and Mobileye will work together to produce advanced camera technology integrated with the latter’s radar technology for use in the ADAS of future Toyota models. Mobileye’s EyeQ4 SoC and ZF’s Gen 21 mid-range radar technology together will be used to interpret the surrounding environment to prevent and mitigate collisions.

7 tykkäystä

Muutama poiminta assessment protocolista:

  • EuroNCAP puhuu Driver State Monitoringista (DSM) versus tähän asti käytetty termi Driver Monitoring System (DMS)
  • Occupant Status Monitoring tarkoittaa kaikkea matkustajien tunnistamista, kameran avulla tunnistamisesta ei näyttäisi paperissa erikseen olevan mainintaa, eli OSM ≠ OMS
  • Direct Monitoring näyttäisi tarkoittavan kameraa (“Where driver state determination is supported by sensor(s) directly observing the driver”)
  • Indirect Monitoring tarkoittaa “perinteistä” kuskin valvontaa (“Where driver state determination is achieved indirectly through means other than sensor(s) directly observing the driver (e.g. steering input)”)

Pisteytyksessä ei tarkastella lainkaan DMS:ia, jos ajoneuvo ei täytä seuraavia vaatimuksia. Voisiko tämä viivästyttää vielä DMS käyttöönottoa kaikista karvalakkisimpien mallien tapauksessa?

To be eligible for scoring points in DSM, the SBR requirements in section 3.4 must be met:

  • Front seats including occupant detection
  • If applicable, at least one rear seats with unbuckling and/or occupant detection
    Only when the vehicle under assessment is equipped with an AEB, LSS and/or SAS system,
    points can be scored for DSM.

Myös seuraavat vaatimukset sille, että on oikeutettu DSM pisteytykseen:

Direct monitoring systems must be active at all times when the vehicle is in forward motion
at speeds ≥10km/h. A cumulative period of up to 1 minute of driving at speeds ≥10km/h is
permitted for the system to begin measuring the driver state, this is acceptable providing it
is detailed in the OEM provided dossier.

Indirect monitoring systems must be active when the vehicle is in forward motion at speeds
≥65km/h.

Eräs huomio DMS vaatimuksista

For the evaluation of Driver State Monitoring systems (DMS), Euro NCAP requires a
dossier from the OEM containing a detailed technical assessment.
The dossier should contain:

  • Sensing, providing evidence that the sensing system is capable of sensing a wide variety of different drivers and that is able to operate in a wide range of circumstances.

Muistaakseni joissakin caseissa mm. aasialaistaustaisten tai tummien naisten driver monitoring on ollut epäluotettavaa, oletettavasti suppean opetusaineiston vuoksi. Smart Eyen algoritmi on todettu koulutetun monipuolisella datasetillä, jota edelleen Affectivan ja iMotionsin mittavilla aineistoilla on höystetty. Voisin ainakin arvailla, että Smart Eyen nimi tässä OEM toimittamassa dossierissa takaa hyväksytty-merkinnän tähän kohtaan. Todennäköisesti muutkin DMS-toimijat toki pääsevät läpi vaatimuksista, oleellisempaa voikin olla että nämä vaatimukset rajoittavat enempien kilpailijoiden pyrkimyksiä alalle sekä OEMien yrityksiä tehdä DMS:ia in-housena. Ohessa minimivaatimukset:

Covering the full range of each driver variable detailed here is a
prerequisite to scoring points in the DSM assessment. The OEM needs to demonstrate, by
means of a dossier, that the sensing system was verified using a population covering at least
the following ranges and elements:

  • Age Youthful (16-18) – aged (≥80)
  • Sex All
  • Stature AF05 – AM95
  • Skin Complexion Fitzpatrick Skin Type (1 - 6)
  • Eye lid aperture >6.0mm

Tämä tosin on hieman erikoinen kohta, OEM:ien pitää selvittää rajoittavatko seuraavat tekijät DMS suorituskykyä (kyllä tai ei). Sitä ei kerrota, vaikuttaako tämä pisteytykseen mitenkään.

The OEM must demonstrate, by means of a dossier, that when faced with the following ranges and elements the DSM system is either not degraded in performance or that performance is degraded …

  • Hand on wheel One hand on wheel at 12 o’clock position
  • Facial occlusion Face-mask, hats, long head hair fringe obscuring eyes
  • Eyewear Sunglasses with a <15% transmittance
  • Eyelash makeup Thick eyelash makeup
  • Facial hair Long facial hair (>150mm in length)

Ja pisteytyksestä. DMS tuottaa siis enimmillään kaksi pistettä. En löytänyt tietoa tämän Safety Assist -kategorian maksimipistemäärästä ts. ei voi sanoa kuinka merkittävässä roolissa DMS on viiden tähden saamiseksi. Kategoriasta viiden tähden saaminen edellyttää kuitenkin vain 70% kaikista pisteistä, eli tämän kriteeristöpäivityksen merkitys DMS yleistymiseen ei ole sanottua. Tämän Safety Assist maksimipistemäärän selvittäminen olisi sen ymmärämiseksi ihan oleellista, ties vaikka joku sen tiedon jostakin löytäisikin, ehkä en vain osannut etsiä oikeasta paikasta.

Pitäisiköhän vuosiluvun olla tässä joku muu kuin 2020?
SBR = Seatbelt reminder

A maximum of 3.0 points can be scored for Occupant Status Monitoring in 2020:

  • 2.0 points for DSM
  • 1.0 points for SBR with Occupant Detection on rear seating positions

NCAP ei ilmeisestikään testaa koko DMS:ia ajoneuvokohtaisesti(?), vaan pisteet määrittyvät tutkitun DMS-ratkaisun perusteella, josta OEM toimittaa paperit (dossier). Assessment protocolin mukaan suurin osa DMS vaatimuksista koetetaan tällä tavalla:

The OEM must provide information / OEM must demonstrate / OEM must provice evidence, by means of a dossier, to…

ja vain seuraavat kohdat tarkastetaan labrassa:

The Euro NCAP Secretariat will review the DSM dossier provided by the OEM and will
ask the test laboratory to spot check a number of Distraction, Fatigue and Unresponsive
Driver situations before awarding the points.

Olisi kiinnostavaa kuulla Martinin mietteet tästä kriteeristön päivityksestä, tekeekö uudet kriteerit DMS:sta edellytyksen viiden tähden arviolle vai ei. Mainintoja DMS pakollisuudesta uusiin automalleihin ei myöskään taida olla vielä julkistettu, se olisi puolestaan varsin jyrkkä asetus suhteessa tähän EuroNCAP kriteeristöön.

45 tykkäystä

https://cdn.euroncap.com/media/64096/euro-ncap-assessment-protocol-overall-rating-v91.pdf

Kokonaisarvosanaan Safety assist luokka vaikuttaa 20% painolla myös uusilla kriteereillä, joten kokonaisarvosanassa 5 tähteä mahdollista ilman DMS.

Edit:
https://www.euroncap.com/en/for-engineers/protocols/safety-assist/
Kukaan muu perillä, korvaako tuo 2023 protokolla kokonaan aiemman? Itse järkeilen, että kyllä, mutta tällöin muutamat aiemmat kategoriat jäisivät kokonaan pois.

Edit 2: ilmeisesti tuo uusi protokolla säätelee vain kahta osa-aluetta, ”occupant monitoring system” ja ”speed assist system”. Tämän hetken tuloksia, kun katselee esim. Bmw ix, on maksimipistemäärä safety assist luokassa 16, uusi protokolla kasvattaa dms arvoa 1 pisteestä kahteen pisteeseen. Mutta laskeeko tuo kokonaispistemäärä 6, tuossa uudessa protokollassa? Onko näin, että AEB on tuon DMS luokan sisällä ja vaaditaan mikäli siitä halutaan ylipäätään pisteitä? Tämä on tosiaan merkittävä kysymys, koska ratkaisee vaaditaanko safety assist 5 tähteen DMS.

18 tykkäystä

Mobileye on partneroitunut Cipian kanssa ja varmaan mielellään tekevät maanmiestensä kanssa kimpassa, mutta eikös Nissanin Propilot 2.0 ole ihan samalla sirulla ja Seeingin Fordeja on myös eli peli ihan auki vielä.

Samassa muuten Mobileyen itsenäistymisestä Intelistä. Intel toki jää isolla osuudella omistajaksi ipon jälkeen.

3 tykkäystä

Cenkosilta kommentit Euro-ncapin teknisistä vaatimuksista. Arvioivat, että vaatimukset täyttäviä järjestelmiä pystyvät toimittamaan ainoastaan Smart Eye ja Seeing Machines, mutta Cipian riemukkaasta reaktiosta Twitterissä voisi päätellä, että otetaan heidät vielä mukaan.

Cenkos epäilee Teslalle tulevan kiire DMS-ostoksille mikäli haluavat nauttia viiden tähden turvallisuusluokituksesta. Tesla ei ole pystynyt luomaan inhousena vaatimukset täyttävää järjestelmää. Tähän ei taida siten muutkaan autonvalmistajat pystyä.

CENKOS NOTE TODAY:

EU-NCAP specifications - good news

Euro-NCAP have now finally released the technical paper covering the expectations and scoring for automotive Driver Monitoring Systems. The technical expectations for DMS are relatively sophisticated with DMS systems needing to measure not just head position but eye gaze and eye aperture. The expectations cover both a wide range of driver types that must be recognised (gender, age, ethnicity) but also levels of occlusion (ie availability) in real world applications. Specifically, the paper highlights that system performance must not be degraded in certain conditions which include sunglasses and facial hair. Further to this the system performance must either not be degraded (or warn the driver of degraded performance) under more advanced conditions: Facial occlusion, face-mask, hats, long head hair fringe obscuring eyes - eyewear sunglasses with a <15% transmittance, Eyelash makeup Thick eyelash makeup, facial hair, long facial hair (>150mm in length. Technical specifications are also well defined for Downness (Karolinska Sleepiness Scale 7) which must be detected as well as a micro-sleep of 1-2 seconds. ?

CENKOS COMMENT: We see this technical specification as good news for Seeing Machines and Smart Eye who are probably the only suppliers that can meet the advanced occlusion targets. Whilst the advanced occlusion targets are not mandatory, we fail to see why any sensible OEM would risk selling a car that warn you every 10 seconds the system is not working if, for example, you are wearing a face mask. It also now looks clear that Tesla will have to source Seeing Machines or Smart Eye relatively promptly or face a poor Euro-NCAP safety rating. We also see a potential for these standards to be copied by European Commission as a mandated safety specifications, although the expectation is for this to be watered down with the EC likely focussing more on basic occlusion and not advanced occlusion. These standards may also help accelerate activity in other markets such as Japan, where the recognition of Eye by Japanese OEMs has been slow, but the Japanese New Car Assessment Programme (JNCAP) rarely deviates from EU standards. We maintain our 19.5p valuation and Buy recommendation.

32 tykkäystä

Ihan totta. DMS-tier 2:set vaihtelee näiden ADAS-toimittajien kanssa toistaiseksi vapaammin, tosin leirejäkin on alkanut syntyä.

2 tykkäystä