Smart Eye - King of automotive’s Interior Sensing AI?

Live Stream klo 16!!!

23 tykkäystä

“DRIVE Orin is designed for software-defined operation, meaning it’s purpose-built to handle these continuous upgrades throughout the life of the vehicle.”

En ole perillä jokaisesta teknologisesta detailista, mutta keskeinen asia lienee että sama Drive Orinin rauta hoitaa kaiken. NVIDIAn laskentateho on ns. riittävä. Omalle chipille integroidut DMS:t eivät tule olemaan tulevaisuuden mersuissa, enkä tiedä kenellä lopulta olisivatkaan kun autojen softapäivitykset on niin keskeinen osa tulevaisuuden automotivea. Väitteet reaaliaikaisista HW kiihdytyksistä vain DMS:lle optimoiduilla omilla chipeillä meni läpi joskus 2018.

DMS (softana) on osa Nvidian ekosysteemiä. SEYEn omistajalle on minusta hyvä että firmassa keskitytään softaan.

3 tykkäystä

Pidän Affectivan media-yksikköä lähinnä rönsynä josta on väännetty väkisin positiivinen tarina pressimateriaaleihin. Oli kuitenkin mukava lukea tästä TechCrunchin artikkelista että yksikkö on voitollinen. Kääritään siis sieltä massit ja laitetaan lisää kaasua automotiven kasvuun.

Affectiva, which employs 100 people at its offices in Boston and Cairo, also has another business unit that applies its emotio-detection software to media analytics. This division, which will be part of the deal and will operate separately, is profitable, Kaliouby said, noting the software is used by 70% of the world’s largest advertisers to measure and understand emotional responses to media content.

10 tykkäystä

Koontia livestreamista (CEO Chat). Näin kattavaa historiapläjäystä en ole ennen kuullut.

  • Martin kertoo taustaansa ja vuotta -99. Oli ollut muutaman vuoden puolijohdeteollisuudessa töissä. Sukulainen näki unta, että pystyi ohjaamaan silmänliikkeillä tietokoneen hiirtä. (oma kommentti: Dreams come true).

  • Tarinaa Hangon veneklubilta: yläkerrassa istuttiin ja päätettiin laittaa firma pystyyn. CONFIRMED. :beers: :smiley: Martin tehnyt kokopäivätyötä 1.1.2000 alkaen SmartEyessä. Idea jalostui vähitellen kohti autoteollisuutta ja ihmishenkien pelastamista…

  • Automotiven vaatimustaso on erittäin korkea huomioiden käyttöolosuhteet ja turvallisuusnäkökohdat jne. Tiedostettiin jo alusta kuinka hyvälaatuinen tuotteen pitää olla. Tämä on ollut punainen lanka jo yli 20 vuoden takaa.

  • Affectivalla ollaan todella innoissaan yhdistymisestä. Nähdään todella monia käyttökohteita teknologialle (gaming, healthcare jne). Olemme automotivessa uudempia toimijoita kuin SmartEye, mutta olemme tunnistaneet markkinan valtavan potentiaalin.

  • SmartEye: Kutsutaan tätä nyt “automotive ensin” lähestymistavaksi. Vuonna 2007-2008 uskottiin teknologian tulevan nopeasti autoihin, mutta finanssikriisi muutti kaiken. Monet kehitysprojektit alettiin alas OEM:ssä ml. driver monitoring. Tuosta meni muutama vuosi eteenpäin odotellessa OEM aktivoitumista. Ensimmäisiä elpymisen merkkejä nähtiin 2011. Martin tiesi, että nyt tämä tulee todella jos ei nähdä uutta finanssikriisiä. Tuosta kesti 3 vuotta, että BMW tuli ensimmäiseksi asiakkaaksi.

  • Tarina BMW-sopimuksesta: En muista tarkkaan, kuinka sain tiedon sopimuksen syntymisestä. OEM soitti Tier1:lle valinnasta. Tuosta kesti pitkä aika ennenkuin päädyttiin lopulliseen kirjalliseen sopimukseen (OEM-Tier1). Tämän jälkeen SmartEyen oli laadittava vielä sopimus Tier1:n kanssa. Tähän Tier1-Smart sopimukseen meni 1,5 vuotta. Olisiko ollut 2015-2016 vaihteessa, vaikka työtä oltiin jo tehty automallien kanssa. Ensimmäinen tuotantoon mennyt automalli BMW X5 (2018). Tämä ensimmäinen kehitysprojekti oli todella haastava. Algoritmi ei ollut vielä täysin valmis, aikapaine, insinöörit vetivät laikka punaisena OEM vaatimuksesta johtuen. Kaikesta selvittiin hyvin.

  • Oma huomio: Tämä em. kertomus kuvaa sitä, kuinka nuori markkina on vaikka Smart on jo yli 20v vanha yhtiö. Eli ensimmäiset OEM-DMS-neitsyydet on menetetty vasta muutama vuosi sitten. :smiley:

  • Varhaiset premium-sopimukset toimivat ajureina vaiheeseen 2, jolloin massamarkkina alkoi aktivoitua. Tämä tapahtui 2018 lopulta ja erityisesti 2019. Puhutaan mid-classista eli high volume mallit.

  • Kun premium OEM:t tekivät hankintojaan 2013-2015 ei ollut lainkaan regulaation tuomaa myötätuulta. OEM:t etsivät tapoja parantaa autonomous driving / level2 kyvykkyyksiään. Halusivat, että kuljettajan ei tarvitse pitää kiinni ratista ruuhkissa jne.

  • Euroopassa oltiin miettimässä lainsäädäntöä 2017-2018 aikoina mm. automatic cruise control, emergency break systems jne. General Safety Regulation ratifioitiin EU:ssa myöhään 2019. Sen mukaan kaikki ADAS järjestelmät pakollisia 2022, 2024 ja lopulta kaikki 2026. Advanced driver monitoring mukana. Tämä kehityskulun nopeus DMS:n suhteen yllätti Martinin positiivisesti. Nyt DMS-vaatimus on yhtä voimakas kuin vaikkapa turvatyynyille.

  • 2019 lainsäädännön jälkeen tuli vauhtia automotiveen. “Kaikki ovat menossa samasta ovesta”. 1-2 OEM.ää lukuunottamatta kaikki TOP20 OEM:t ovat joko hankkimassa tai hankkineet tämän teknologian!

  • DMS keskittyy kuljettajan kasvoalueelle. Pikselitiheyksellä on merkitystä mittaustarkkuudelle.

  • DMS:n lisäksi on suuri mahdollisuus; interior sensing. Tämä on pohjimmainen syy miksi yhdistymme ja tässä Affectiva tulee mukaan kuvioon. Paljon use caseja sisältyy koko interior sensingiin.

  • Lapsia unohtuu autoihin jne. monia traagisia tapauksia. Tuolta tulee vaatimuksia OMS:lle, mutta ei suoraan DMS:lle. Uskomme, että autoihin tulee useita kameroita tulevaisuudessa. Itselläni Tesla model 3 jossa 8 kameraa (7 ulos, yksi sisään). Sensori itsessään ei ole kallis, kun suunnitellaan hyvin.

  • Interior Sensingiin on myös ajoneuvon käyttöä parantavia use caseja: tunnistaminen / Face ID… perheenjäsenet jne. ajoneuvon kustomointi mieltymysten mukaan…

  • Pari vuotta sitten eräs ruotsalainen vaikuttaja rohkaisi SmartEyeä ja Affectivaa keskusteluihin keskenään. CES2020 SEYE johto tapasi Affectivan johdon. Syntyi molemminpuolinen positiivinen vaikutelma toisen toiminnasta. Alkoi tuntua, että täydentäisimme toisiamme erittäin hyvin. Olemme pitäneet Affectivaa aina erittäin korkealaatuisena toimijana… “Affectiva AI” on tunnettu. En olisi koskaan halunnut yhdistyä ellemme itse kokisi toista osapuolta erittäin laadukkaana.

  • Molemmin puolin nähtiin, että yhdistymällä olisi oikea mahdollisuus dominoida markkinaa… DMS+OMS. Nähtiin, että DMS tulee laajenemaan koko ohjaamoon (interior sensing). Smart piti tässä vaiheessa Affectivaa todella merkittävänä kilpailu-uhkana. “EPIC BATTLE” tulossa. Nyt tuota ei tarvitse enää miettiä. Tämä on todella mahtava juttu. Koko teknologiaa pitää kehittää eteenpäin ja työtä on todella paljon.

  • Teknologiamme sekä tiimimme ovat toisiaan täydentäviä erittäin hyvällä tavalla. Yhdistämällä toiminnan saamme maailmanluokan globaalin tiimin ratkomaan näitä ongelmia. “WE ARE CREATING AN AI POWERHOUSE FOR INSIDE THE CAR”.

  • Affectiva on seurannut Smartia ja on ollut vaikuttunut miten ovat saaneet onnistumisia OEM:n kanssa. Nyt samaa mallia voidaan copy-pasteta tuomalla Affectivan teknologia mukaan.

  • Smartin RI-puoli myy noin 300-400 järjestelmää vuodessa; ovat toki korkeampihintaisia kuin DMS softa. RI-puolen merkitys on erityisesti strateginen (teknologian kehitys). Tässä on vastaavaa näkökulmaa kuin Affectivan tutkimustyössä / Emotion ID.

  • Oma havainto: Linkedin chatissa joitakin Seeing-fanipoikia perustuttuun tyyliin “do you think you will now catch up Seeing…” kysymyksineen. :smiley:

  • Tässä vaiheessa Martinilta hajosi hetkeksi netti :smiley: Olivat hieman aikaisemmin kuvanneet kuinka tärkeää on tavata kasvotusten kun viimeistellään diiliä.

  • Martin on eniten innoissaan Affectivan tiimistä. Se on upea. Smart on upea. Awesome+awesome = super awesome.

  • Integraatiokeskustelut etenevät hyvin firmojen välillä.

118 tykkäystä

Onko jossain ollut mainintaa minkälaisen roolin Rana el Kaliouby tulee saamaan tämän ostoksen jälkeen? Kerkesin noin 20 minuuttia katsomaan koko haastattelusta ja pakko myöntää, että Rana vakuutti minut täysin, kun taas Martin oli vähän kankeampi mikä on ymmärrettävää, kun ei omalla äidinkielellä puhuta. Mielestäni Rana on aivan loistava lisä Smartille! Kyllä saa olla aika innoissaan yhtiön tulevaisuudesta.

8 tykkäystä

can we assume that Smarts work over the past 18 Months on OMS has been dumped in favour of Affectiva’s superior offering.
$73m spent but no more needed by Smart on R&D costs which are written off.

Tämä tuntuu kyllä niin täydelliseltä combolta. Sydän pakahtuu tästä. Niin paljon mahdollisuuksia ja käyttötarkoituksia koko teknologialle. Sinne vaan DMS, OMS, pelailut ja terveysteknologiat mitä vaan ja mihin vaan. Entä älykodit? Joo ymmärrän että pelkkä DMS on iso ja lähitulevaisuuden oleellisin pihvi. Nyt tuntuu että Smartin teknologiakyvykkyys on rajaton ja viimeisetkin epäilyt DMS:n rajallisuudesta ja tulevaisuuden käyttötarpeesta voidaan unohtaa. Seeing saa tyytyä Smartin perävaloihin. Byebye :wave::star_struck:

12 tykkäystä

Rana itse on kuvannut tulevaa rooliaan tittelillä “Deputy CEO”.

Toivon ja myös uskon, että Martin ja Rana tulevat täydentämään toisiaan hyvin. Rana vahva ihmisjohtaja ja Glassdoorin mukaan on onnistunut luomaan todella hyvän yrityskultuurin Affectivaan. Rana toivottavasti tuo myös Smartille näkyvyyttä ja verkostoja USA suuntaan. Toisaalta Martin ja Smart Eye yrityksenä pystyvät tukemaan Affectivaa protyyppien ja tuotteiden kaupallistamisessa.

Miksi olettaisit näin? :face_with_raised_eyebrow:

3 tykkäystä

No, we cannot…

11 tykkäystä

why buy them then?
They sell themselves as OMS, DMS and Emotion detection.

If Smart OMS, DMS is better then Emotion detection is the additional buy in.

3 tykkäystä


… kaikki muutkin arvostelut samanlaisia.

Tämä + Smartin huikea työympäristö.

Esim. Seeing machinesilla kuulemma aika huono meno.

15 tykkäystä

thanks Aston but I think you are a bit harsh on Smart. Lets see how things go before we make judgements or Gif funnies ?

3 tykkäystä

To me there seems to be one big difference between Smart and Seeing Macaronis position:

SM had to make a marriage with QC as their marketing didnt pay off. Strategic challenges ultimately caused this. Fovio not accepted by all OEMs. —> lower negotiating power for ASP.

Smart however remains independent with Affectiva. Right strategic choices long time ago led to successfull marketing. No need to be in an enforced marriage → will lead to bigger negotiating power as Interior Sensing kicks-off.

25 tykkäystä

Onko tietoa miten affectiven media analytiikka palvelu toimii? Olettaen että tietokoneen/puhelimen kameran käyttö tätä varten vaatii käyttäjän hyväksynnän, yhtiön on vaikea saada dataa isoilta massoilta?

Eli jos Makkara Oy:ni haluaa testata miten tv-mainokseni herättää eri kohderyhmissä tunteita, pitäisi mainoksen katsojia kuvata esim. youtube-, kännykkäpeli- tai vastaavan mainoksen aikana, mutta tämä on varmaan hankalaa? Jos kuvataan jotain vapaaehtoisia tms. ei tuo välttämättä toisi suurta lisäarvoa makkara OYlleni?

All your research panelists need is internet connectivity and a standard web camera – it’s simple, easy and highly accurate. The results are aggregated and displayed in an easy to use dashboard.

Minun pitää itse palkata katsojat mainokselle?

3 tykkäystä

QC is non exclusive, and only one of the 3 pillars. Although if SEE marketing never took off how did Fovio get Ford and Chrysler FCA.

SEE has no exclusive tie ups.

I noticed Martin quickly side stepped the BMW question which was interesting.

Now let me say Seye and SEE can coexist and make money but Im a realist and do a lot of research like you.

6 tykkäystä

Oletteko kelanneet sitä, kun osa on ollut huolissaan level 5 autoista ja DMS-tarpeesta… loogisesti ajatellen interior sensing / OMS tarve korostuu sitten aikanaan level 5 autoissa kun kuljettajaa ei ole.

Levelillä 5 DMS-tarvetta ei ole, mutta robottiauton turvallisuuden takaamiseksi OMS on kriittisen tärkeä. Matkustajat voivat olla enemmän tai vähemmän tiedottomassa tilassa, voi tapahtua kaikenlaisia unohduksia jne.

Mielestäni Affectiva-kaupan myötä merkittävä 10v+ ajan tarinan jatkuvuushaaste pieneni… Martinin sanojen mukaan kuitenkin OMS on 2x DMS ASP

41 tykkäystä

Tää kaveri on joku MIT:n early stage deep tech venture fundin kaveri. Eli täältä varmasti spinnattu toi affectiva. Reilu 100k seuraajaa :slight_smile:

Hyvää näkyvyyttä tulee.

15 tykkäystä

Teslaan DMS?

10 tykkäystä

Tiedossa oli jo, että nykyinen kamera Teslassa ei ole DMS-käyttöön vaan alun perin security-käyttöön. Eli puuttuu nämä auringonvalon, pimeyden ym. huomioimat HW-ominaisuudet. Ei ole mikään NIR / 940nm konfiguraatio kyseessä. Eli DMS-käytössä ei tule nykyinen HW-konfiguraatio menestymään NCAP-testeissä jne.

Heidän on pakko alkaa tutkia DMS-käyttöön sopivaa HW:ta ja softwarea jatkossa…

10 tykkäystä

Artikkeli on maksumuurin takana. Tuskin kenelläkään on accessia?

“Right now we have contracts with 13 car manufacturers for driver monitoring systems, serving a total of 84 car models. For interior sensing applications, we expect to reach this kind of position in as little as a few years: some of the first procurement processes are already underway.” – Smart Eye CEO Martin Krantz

9 tykkäystä