Sentons ultralyd CameraBar gjør telefonens ramme til en zoomglidebryter

Sentons har introdusert CameraBar, en ny SDS som bruker ultralyd for å gjøre telefonens ramme til en kamerautløser og zoomglidebryter.

Smarttelefoner er utrolig allsidige bærbare PC-er, men med bare en håndfull fysiske knapper tilgjengelig på de fleste enheter, må du stole på berøringsskjermkontroller for det meste. Når det kommer til å spille spill eller bruke kameraappen, må du sjonglere mellom mange forskjellige skjermknapper og glidebrytere, noe som resulterer i en undermåls, begrensende opplevelse på grunn av begrenset skjermeiendom og vanskelig hånd ergonomi. Et selskap kalt Sentons ønsker å endre denne virkeligheten ved å introdusere det de kaller "Software-Defined Surfaces" (SDS) i stedet for fysiske knapper. I dag introduserer de CameraBar, en ny SDS som bruker ultralyd for å oppdage trykk og lysbilder på rammen til en telefon for å etterligne de fysiske lukker- og zoomknappene på et tradisjonelt kamera.

Med CameraBar kan brukere benytte virtuelle lukker- og zoomkontroller uten at fingrene hindrer visningen ved å berøre skjermen. Standardkonfigurasjonen til CameraBar er å lytte etter et lett trykk på høyre side for å stille inn fokus, et hardt trykk på høyre side for å ta et bilde, og en skyve-for-zoom på venstre side for optisk zoom. Videoen som er innebygd nedenfor demonstrerer CameraBar i aksjon på en ASUS ROG Phone 3-enhet i detaljhandel, så vel som på tilpasset utviklingsmaskinvare.

ROG Phone 3 vist i videoen ovenfor kjører antagelig tilpasset firmware for å tillate Sentons' tilpassede kamera-app å reagere på innganger fra sensorene, ettersom AirTriggers-funksjonen på ASUS ROG-telefonen for øyeblikket ikke kan tilordnes noen handlinger i ASUS Camera-appen. For at denne funksjonen skal komme til ROG-telefonen, må ASUS legge til støtte for den gjennom en programvareoppdatering.

Mens ROG Phone 3 teknisk sett kan legge til støtte for bevegelsene som vises i denne demonstrasjonen, sa Sentons CTO Sam Sheng til XDA at den ideelle enheten for CameraBar vil ha et større område for å skyve for å gi mer finkornet kontroll over zoomen nivå. Ingen slik enhet eksisterer for tiden på markedet, selv om Sentons er i samtaler med flere ikke avslørte partnere som tar denne teknologien til produksjon om kort tid. Selskapet gir OEM-er anbefalt sensortopologi, veiledning om hvordan du designer modulen og referanseprogramvare for hvordan du implementerer dette som en del av lagerkameraappen. OEM-er kan tilpasse området for gestaktivering, og hvis de velger å gjøre det, kan de også utvide de samme tilpasningsalternativene til forbrukeren.

Etter hvert antas det at OEM-er lager nye smarttelefoner med design på hele skjermen og "fossefall"-skjermer vil være den første til å ta i bruk Sentons nye CameraBar-teknologi, men som tidligere nevnt, smarttelefoner som har implementert Sentons sin eksisterende GamingBar-teknologi (som inkluderer ROG Phone 3 og Lenovo Legion Phone Duel) kan arve funksjoner av CameraBar.

Bytte ut knapper med ultralyd

Knapper er et vanlig feilpunkt på smarttelefoner og en hindring for å oppnå en virkelig skjermdesign, så det er fornuftig for smarttelefonprodusenter å forsøke å bli kvitt dem. Det eneste problemet er å finne et verdig alternativ til en fysisk knapp, og vi har sett noen få mangelfulle forsøk på å erstatte dem tidligere. Huaweis Mate 30 Pro brukte "usynlige" berøringsknapper for volumvipperen som noen brukere slet med å utløse. HTCs U12+ inneholdt falske knapper som var tilsvarende frustrerende for noen anmeldere. Mens Huawei prøvde å implementere volumtastene kapasitivt, brukte HTC Sentons sine ultralydsensorer, selv om jeg ble fortalt at HTC brukte en enkel strain-gauge-sensor. Derimot kan ROG Phone-modellene fra ASUS føle mye lettere berøringer, under 5 grams kraft. Selv om jeg ikke har hatt muligheten til å teste HTC U12+ selv, har min erfaring med ROG Phone 3 og dens tilpassbare AirTriggers-bevegelser vært stort sett positivt, så jeg gleder meg til å se hvordan teknologi fra Sentons ikke bare kan erstatte knappene på telefonene, men også utvide deres funksjonalitet.

Så hvordan erstatter OEM-er egentlig en knapp med Sentons' teknologi? Å kopiere en fysisk knapp på en smarttelefon ved hjelp av ultralyd innebærer å kombinere piezoelektriske og strain-gauge-sensorer. Sentons sammenligner teknologien sin med sonar, som bruker ultralydbølger for ekkolokalisering. Flytiden til vibrasjonsfeltet skapt av de piezoelektriske sensorene brukes til å unikt bestemme posisjonen til brukerens finger, og koblingen av fingeren og underlaget som vibrerer brukes til å bestemme kraften fra den vibrerende lyden bølge. Med andre ord hjelper ultralydbølger med å identifisere plasseringen, mens en strain-gauge-sensor bestemmer kraftnivået.

Kilde: Sentons

Derfor er prinsippene bak teknologien ikke nye, men det Sentons selger til OEM-er er linjen med SDSwave kraft-og-berøringsprosessorer, maskinlæringsalgoritmene for å luke ut falske berøringer fra trykk og bevegelser, og dens ultrasoniske strain-gauge-sensor. De piezoelektriske sensorene kan imidlertid være hyllevare, noe som gjør dem svært rimelige å integrere i smarttelefondesignet. Så lenge materialet som brukes i smarttelefonkroppen er stivt nok, og dermed lar ultralydbølger forplante seg, kan det gjøres om til en virtuell berøringssensor.

Sentons sier at ultralydsensorene kan gjenkjenne fingertrykk gjennom glass, plast og til og med millimeter aluminium, noe som betyr føleelementene kan monteres på telefonens midtplate i stedet for rett bak der fingeren forventes å være plassert. Forbeholdet er imidlertid at dette bare kan gjøres når smarttelefonprodusenten ønsker å erstatte "lavere ytelse"-knapper som volum- eller strømknapper - replikerende bevegelser som trenger mer presisjon, for eksempel en glidebryter, vil vanligvis kreve at sensorelementet monteres på sideveggen bak kontakten punkt. Disse sanseelementene sies å være veldig, veldig små og kan lett settes inn mellom antenneelementer (som mmWave-antenner plassert rundt kroppen til en 5G-smarttelefon), og siden det ikke er noen ledninger involvert, vil det ikke være noen forringelse av antenneytelsen.

Den lille størrelsen på sensorene gjør det til og med mulig for dem å brukes i enheter så små som smartklokker og høretelefoner (som ekte trådløse ørepropper). For smartklokker kan ultralydbevegelser brukes til å erstatte en fysisk roterende krone eller en berøringsfølsom kapasitiv ramme. For ekte trådløse ørepropper kan ultralyd gi oss bedre trykk- og bevegelsesdeteksjon for musikkkontroller. Sentons eksperimenterer for tiden med å implementere teknologien deres i flere formfaktorer, med til og med bilbruk på bordet, men det har ikke vært noen kommersielle produkter (utenom smarttelefoner) for å bruke teknologien deres bare ennå. Men Sentons er langt fra det eneste selskapet som bruker maskinlæring for å analysere ultralyd for bruk i virtuelle smarte sensorer – det finnes også Elliptiske laboratorier som har inngått samarbeid med flere smarttelefonprodusenter for sin teknologi for ultralyd-nærhetsdeteksjon – så det er en god sjanse for at ultralyd vil holde seg og bli enda mer utbredt.