Sentons har introducerat CameraBar, en ny SDS som använder ultraljud för att förvandla din telefons ram till en kameraslutare och zoomreglage.
Smartphones är otroligt mångsidiga bärbara datorer, men med bara en handfull fysiska knappar tillgängliga på de flesta enheter måste du lita på pekskärmskontroller för det mesta. När det kommer till att spela spel eller använda kameraappen måste du jonglera mellan många olika knappar på skärmen och skjutreglage, vilket resulterar i en undermålig, begränsande upplevelse på grund av begränsad skärmfastighet och besvärlig hand ergonomi. Ett företag som heter Sentons vill förändra denna verklighet genom att introducera vad de kallar "Software-Defined Surfaces" (SDS) i stället för fysiska knappar. Idag introducerar de CameraBar, en ny SDS som använder ultraljud för att upptäcka tryckningar och glidningar på ramen på en telefon för att efterlikna de fysiska slutar- och zoomknapparna på en traditionell kamera.
Med CameraBar kan användare använda virtuella slutar- och zoomkontroller utan att deras fingrar hindrar sikten genom att röra vid skärmen. Standardkonfigurationen för CameraBar är att lyssna efter ett lätt tryck på höger sida för att ställa in fokus, ett hårt tryck på höger sida för att ta en bild, och en bild-för-zoomning på vänster sida för optisk zoom. Videon som är inbäddad nedan visar CameraBar i aktion på en ASUS ROG Phone 3-enhet för detaljhandeln samt på anpassad utvecklingshårdvara.
ROG Phone 3 som visas i videon ovan kör förmodligen anpassad firmware för att tillåta Sentons anpassade kameraapp att reagera på ingångar från sensorerna, eftersom AirTriggers-funktionen på ASUS ROG-telefonen för närvarande inte kan mappas till några åtgärder i ASUS Camera-appen. För att den här funktionen ska ta sig till ROG-telefonen måste ASUS lägga till stöd för den genom en mjukvaruuppdatering.
Medan ROG Phone 3 tekniskt kan lägga till stöd för gesterna som visas i den här demonstrationen, sa Sentons CTO Sam Sheng till XDA att den idealiska enheten för CameraBar kommer att ha en större yta för att glida för att möjliggöra mer finkornig kontroll av zoomen nivå. Ingen sådan enhet finns för närvarande på marknaden, även om Sentons för samtal med flera hemliga partners som tar denna teknologi till produktion inom kort. Företaget förser OEM-tillverkare med rekommenderad sensortopologi, vägledning om hur man designar modulen och referensmjukvara om hur man implementerar detta som en del av stockkameraappen. OEM-tillverkare kan anpassa området för gestaktivering, och om de väljer att göra det kan de också utöka samma anpassningsalternativ till konsumenten.
Så småningom tror man att OEM-tillverkare gör nya smartphones med all-screen design och "vattenfall" skärmar kommer att vara den första att ta till sig Sentons nya CameraBar-teknik, men som tidigare nämnt, smartphones som har implementerats Sentons befintliga GamingBar-teknologi (som inkluderar ROG Phone 3 och Lenovo Legion Phone Duel) kan ärva funktioner av CameraBar.
Byt ut knappar med ultraljud
Knappar är en vanlig punkt för misslyckanden i smartphones och ett hinder för att uppnå en heltäckande design, så det är vettigt för smartphonetillverkare att försöka bli av med dem. Det enda problemet är att hitta ett värdefullt alternativ till en fysisk knapp, och vi har sett några lackliga försök att ersätta dem tidigare. Huaweis Mate 30 Pro använde "osynliga" pekknappar för volymvippan som vissa användare kämpade för att utlösa. HTC: s U12+ innehöll falska knappar som var lika frustrerande för vissa recensenter. Medan Huawei försökte implementera sina volymknappar kapacitivt, använde HTC Sentons ultraljudssensorer, även om jag har fått veta att HTC använde en enkel töjningsmätare. Däremot kan ROG Phone-modellerna från ASUS känna mycket lättare beröring, under 5 grams kraft. Även om jag inte har haft möjlighet att testa HTC U12+ själv, har min erfarenhet av ROG Phone 3 och dess anpassningsbara AirTriggers-gester varit mestadels positivt, så jag ser fram emot att se hur teknologin från Sentons inte bara kan ersätta knapparna på telefoner utan också utöka deras funktionalitet.
Så exakt hur ersätter OEMs en knapp med Sentons teknik? Att replikera en fysisk knapp på en smartphone med ultraljud innebär att man kombinerar piezoelektriska och töjningsmätare. Sentons liknar sin teknologi vid ekolod, som använder ultraljudsvågor för ekolokalisering. Flygtiden för vibrationsfältet som skapas av de piezoelektriska sensorerna används för att unikt bestämma positionen för användarens finger, och kopplingen mellan fingret och substratet som vibrerar används för att bestämma kraften från det vibrerande ljudet Vinka. Med andra ord hjälper ultraljudsvågor att identifiera platsen, medan en töjningsmätare bestämmer nivån av kraft som appliceras.
Principerna bakom tekniken är alltså inte nya, men det Sentons säljer till OEM: er är dess linje av SDSwave force-and-touch-processorer, dess maskininlärningsalgoritmer för att sålla bort falska beröringar från tryckningar och gester, och dess ultraljudstöjningsmätare. De piezoelektriska sensorerna kan dock vara från hyllan, vilket gör dem mycket billiga att införliva i smarttelefondesignen. Så länge materialet som används i smartphone-kroppen är tillräckligt styvt och därmed tillåter ultraljudsvågor att fortplanta sig, kan det förvandlas till en virtuell beröringssensor.
Sentons säger att dess ultraljudssensorer kan känna igen fingerkranar genom glas, plast och till och med millimeter av aluminium, vilket betyder avkänningselementen kan monteras på telefonens mittplatta snarare än precis bakom där fingret förväntas placeras. Förbehållet är dock att detta bara kan göras när smartphonetillverkaren vill ersätta knappar för "lägre prestanda" som volym- eller strömknappar — replikerande gester som behöver mer precision, såsom ett reglage, kräver i allmänhet att avkänningselementet monteras på sidoväggen bakom kontakten punkt. Dessa avkänningselement sägs vara väldigt, väldigt små och kan enkelt sättas in mellan antennelement (som mmWave-antenner placerade runt kroppen på en 5G-smarttelefon), och eftersom det inte finns några kablar inblandade kommer det inte att ske någon försämring av antennens prestanda.
Den lilla storleken på avkänningssensorerna gör det till och med möjligt för dem att användas i enheter så små som smartklockor och hörbara (som äkta trådlösa öronsnäckor). För smartklockor kan ultraljudsgester användas för att ersätta en fysiskt roterande krona eller en beröringskänslig kapacitiv ram. För äkta trådlösa hörsnäckor kan ultraljud ge oss bättre tryck- och gestdetektering för musikkontroller. Sentons experimenterar för närvarande med att implementera sin teknik i fler formfaktorer, även med fordonsanvändning på bordet, men det har inte funnits några kommersiella produkter (utanför smartphones) för att bara använda deras teknik än. Men Sentons är långt ifrån det enda företaget som använder maskininlärning för att analysera ultraljud för användning i virtuella smarta sensorer – det finns också Elliptiska Labs som har samarbetat med flera smartphonetillverkare för sin ultraljudsteknik för närhetsdetektering – så det finns en god chans att ultraljud kommer att stanna kvar och bli ännu mer allmänt antagen.