IOS 15 Özellikleri Sonunda iPhone'un Sinir Motorundan Yararlanıyor

İzlerken WWDC21 açılış konuşması Birkaç hafta önce, yinelenen bir tema fark etmeye başladım. Ve bu tema, yaklaşan iOS 15 özelliklerinin birçoğunun iPhone'un Neural Engine'inden yararlanıyor gibi görünmesi.

Neural Engine, 2017'de iPhone X'in piyasaya sürülmesinden bu yana iPhone'da bulunuyor. Ancak, çoğumuzun bu işlemcinin etkilerini ilk piyasaya sürülmesinden bu yana geçen dört yıl boyunca hissettiğini sanmıyorum.

WWDC21, iOS 15'in uzun zamandır ilk fütüristik iOS güncellemesi olduğu hissini vermeye devam etti. Ve bu konuda Apple'dan resmi bir onay olmamasına rağmen, bunun nedeninin Apple'ın nihayet Neural Engine'den tam olarak faydalanması olduğuna inanıyorum.

Bu yazıda, Neural Engine'in ne olduğunu kısaca ele alacağım, ardından bu işlemciyi tam potansiyeliyle kullanıyor gibi görünen tüm yeni iOS 15 özelliklerine dalacağım. Sonlara doğru, iOS'un şu anda Neural Engine'i kullandığı ana yolları ele alacağım, böylece onu yaklaşan iOS 15 sürümüyle karşılaştırabilirsiniz.

Pekala, içeri girelim!

iPhone'daki Neural Engine nedir?

Neural Engine, iPhone X ve sonraki modellerde makine öğrenimi işlemlerini gerçekleştiren bir işlemcidir. Bu işlemciyi bu kadar önemli kılan makine öğrenimini güçlendirme yeteneğidir, bu nedenle bu işlemciyi anlamak için makine öğrenimini anlamak önemlidir.

Makine öğrenimi, bir programcıdan bağımsız olarak hangi kodun yürütüleceğine karar veren yazılımı ifade eder.

Tipik olarak, yazılımın çok özel ve kontrollü verilerle çalışması gerekir. Bu nedenle Siri, niyetinizi bir cümleyle anlayacak, ancak diğeriyle anlayamayacaktır – her bir cümledeki niyet aynı olsa bile. Siri'nin belirli bir yapıya gelmesi için verilere ihtiyacı var veya başarısız oluyor.

Makine öğrenimi bunu değiştirmenin bir yoludur. Yazılımın daha az yapılandırılmış verileri almasına ve yine de işlemesine izin verir. Siri'nin garip bir şekilde ifade edilen bir isteği anlamasına şaşırırsanız, bunun nedeni muhtemelen Siri'nin makine öğrenimi yeteneklerinin gelişmesidir.

Neural Engine, adından da anlaşılacağı gibi, telefonunuzdaki bunu mümkün kılan motordur.

Bu kavramları anlamanın biraz zor olabileceğinin farkındayım ve bunları açıklamakta en iyi işi yapamadığımı da biliyorum. Bu gönderi için her şeyi kısa ve basit tutmaya çalışıyorum, ancak daha derin bir dalış istiyorsanız, kontrol etmelisiniz. bu gönderi!

iOS 15 özellikleri nöral motordan nasıl yararlanmaya başlıyor?

iPhone'un Neural Engine'iyle ilgili sorun, güçlü olmaması değil, gücünün iPhone'da tam olarak kullanılmamasıdır. Son dört yıldır, artırılmış gerçeklik gibi sınırlı durumlarda uygulandı. Yararlı, ancak henüz iPhone'da devrim yaratmadı.

Birkaç iOS 15 özelliğinin Neural Engine için daha devrim niteliğinde bir geleceğe işaret ettiğini düşünüyorum. Aşağıda açıklamak üzere olduğum yeni özelliklerin hiçbirinin bu işlemci olmadan mümkün olacağını düşünmüyorum. Şimdi bu özelliklerin Neural Engine'i sonuna kadar nasıl kullandığını görelim.

iPhone'unuz fotoğraflarınızdaki metni okuyabilir

“Makine Öğrenimi!” Diye haykıran iOS 15 özelliklerinden ilki. benim için Canlı Metin oldu. Canlı Metin, iOS 15'te iPhone'unuzun Fotoğraflar uygulamanızdaki metni okumasını sağlayan bir özelliktir.

Bu, üzerinde basılı metin bulunan herhangi bir şeyin fotoğrafını çekebileceğiniz, o fotoğrafı Fotoğraflar uygulamasında açabileceğiniz ve bu metinle etkileşime geçebileceğiniz anlamına gelir. Fotoğraflardaki telefon numaralarına dokunabilir, belge resimlerinden metin kopyalayıp yapıştırabilir ve fotoğraflarda metin aramak için Fotoğraflar'daki arama çubuğunu kullanabilirsiniz.

Bu özellik aynı zamanda iPhone'unuzun fotoğraflarınızdaki el yazısını okumasını sağlar. Kamera uygulamasıyla da çalışır, böylece iPhone kameranızın vizöründeki metinle gerçek zamanlı olarak etkileşim kurabilirsiniz.

Makine öğrenimi olmadan böyle bir özellik neredeyse imkansız olurdu. Bu çevrimiçi güvenlik testlerinin robot olmadığınızı kanıtlamak için çarpık metin kullanmasının nedeni budur. Çünkü bir programın metni okuyabilmesi zordur.

Yazı tipi, stil, renk veya açıdan bağımsız olarak metni gerçek zamanlı olarak okuyabilen bir akıllı telefon özelliği son derece yararlı olmakla kalmaz, aynı zamanda mobil makine öğreniminin mükemmel bir kullanımıdır.

iOS 15 özellikleri, iPhone'unuzun fotoğraflarınızdaki içeriği tanımasını ve tanımlamasını sağlar

Neural Engine'i kullanan yeni iOS 15 özelliklerinden bir diğeri de Fotoğraflar'da nesne tanıma. Bu özellik, metin yerine nesneleri tanıması dışında Canlı Metin'e benzer şekilde çalışır. Apple'ın kullandığı örnek, iPhone kameranızı bir köpeğe doğrultabilmenizdir ve iPhone'unuz onun yalnızca bir köpek olduğunu değil, aynı zamanda hangi cins köpek olduğunu da anlayacaktır.

iPhone, sınırlı da olsa bir nesne tanıma biçimi olan bir süredir fotoğraflarınızdan yüzleri çıkarabiliyor. Bu yeteneğin bu şekilde genişletilmesi, iPhone'unuzun bir fotoğrafın yapılandırılmamış verilerine ve içindeki kimlik nesnelerine hızlı bir şekilde bakmasını sağlayacaktır.

Bu, Canlı Metinden daha etkileyici (ve zordur), çünkü Neural Engine'in araması gereken kalıplar çok daha az tutarlı olacaktır. Bunun gibi kararlar alabilmek için iPhone'unuzun binlerce (yüzbinlerce olmasa da) karar vermesi gerekecek.

Bir köpek ırkını tanımlamak için önce köpeğin arka plandan farklı bir nesne olduğunu görmesi gerekecek, sonra o köpeğin etrafına sınırlar çizmesi gerekecek, sonra o köpeğin bir köpek olduğunu belirleyene kadar farklı özelliklerini seçin, ardından ne tür bir köpek olduğunu belirlemek için daha fazla özellik çekin NS.

Bu tür bir bilgi işlem yalnızca bir makine öğrenme işlemcisi ile mümkündür.

Fotoğraflardaki anılar daha sofistike ve “gerçek” bir his olacak

Fotoğraflar uygulamasında bir Neural Engine rötuşu alacak bir başka özellik de Anılar.

Bu özellik, belirli bir zamana (genellikle belirli bir güne) ait fotoğrafları çeker ve izlemeniz için bunları kısa bir videoda birleştirir. Fikir, Anıların tatilleriniz, partileriniz, yıldönümleriniz ve daha fazlasının video kolajlarını otomatik olarak oluşturmasıdır.

Anılar, kalitede önemli bir artış elde eden iOS 15 özelliklerinden bir diğeridir. Apple Music kitaplığınızdaki müzikleri otomatik olarak Anılarınıza dahil eder.

Fotoğraflar'ın seçtiği müzik, yalnızca videoya uygun şekilde ayarlanmaz, aynı zamanda videonun içeriğiyle de eşleşmelidir. Örneğin, bir partiden alınan görüntüler enerjik müzikle eşleştirilmeli, daha düşünceli fotoğraflara ise daha yavaş müzik eklenmelidir.

Bu özelliği sık kullanmasam da arkasındaki bilgisayar bilimi son derece büyüleyici. Nesne ve manzara tanımayı birleştirir, fotoğrafları içerik, konum ve zaman dilimine göre gruplandırır, günlük ortalama fotoğrafları özel hayata bağlı fotoğraflardan ayırır. olaylar, o fotoğrafların ruh hali ile sevdiğiniz bir şarkının ruh hali arasında bir bağlantı kurar, bunları bir slayt gösterisi sunumunda eşleştirir ve o sunumun zamanını müziğin ritmiyle eşleştirir. müzik.

Anılar her zaman Neural Engine'i kullanmıştır. Ve iOS'un bir sonraki sürümü, bu özelliğin zekasını önemli ölçüde artıracak şekilde ayarlandı.

Bildirimler, Widget'lar ve Rahatsız Etmeyin daha akıllı hale geliyor

Neural Engine'den daha fazla yararlanan iOS 15 özelliklerinin bir grubu, bildirimler, widget'lar ve Rahatsız Etmeyin.

Widget'lar, iOS 14'te makine öğrenimini kullanmaya başladı, ancak bunları buraya eklemenin yararlı olacağını düşündüm. Akıllı Yığınlar, widget'ları üst üste koymanıza olanak tanır. Daha sonra iPhone'unuz gün boyunca bunlar arasında gezinecek ve herhangi bir zamanda en alakalı widget'ın ne olduğunu size gösterecektir.

Bu tür kararlar, günün farklı saatlerinde ve belirli uygulamaları kullandıktan sonra davranışlarınızı analiz ederek verilir. Neural Engine bu verileri alır, yorumlar ve ardından widget'larınızı bu verilere göre görüntüler.

Yeni iOS 15 özellikleri çok benzer şekilde çalışacak şekilde ayarlanmıştır.

Bildirimler artık bir Bildirim Özetinde gruplandırılacak, böylece tüm gün Kilit Ekranınızı dolduran daha az önemli bildirimler görmezsiniz. Bildirim Özeti özelliğini özelleştirebilir veya Neural Engine'in sizin için halletmesine izin verebilirsiniz.

Rahatsız Etmeyin, belirli bildirimleri nasıl sınıflandırıldıklarına bağlı olarak gizleyen yeni bir bileşen olan Focus alıyor. Focus'u manuel olarak yönetebilir veya kendisinin akıllıca yönetmesine izin verebilirsiniz.

Bu özelliklerin üçü de davranışınızı tahmin etmek ve buna uyum sağlamak için son derece benzer makine öğrenimi ölçümlerini kullanacak.

Yeni iOS 15 özellikleri, kameranızla yol tarifi almayı kolaylaştıracak

Bu, beklediğim kadar heyecan duymadığım iOS 15 özelliklerinden biri. Özellikle makine öğrenimi bağlamında hala çok ilginç buluyorum.

iOS 15'teki Haritalar'da, yürürken kameranızı doğrultabileceksiniz. Bu, ortamınıza yansıtılan AR yönergelerini görmenizi sağlar. Diyelim ki sinemaya gitmeye çalışıyorsunuz ve hangi yolu seçeceğinizden emin değilsiniz. iPhone'unuzu etrafınıza çevirebilir ve etrafınızdaki sokaklarda ve binalarda vurgulanan talimatları görebileceksiniz.

iPhone'daki Artırılmış Gerçeklik, Neural Engine'in dahil edilmesiyle mümkün oldu, bu nedenle bu özellik, kökenini makine öğrenimine borçludur. Ancak bu özellik, inanılmaz bir gerçek zamanlı deneyim sağlamak için AR ile görüntü tanıma ve konum algılamayı da birleştiriyor.

Lansman sırasında yalnızca birkaç şehirde kullanılabilecek olsa da, bu özellik iPhone'daki makine öğreniminin yalnızca arka planda size yardımcı olmayacağı bir geleceğe işaret ediyor. Konfor bölgenizin veya yeteneğinizin dışında olan şeyleri anında elde etmenize yardımcı olabilir.

Siri, cihazınızda daha fazla işlem yapacak

Neural Engine'den daha fazla yararlanan iOS 15 özelliklerinin sonuncusu Siri'dir. Siri her zaman makine öğrenimini kullandı. Ancak bu öğrenme, Neural Engine'in potansiyelini henüz en üst düzeye çıkarmadı.

Bunun nedeni, Siri'nin cihaz dışı işlemeyi kullanmasıdır. Bu, iPhone'unuzun isteğinizi dinlediği, isteği işleyen bir Apple sunucusuna gönderdiği ve ardından bu isteği yerine getirmesi için iPhone'unuzdaki Siri'ye geri gönderdiği anlamına gelir.

Bunun yapılmasının nedeni, Siri'nin gücünü iPhone'un destekleyebileceğinin ötesinde artırmaktı. Ancak iOS 15'te bu değişecek şekilde ayarlanmıştır. Siri artık işlemlerinin çoğunu iPhone'unuzda yapacak. Bu, Siri'yi daha hızlı, daha akıllı ve daha güvenilir hale getirmelidir.

Bu güncellemenin muhtemelen Neural Engine'den en az yardımı gerektireceğini düşünüyorum. Bu nedenle listenin sonundaki yerleşimi. Bununla birlikte, Siri'nin daha akıllı hale geldiğine işaret ettiği için kayda değer. Uzak bir sunucu değil, iPhone'daki donanımı kullanan daha yetenekli bir asistan.

Neural Engine, yaklaşan iOS 15 özellikleri olmadan ne yapabilir?

Ve bu kadar! Anlayabildiğim kadarıyla, iOS 15 özelliklerinin Neural Engine'in ham gücünü kullanmaya başlamasının tüm yeni yolları bu.

Bu yazının sonuna, Neural Engine'in iPhone'unuzda halihazırda yaptığı bazı şeyleri vurgulayan kısa bir bölüm eklemek istedim. Bu şekilde, bugün nerede olduğunu birkaç ay sonra nerede olacağını karşılaştırabilirsiniz.

Umarım bu, iOS'ta yapılacak değişiklikleri yeni bir ışık altında değerlendirmenize ve bunun gibi özelliklerin iPhone'unuza nasıl geldiğini daha iyi anlamanıza yardımcı olur.

Neural Engine daha iyi fotoğraflar çekmenize yardımcı olur

2017'den beri iPhone'da Neural Engine'in en büyük kullanımının fotoğrafçılıkta olduğunu söyleyebilirim. Apple, her yıl en yeni iPhone'un önceki nesilden daha fazla fotoğraf hesaplaması yapabileceğini gösteriyor. Apple, "Görüntü işlemcisi fotoğraf başına X milyon hesaplama/karar yapıyor" gibi şeyler söylüyor.

Bu, her fotoğraf çektiğinizde Neural Engine'in yaptığı hesaplamaların sayısını ifade eder. Renklere, aydınlatmaya, zıt unsurlara, konuya, arka plana ve çok sayıda başka faktöre bakar. Ve tüm bu öğelerin bir anda en iyi şekilde nasıl derecelendirileceğini, ayarlanacağını, emileceğini ve dengeleneceğini belirler.

Portre Modu ve Derin Füzyon gibi şeyleri mümkün kılan bu makine öğrenimi sürecidir. Portre Modu sizi arka planınızdan ayırabilir ve Deep Fusion, iPhone'da gece fotoğrafçılığını eskisinden çok daha iyi hale getirdi.

Neural Engine, donanım kısıtlamaları nedeniyle iPhone'unuzun kamerası için kritik öneme sahiptir. iPhone'un boyutu nedeniyle, kamera ve lenslerinin kapasitesi sınırlıdır. iPhone fotoğrafçılığınızı profesyonel bir DSLR'deki fotoğraflarla eşit hale getiren şey, fotoğraf çektiğinizde gerçekleşen bilgi işlem ve makine öğrenimidir.

Makine öğrenimi, FaceID'yi hızlı, güvenli ve uyarlanabilir hale getirir

Elbette Neural Engine'den neden yaratıldığından bahsetmeden söz edemeyiz.

Bu doğru - FaceID'yi mümkün kılmak için iPhone X'e Neural Engine eklendi. Bilmiyorsanız FaceID, iPhone'unuzun en gelişmiş ve karmaşık özelliklerinden biridir.

FaceID, yüzünüzün sadece selfie kamerasındaki 2D görüntüsünü yüzünüzün başka bir 2D görüntüsüyle karşılaştırmaz. Yüzünüzün 3 boyutlu haritasına bakar, göz hareketinizi takip eder ve yüzünüzün önceki 3 boyutlu taramasıyla karşılaştırır.

FaceID bunu sadece yüzünüz hareket halindeyken, kısmen gizlenmişken ve değişen açılardayken iki saniyeden daha kısa bir sürede yapmaz. Ayrıca yüzünüzün günden güne incelikle değişmesine de uyum sağlar. Bu yüzden yüzünüzü yeniden taramanıza gerek kalmadan sakal bırakabilir, yaşlanabilir ve diğer incelikli şekillerde değişebilirsiniz.

FaceID ve Neural Engine, iPhone'unuzun kilidini her açtığınızda yüzünüzden çalışıyor ve öğreniyor. Neural Engine olmasaydı, FaceID bugünkü kadar hızlı, güvenli veya güvenilir olmazdı.

Neural Engine, iPhone'daki AR deneyimlerinde önemli bir rol oynuyor

Son olarak, Neural Engine, iPhone'daki AR'de önemli bir rol oynar. Bilmeyenler için Artırılmış Gerçeklik (AR), iPhone kameranızın vizörü aracılığıyla ortamınıza 3B modeller yansıtan bir özelliktir. Bunu iPhone'unuzdaki Measure uygulamasını kullanarak kendiniz test edebilirsiniz.

Bu tür bir özellik, görüntü tanıma, uzamsal farkındalık ve hafıza gibi şeyleri birleştirir. Bunların tümü, Neural Engine'in masaya getirdiği gücü gerektirir.

Neyse ki, yeni iOS 15 özelliklerinin çoğu, iPhone'da AR'yi daha da güçlü hale getirecek şekilde ayarlanmıştır. AR'nin mobil cihazların en ayrılmaz özelliklerinden biri olma potansiyeline sahip olduğunu düşündüğümden, devam etmesini umduğum bir trend.

Yaklaşan iOS 15 özellikleri, iPhone için daha akıllı bir geleceğe işaret ediyor

Genel olarak, bu iOS 15 özelliklerinin bize bir fikir vereceği gelecek için çok heyecanlıyım. iPhone'un yeterince kullanılmadığını hisseden birkaç yönü var, ancak Neural Engine kadar az kullanıldı. Bu değişikliği dört gözle bekliyorum ve umarım siz de öyle yaparsınız!

Apple ile ilgili her şey hakkında daha fazla haber, içgörü ve ipucu için geri kalanına göz atın AppleToolBox blogu!