Съдържание
Google Pixel 4 и Pixel 4 XL могат да се похвалят с най-добрите софтуерни функции и възможности на камерата на компанията, които са възможни отчасти поради включването на Pixel Neural Core. Този малък чип е разположен до основния процесор на Pixel 4, за да управлява ефективно мощните натоварвания на Google за машинно обучение. Те варират от обработка на изображения до разпознаване на глас и транскрипция.
Невронното ядро обаче не е първата крачка на Google в собствения процесор за машинно обучение за смартфони. Pixel 2 и 3, доставени с Pixel Visual Core, проектирани да разтоварят задачи за изображения като HDR + за подобрена производителност и енергийна ефективност. Невронното ядро на Pixel 4 се основава на тази основа с подобрени възможности и селекция от нови случаи на използване.
Не пропускайте: Ето какво може да направи Astro режим на Pixel 4
Как работи Neural Core на Pixel?
Google все още не е споделил подробности за това какво точно се случва в нейното Neural Core. Знаем обаче как работи Visual Core от предишното му поколение и какъв тип техники обикновено се използват в процесорите за машинно обучение (ML).
За разлика от традиционния процесор, създаден за обработка на широк спектър от изчислителни задачи, процесорите за машинно обучение (NPU), като Neural Core, са оптимизирани за няколко специфични сложни математически задачи. Това ги прави по-скоро като цифрови сигнални процесори (DSP) или графични процесорни единици (GPU), но оптимизирани за специфичните операции, използвани от алгоритмите за машинно обучение.
Съединено мултиплициране-натрупване е много често срещана операция за обработка на изображения и глас, за която няма да намерите широкомащабна поддръжка за вътрешността на процесора. За разлика от съвременните 32 и 64-битови процесори, тези операции се извършват на данни с размери само 16, 8 и дори 4 бита. Необходими са персонализирани хардуерни блокове за поддържане на тези операции с максимална ефективност.
Neural Core ускорява алгоритмите за изображение и глас, които работят по-малко ефективно на процесор или графичен процесор.
Neural Core изгражда специални аритметични логически единици в хардуер, за да се справят с тези инструкции бързо и с минимална консумация на енергия, вместо да поемат множество цикли на процесора. Чипът най-вероятно се състои от стотици от тези ALU в множество ядра, със споделена локална памет и микропроцесор, който наблюдава планирането на задачите.
Google почти сигурно е оптимизирал най-новия си хардуерен дизайн около своите софтуерни алгоритми за помощник, глас и изображения. Зависимостта от възможностите на ALU на Neural Core е защо най-новите функции на Pixel 4 за фотография няма да проправят път към по-старите телефони.
Какво може да направи Невронното ядро?
Невронното ядро изглежда е ключова съставка в редица нови функции, опаковани в Google Pixel 4 и Pixel 4 XL. Тези подобрения са насочени главно към обработката на изображения и глас.
От страна на фотографията списъкът включва двоен контрол на експозицията, режим на астрофотография, HDR + преглед на живо и преглед на нощта. Pixel 4 на Google извършва корекции с двойна експозиция и HDR + в реално време, така че потребителите да виждат резултатите от снимките си, преди да натиснат затвора. Това показва значително увеличение на изчислителната мощност за изображения в сравнение с Pixel 3.
В допълнение, тези телефони въвеждат базиран на обучението баланс на бялото в системата на камерата му, който фиксира жълти нюанси, често свързани с снимки на слаба светлина. Множество заснемане на експозиция, откриване на небето и комбинация от изображения се използват за режима Astro Night Sight, изискващ значително количество интелигенти за обработка и откриване на изображения. И накрая, функцията за чести лица Pixel 4 идентифицира и препоръчва по-добри снимки на хора, които често снимате.
Pixel 4 може да се похвали и с актуализиран Асистент, спортно подобрени езикови модели, които вече могат да работят на устройството, а не в облака. Новите функции на гласа включват също така непрекъснати разговори, аудио транскрипция чрез приложението Recorder и подобрено разпознаване на речта. Нейронното ядро също вероятно играе роля в технологията за 3D отключване на лицето на телефона.
Вълна на бъдещето
Google Neural Core е най-мощното парче силикон за смартфон на компанията досега, което позволява по-ефективно редактиране на изображения в реално време от преди. Google се гордее с водещите си в индустрията технологии за машинно обучение, а най-големите продажби на Pixel 4 разчитат на плодовете на тези инвестиции.
Pixel 4 обаче не е единственият смартфон, който има мощен процесор за машинно обучение. Всички смартфони, захранвани от Snapdragon 855, предлагат специален хардуер за машинно обучение. Въпреки че Google очевидно има различни нужди и може би дори по-мощни изисквания към своите смартфони. По същия начин, Kirin 990 на Huawei може да се похвали с двойни вътрешни NPU, достатъчно мощни за видео ефекти в реално време и други.
Хардуерът за машинно обучение бързо се превръща в крайъгълен камък на водещите смартфонни изображения, видео и AI възможности. Google, със своите Pixel 4 и Neural Core, се намира точно в горната част на пакета.
На следващо място: Камерите на Pixel на Google изобщо не се опитват да бъдат камери
