Зміст
Google Pixel 4 та Pixel 4 XL можуть похвалитися найкращими програмними можливостями компанії та можливостями камери, які, можливо, пояснюються, зокрема, включенням Pixel Neural Core. Цей маленький чіп знаходиться поряд з основним процесором Pixel 4, щоб ефективно запускати потужні робочі навантаження Google. Вони варіюються від обробки зображень до розпізнавання голосу та можливості транскрипції.
Хоча Neural Core не є першим тріском Google на внутрішньому процесорі машинного навчання для смартфонів. Pixel 2 і 3 постачаються разом із Pixel Visual Core, розробленим для завантаження зображень, таких як HDR +, для підвищення продуктивності та енергоефективності. Нейронний ядро Pixel 4 базується на цій основі завдяки вдосконаленим можливостям та вибору нових випадків використання.
Не пропустіть: ось що може зробити Astro режим Pixel 4
Як працює нейронне ядро Pixel?
Google ще не поділився деталями щодо того, що саме відбувається в її Neural Core. Однак ми знаємо, як працює Visual Core попереднього покоління та тип методів, які зазвичай використовуються в процесорах машинного навчання (ML).
На відміну від традиційного процесора, побудованого для обробки широкого спектру обчислювальних завдань, процесори машинного навчання (NPU), як і Neural Core, оптимізовані для декількох конкретних складних математичних завдань. Це робить їх більш схожими на процесори цифрового сигналу (DSP) або блоки обробки графіки (GPU), але оптимізовані для конкретних операцій, що використовуються алгоритмами машинного навчання.
Розташоване накопичення-накопичення - це дуже поширена операція з обробки зображень та голосу, для якої ви не знайдете широкої підтримки для центрального процесора. На відміну від сучасних 32 і 64-бітних процесорів, ці операції виконуються на даних розмірами всього 16, 8 і навіть 4 біт. Спеціальні апаратні блоки необхідні для підтримки цих операцій з максимальною ефективністю.
Neural Core прискорює алгоритми зображення та голосу, які працюють менш ефективно на процесорі або GPU.
Neural Core вбудовує в апаратне забезпечення спеціальні арифметичні логічні блоки, щоб швидко виконувати ці вказівки та з мінімальним споживанням енергії, а не приймати кілька циклів процесора. Чіп, швидше за все, містить сотні цих АЛУ в декількох ядрах, що мають спільну локальну пам'ять, і мікропроцесор, що контролює планування завдань.
Google майже напевно оптимізував свою останню апаратну конструкцію навколо своїх алгоритмів програми Assistant, voice та image. Залежність від можливостей ALU нейронного ядра є тим, чому останні функції фотографії Pixel 4 не пробиваються до старих телефонів.
Що може зробити Нейронний Ядро?
Нейронний ядро, здається, є ключовим інгредієнтом ряду нових функцій, упакованих у Google Pixel 4 та Pixel 4 XL. Ці вдосконалення зосереджуються головним чином на обробці зображень та голосу.
Що стосується фотозйомки, до списку входять контролі подвійної експозиції, режим астрофотографії, живий HDR + попередній перегляд та нічний зір. Google Pixel 4 виконує подвійну коригування експозиції та HDR + в режимі реального часу, щоб користувачі могли бачити результати своїх знімків, перш ніж натиснути на спуску. Це вказує на значне збільшення обчислювальної потужності для зображень порівняно з Pixel 3.
Крім того, ці телефони вводять баланс білого на основі навчання, який фіксує жовті відтінки, часто пов’язані із зображеннями при слабкому освітленні. Для режиму Astro Night Sight використовуються багаторазові знімки експозиції, виявлення неба та комбінація зображень, що вимагає значного розуму обробки та виявлення зображення. Нарешті, функція "Часті обличчя" Pixel 4 визначає та рекомендує кращі фотографії людей, яких часто фотографуєте.
Pixel 4 також може похвалитися оновленим Помічником, спортивно вдосконаленими мовними моделями, які тепер можуть працювати на пристрої, а не в хмарі. Нові голосові функції також включають продовження розмов, транскрипцію аудіо через додаток Recorder та покращене розпізнавання мови. Нейронне ядро також, ймовірно, відіграє роль і в технології 3D розблокування обличчя телефону.
Хвиля майбутнього
Google Neural Core - це найпотужніший фрагмент кремнію для смартфонів компанії, що дозволяє більш ефективно редагувати зображення в режимі реального часу, ніж раніше. Google пишається своїми провідними технологічними технологіями машинного навчання, а найбільші продажі Pixel 4 покладаються на плоди цих інвестицій.
Однак Pixel 4 - не єдиний смартфон, який має потужний процесор машинного навчання. Всі смартфони, що працюють на базі Snapdragon 855, пропонують спеціальні апаратні засоби машинного навчання. Хоча Google очевидно має різні потреби та, можливо, ще більш потужні вимоги до своїх смартфонів. Аналогічно, Kirin 990 Huawei може похвалитися подвійними внутрішніми NPU, досить потужними для відеоефектів у реальному часі і багато іншого.
Обладнання машинного навчання швидко стає наріжним каменем функцій флагманського зображення, відео та AI смартфона. Google зі своїми Pixel 4 та Neural Core розміщується прямо біля верхньої частини пакета.
Наступне: Камери Pixel від Google взагалі не намагаються бути камерами
