В Google розповіли, що їхній суперкомп’ютер кращий за той, який для навчання штучного інтелекту використовують в Microsoft

Компанія Google в середу оприлюднила інформацію про один із суперкомп’ютерів власної розробки, призначених для роботи з технологіями штучного інтелекту. У компанії стверджують, що він навіть кращий за той, який для вдосконалення ChatGPT створила Microsoft. Переповідаємо, що про нього відомо.

Machine learning concept as modern technology

Google з 2016 року розробляє та розгортає чип під назвою Tensor Processing Unit для штучного інтелекту. В компанії впевнені, що він швидший і ефективніший за суперницькі системи, оскільки енергомісткі моделі машинного навчання залишаються найпопулярнішою частиною індустрії технологій.

Моделі та продукти штучного інтелекту, як-от Bard або ChatGPT, що працює на компонентах A100 від Nvidia, потребують багато комп’ютерів і сотень чи тисяч чипів для спільної роботи для навчання моделей. Зазвичай вони не вимикаються ні на мить упродовж місяців.

Інженери Google об’єднали в одну систему понад чотири тисячі тензорних блоків обробки (TPU). Це специфічні інтегральні схеми для навчання нейромереж та прискорення розрахунків, які виконує штучний інтелект. Система працює з 2020 року та використовує велику мовну модель Google PaLM. Дослідники стверджують, що їхній суперкомп’ютер приблизно в 1,2–1,7 раза швидший за аналог Microsoft, ще й потребує в 1,3–1,9 раза менше енергії.

Значна потужність, необхідна для розробки штучного інтелекту, коштує дорого, тож багато хто в галузі зосередився на створенні нових чипів, компонентів на кшталт оптичних з’єднань та програмних методів, які «стискають» її. Простими словами, як під час архівування файлів. Хоча в Google визнають, що TPU можуть поступатися в продуктивності останнім розробкам, у компанії впевнені, що саме їхній суперкомп’ютер нині найкращий для навчання великих мовних моделей.

• Нагадаємо, штучний інтелект Bard хоче виступити проти Google в розгляді справи про монополізацію цифрової реклами, а прагнення зекономити в компанії дійшло до того, що в співробітників забирають навіть степлери та скотч.