Google Cloud представила п’яте покоління власних процесорів для навчання ШІ
На щорічній конференції Cloud Next Google Cloud оголосила про випуск п’ятого покоління тензорних процесорів (TPU) для навчання нейромереж — TPU v5e. Про це повідомляє TechCrunch.
Можливості процесора TPU v5e
TPU v5e — це спеціалізовані чипи, які розроблені Google для пришвидшення обчислень, пов’язаних із нейромережами. Їх використовують як для тренування, так і для запуску моделей штучного інтелекту в хмарному середовищі Google Cloud.
Новий процесор TPU v5e має продуктивність у 100 трлн операцій за секунду. Кластери можуть містити до 256 чипів TPU v5e, об’єднаних високошвидкісним інтерконектом із пропускною здатністю понад 400 Тбіт/с.
Це дозволяє навчати та запускати великі мовні моделі, як-от GPT-3, BERT, T5 та інші, а також генеративні нейромережі, зокрема VAE, GAN, PixelCNN тощо.