В Китае создали мощную генеративную нейросеть глубокого обучения
О создании генеративной нейронной сети глубокого обучения Wu Dao 2.0 объявили специалисты Пекинской академии искусственного интеллекта, сообщает 3 июня издание «Хайтек».
По словам специалистов, по мощности новая нейронная сеть Wu Dao 2.0 обходит ближайших конкурентов — Open AI GPT-3 и Google Switch. Мощность нейросети измеряется числом параметров, которые нейросеть может использовать в своей работе. Нейросеть Оpen AI GPT-3 использует 175 миллиардов параметров, а нейросеть Wu Dao 2.0 — 1,75 триллиона, то есть на порядок больше.
Если нейросеть Оpen AI GPT-3 может генерировать осмысленные тексты, создавать музыку и программный код, то нейросеть Wu Dao 2.0 пишет эссе и стихи на китайском языке, распознает и генерирует по описанию изображения, имитирует речь, создает кулинарные рецепты и предсказывает трехмерную структуру белков.
Для обучения нейросети разработчики использовали почти 5 ТБ изображения и текстов, включая 1,2 ТБ текстов на китайском и английском языках. Для выполнения новых задач нейросеть использует уже полученные знания и лишь небольшое количество новой информации.
Новой разработкой уже заинтересовались 22 компании. В том числе — производитель смартфонов Xiaomi, служба доставки Meituan и платформа для обмена короткими видео Kuaishou.
