Суперкомпьютер от Meta, материнской компании Facebook, создаст искусственный интеллект, способный работать подобно человеческому мозгу: понимать контекст, анализировать тексты, изображения и видео на сотнях языков.
Facebook уже давно рассчитывает на искусственный интеллект, который поможет ему в трудной задаче модерирования сообщений от миллиардов пользователей. Теперь ее материнская компания Meta делает шаг, который должен приблизить ее к этой, казалось бы, недостижимой цели: созданию своего первого суперкомпьютера. Искусственный интеллект сможет выполнять самые сложные задачи, в том числе анализ вредоносного контента. Корреспондент.net Рассказывает подробности.
Самый могущественный в мире
Компания Meta осуществляет долгосрочные инвестиции в искусственный интеллект с 2013 года, когда была создана исследовательская лаборатория искусственного интеллекта Facebook. 24 Января компания объявила о создании суперкомпьютера AI Research SuperCluster (RSC), предназначенного для использования в исследовательских проектах в области искусственного интеллекта.
Суперкомпьютер, который разрабатывался в течение двух лет, может в конечном итоге помочь Meta разработать гораздо более мощное программное обеспечение для искусственного интеллекта, способное решать сложные задачи, такие как обнаружение и подавление высказываний ненависти в сообщениях.
"С помощью RSC мы можем быстрее обучать модели [искусственного интеллекта], которые используют мультимодальные сигналы - например, для понимания контекста сообщения, включая язык, изображение и тон", - сказал CNN Business инженер-программист Meta Шубхо Сенгупта.
Суперкомпьютеры со множеством взаимосвязанных процессоров, объединенных в так называемые узлы, в последние годы становятся все более популярными для исследований в области искусственного интеллекта.
Самый быстрый суперкомпьютер в Соединенных Штатах на сегодняшний день и второй по скорости в мире - Summit от IBM и Министерства энергетики США - использовался, например, при изучении неизвестных белков. Несколько крупных технологических компаний, таких как Microsoft и NVIDIA, также имеют собственные суперкомпьютеры.
Суперкомпьютер Meta / ai.facebook.com
Meta в своем официальном блоге сообщила, что по состоянию на январь ее суперкомпьютер включает 6080 графических процессоров, разделенных на 760 узлов, что потенциально делает его одним из самых мощных в мире.
По словам Сенгупты, в своем нынешнем размере он находится на одном уровне с суперкомпьютером Perlmutter в Национальном исследовательском и вычислительном центре энергетических исследований, который занимает пятое место в мире. Однако, когда он будет завершен примерно в середине этого года, в нем будет 16 тысяч графических процессоров NVIDIA A100, и компания ожидает, что компьютер сможет обеспечить почти пять эксафлопсов вычислительной производительности - это пять квинтиллионов операций в секунду.
"После полной сборки кластер увеличится почти в три раза, что, насколько нам известно, сделает его самым быстрым суперкомпьютером с искусственным интеллектом в мире", - пояснил Сенгупта.
В работе над проектом принимают участие несколько сотен специалистов, в том числе сотрудники NVIDIA, Penguin Computing и Pure Storage.
Как человеческий мозг
Согласно Meta, исследователи уже начали использовать суперкомпьютер для обучения больших моделей, связанных с обработкой естественного языка и компьютерным зрением, на наборе данных размером до эксабайта, что примерно эквивалентно 36 тысячам лет высококачественного видео.
В будущем Meta хочет создать искусственный интеллект, который сможет работать как человеческий мозг и понимать контекст, анализировать тексты, изображения и видео на сотнях языков, а также выявлять вредоносный контент и создавать новые инструменты дополненной реальности.
Суперкомпьютер Meta / ai.facebook.com
Meta надеется, что со временем это позволит компании "создавать совершенно новые системы искусственного интеллекта", которые смогут выполнять сложные задачи, такие как перевод в реальном времени для большой группы людей, говорящих на разных языках.
Ранние тесты показали, что суперкомпьютер может обучать большие языковые модели в три раза быстрее, чем система, используемая компанией в настоящее время. Это означает, что модель искусственного интеллекта, для обучения которой потребовалось бы девять недель, может быть обучена на суперкомпьютере за три недели.
Meta надеется, что ее новый суперкомпьютер в конечном итоге сможет обучать модели искусственного интеллекта с триллионами параметров - известно всего несколько моделей искусственного интеллекта такого масштаба. Он также будет во много раз больше, чем GPT-3, большая языковая модель от OpenAI, которая способна генерировать текст, похожий на человеческий, и используется для таких приложений, как изучение языков и налоговое программное обеспечение для фрилансеров.
В конечном счете, по словам Мета, суперкомпьютер приведет к технологиям, необходимым для создания так называемой метавселенной - крупномасштабной взаимосвязанной виртуальной реальности, в которой люди могут ходить, используя цифровые аватары, и взаимодействовать с другими людьми, которые также находятся там виртуально.
Facebook позиционировал метавселенную как будущее компании, но сегодня реализованы лишь фрагменты этого направления. Подробнее о проекте читайте в статье "Как Facebook создает метавселенную с помощью телепортации".