Tehnografi.com - Технологические новости, обзоры и советы
[adinserter block="67"]

Intel, Habana Labs и Hugging Face разрабатывают передовое программное обеспечение для глубокого обучения

Intel, Habana Labs и Hugging Face пытались создать инновационное общество, конечно, не с помощью плавучего транспортного средства; скорее, это порождает большую неопределенность в возможностях.

За последние несколько лет оба Новатора прошли через различные неудачи и массовые вспышки, чтобы повысить эффективность и настроить ключ к внедрению искусственного интеллекта с помощью проектов с открытым исходным кодом, интегрированного опыта разработчиков и научных исследований. Эта миссия позволяет им добиться непрерывного роста и привела к важнейшим преимуществам для создания и применения высококачественных моделей трансформаторов.

Модели-трансформеры обеспечивают повышенную производительность при решении широкого спектра задач машинного и глубокого обучения, таких как обработка естественного языка (NLP), компьютерное зрение (CV), речь и другие.

Распределенная точная настройка на платформе Intel Xeon:

Ученые, работающие с данными, озадачены распределением базы данных обучения, когда части обучения на одном узле ЦП становятся медленными. Это заставляет их отвечать на распределенное обучение, когда кластерные серверы хранят запасную модель, настраивают I с помощью подмножества набора обучающих данных и обмениваются результатами между узлами через Intel® с помощью одной библиотеки коллективных коммуникаций API, чтобы быстрее преобразовать ее в окончательную модель. .

Оптимальный опыт разработчика

С другой стороны, появилась библиотека с открытым исходным кодом, получившая название Optimum, которая упрощает ускорение преобразователя в растущем диапазоне устройств обучения и вывода данных. Он был разработан Hugging Face. Благодаря встроенным методам оптимизации и самодельным сценариям начинающие предприниматели могут использовать Optimum в качестве решения для ведущих источников.

Ускоренное обучение с Хабаной Гауди

Habana Labs и Hugging Face объединяются, чтобы упростить и ускорить обучение крупномасштабных высококачественных моделей трансформеров. Объединение пакета программного обеспечения SynapseAI® от Habana с библиотекой с открытым исходным кодом Hugging Face Optimum-Habana позволяет специалистам по обработке данных и специалистам по машинному обучению ускорить обучение глубокому обучению преобразователей с процессорами Habana — Gaudi и Gaudi2 — с помощью доступной строки кода.

Краткосрочное обучение в производстве

Intel Labs, Hugging Face и UKP Lab совместно разработали SetFit, сверхпростую платформу для тонкой настройки преобразователей предложений. Обучение в несколько этапов с использованием многоядерных обученных языковых моделей стало наиболее выдающимся решением реальной проблемы специалистов по данным: работа с данными с небольшим количеством меток или без них.

Проекты с открытым исходным кодом, интегрированный опыт разработчиков и научные исследования — это немногие доступные способы взаимодействия Intel с экосистемой и снижения стоимости ИИ.