Intel разместила инструменты oneAPI на ML Space для ускорения машинного обучения, анализа данных, разработки ПО

Как компании Intel и SberCloud начали сотрудничество, разместив инструменты Intel® oneAPI на облачной платформе ML Space и запустив среду разработки GitLab*.

Logo
Arrow
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
SberCloud.Advanced
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari
Christofari

О компании

Intel — американская компания, разработчик и производитель электронных устройств и компьютерных компонентов. Мировой лидер в области микроэлектроники, ИТ и программных продуктов, создающий технологии для умного мира эпохи больших данных.

Цель проекта

Современные сервисы создаются через эксперименты с большими данными в распределенных дата-центрах облачных провайдеров на разных типах вычислителей: CPU и GPU, FPGA и специализированных ускорителях.

Чтобы создателям сервисов не «увязнуть» в сложностях гетерогенной инфраструктуры, Intel предложила открытую унифицированную абстрактную модель программирования oneAPI для поддержки гетерогенных вычислений на уровне языков и библиотек.

Таким образом появился набор программных инструментов Intel oneAPI на облачной платформе ML Space. Он позволяет разработчикам эффективно использовать производительность и уникальные возможности различных архитектур без изменения кода для каждой аппаратной платформы. Это дает свободу выбора лучшего оборудования для конкретной задачи.

Почему SberCloud

Среди рассматриваемых облачных российских провайдеров Intel выбрала SberCloud из-за его масштаба использования материнской компанией. SberCloud — облачная экосистемная платформа Сбера, которая предоставляет доступ к широкой линейке инфраструктурных и платформенных облачных решений, а также к инструментам для работы с искусственным интеллектом.

Решение

Инструменты Intel oneAPI включают в себя кросс-архитектурный язык программирования Data Parallel C++ (DPC++) и более 40 программных продуктов: компиляторы, библиотеки и инструменты для переноса, анализа и отладки, которые упрощают разработку приложений для обработки данных.

В то же время oneAPI поддерживает известные языки программирования (например, C, C++, Fortran и Python) и общие стандарты (такие, как MPI и OpenMP), обеспечивая функциональную совместимость и близкое соответствие с существующим кодом.

В модуле Environments на облачной платформе ML Space находятся следующие наборы инструментов Intel oneAPI:

  • Intel oneAPI Base — основной набор инструментов и библиотек для разработки высокопроизводительных, кросс-архитектурных приложений.
  • Intel oneAPI AI Analytics для ускорения обработки и анализа данных на CPU и GPU архитектуры Intel.
  • Intel oneAPI HPC для создания и оптимизации высокопроизводительных приложений на основе Fortran, OpenMP и MPI, которые могут масштабироваться на новейших системах и кластерах на базе процессоров Intel. В сочетании с основным (Base) набором инструментов содержит все необходимые средства для разработки высокопроизводительных приложений для решения научных или инженерных задач на системах с общей или распределенной памятью.
  • Intel Distribution of OpenVINO помогает оптимизировать, настраивать и запускать комплексный инференс с помощью оптимизатора моделей глубокого обучения, а также средств выполнения и разработки.

Результат

На данный момент инструментами oneAPI на базе ML Space пользуются десятки компаний из разных отраслей для решения бизнес-задач. В связи с их большой популярностью Intel и SberCloud решили открыть доступ к инструментарию Intel oneAPI и физическим лицам. Более того, компании запустили GitLab на ML Space — среду для коллективной разработки программных решений, которая в первую очередь позволяет взаимодействовать с репозиториями, управлять правами доступа и пользователями, отслеживать ошибки, автоматизировать процессы.

Чтобы получить бесплатный доступ к инструментам Intel oneAPI и среде разработки Gitlab на облачной платформе ML Space, достаточно зарегистрироваться на платформе через личный кабинет или Сбер ID.

Инструменты Intel oneAPI теперь также доступны и для текущих клиентов других облачных платформ SberCloud. Например, инструментами можно воспользоваться для оптимизации нагрузки на SberCloud Enterprise или для ускорения задачи существующего пользователя на ML Space.

Дальнейшие планы

Сотрудничество Intel и SberCloud развивается — проводится интеграция инструментов Intel oneAPI с соревновательной платформой DS Works и DataHub на ML Space.

Как было заявлено на международной конференции AI Journey 2021, облачная платформа SberCloud ML Space также пополнится сервисом конфиденциальных вычислений, который будет работать на базе Intel® Software Guard Extensions (Intel® SGX). Сервис позволит не только хранить и передавать данные в зашифрованном виде, но и обрабатывать их в защищенном анклаве, где конфиденциальность чувствительных данных может быть сохранена от любого неавторизованного программного обеспечения или даже при физическом доступе к серверу.

«Многие популярные модели, связанные, к примеру, с прогнозированием спроса, динамическим ценообразованием, моделями рекомендаций, прекрасно обучаются на CPU вместе с инструментарием oneAPI от Intel, который мы запустили в мае 2021 года на нашей первой технологической конференции SmartDev. Благодаря oneAPI можно ускорить разработку ИИ-приложений в разы за счет оптимизации железа и софта. Но иногда для обучения моделей требуются очень сенситивные данные, которые необходимо безопасно обрабатывать. Поэтому мы работаем над сервисом конфиденциальных вычислений на базе технологии Intel SGX», — сказал Давид Рафаловский, исполнительный вице-президент Сбербанка, CTO Сбера, руководитель блока «Технологии» на конференции AI Journey 2021.
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud
SberCloud