Глубокое обучение AWS AMI
Быстро создавайте масштабируемые и безопасные приложения для глубокого обучения в предварительно настроенной среде
Масштабирование
Масштабирование распределенного машинного обучения (ML) на тысячи ускоренных инстансов и беспрепятственное развертывание моделей для инференса в производстве.
Разработка
Разрабатывайте на ускорителях, включая графические процессоры AWS Trainium, AWS Inferentia и NVIDIA, с использованием новейших драйверов, платформ, библиотек и инструментов.
Сокращение рисков
Сокращение рисков с помощью настроенных, стабильных образов машин, регулярно исправляемых для устранения уязвимостей безопасности.
Компания AWS признана лидером в последнем отчете Magic Quadrant от Gartner
Gartner называет AWS лидером в своем отчете «Magic Quadrant» в сфере облачных сервисов ИИ для разработчиков.
Примеры использования
Разработка автономных транспортных средств
Разрабатывайте расширенные модели машинного обучения в любом масштабе для безопасной разработки технологий автономных транспортных средств (AV), проверяя модели с использованием миллионов поддерживаемых виртуальных тестов.
Обработка естественного языка
Ускорьте установку и настройку инстансов AWS и ускорьте проведение экспериментов и оценки с помощью современных платформ и библиотек, в том числе преобразователей Hugging Face.
Анализ данных для здравоохранения
Используйте расширенную аналитику, машинное обучение и глубокое обучение, чтобы выявлять тенденции и составлять прогнозы на основе необработанных разрозненных данных о состоянии здоровья.
Ускоренное обучение моделей
DLAMI включает в себя новейшие возможности ускорения графического процессора NVIDIA с использованием предварительно настроенных драйверов, библиотеки Intel Math Kernel Library (MKL), пакетов Python и платформы Anaconda.
Истории успеха клиентов
Toyota Research Institute
«В исследовательском институте Toyota Research Institute (TRI) мы изучаем способы улучшать качество жизни людей за счет достижений в области автоматизированного вождения, энергетики и материалов, искусственного интеллекта, ориентированного на человека, интерактивного вождения, больших моделей поведения и робототехники. Машинное обучение занимает центральное место в нашей работе. Глубокое обучение AWS AMI сыграло важную роль в ускорении наших исследований. Они позволяют нашим командам быстро запускать и масштабировать высокопроизводительные среды машинного обучения на EC2 с помощью предварительно настроенных драйверов NVIDIA и CUDA, которые работают сразу. Эта стабильность и простота использования значительно снижают эксплуатационные издержки, позволяя нашим исследователям и специалистам по обработке данных сосредоточиться на задачах, связанных с их работой, а не на управлении инфраструктурой. Оптимизировав инструменты машинного обучения, AWS DLAMI позволяет нам сосредоточиться на том, что действительно важно: на достижении технических прорывов и открытии возможностей для новых продуктов и сервисов, которые могут принести «всем счастье». Эффективность и надежность Глубокого обучения AWS AMI сделали его неотъемлемой частью нашего инструментария в TRI».
Сатья Котари, технический руководитель, TRI.
Cimpress
Компания Cimpress вкладывает средства в создание и развитие ориентированных на клиента предпринимательских компаний, занимающихся массовым изготовлением печатной продукции по индивидуальным заказам, в долгосрочной перспективе. Благодаря Cimpress заказчики могут легко и недорого произвести впечатление – на своих клиентов, организацию или близких. Неважно, идет ли речь о рекламных материалах, усиливающих бренд компании, или об извещении в честь рождения ребенка – Cimpress предлагает клиентам сочетать желаемую персонализацию с ощутимым впечатлением от физической продукции.
«Cimpress использует Глубокое обучение AWS AMI для быстрой настройки и развертывания наших сред машинного обучения. Благодаря использованию DLAMI снижаются производственные затраты, и мы можем быстрее выводить наши продукты на рынок, сосредоточившись на основной работе по обучению и внедрению наших моделей глубокого обучения для компьютерного зрения и генеративного ИИ».
Аджай Джоши, главный инженер-программист, Cimpress
Flip AI
Flip AI – это первая встроенная платформа обеспечения наблюдаемости на базе генеративного искусственного интеллекта, которая работает независимо от данных и платформ, какими бы ни были их форма и формат, включая метрики, события, журналы и маршруты, а также выполняет прогнозную аналитику и анализ первопричин инцидентов за считанные секунды.
«Мы обучили большие языковые модели (LLM) для DevOps отлаживать инциденты, связанные с производительностью, для того чтобы предприятия могли предоставлять клиентам услуги наивысшего качества. Для этого обучения необходимо настроить параметры высокой производительности, что не вызывает затруднений. Благодаря глубокому обучению AWS AMI (DLAMI) не нужно прилагать усилий к управлению драйверами CUDA или средствами оптимизации Pytorch. Все просто работает. Повышение процентного коэффициента использования графического процессора указывает на то, что мы можем более эффективно обучать наши модели и экономить 10 миллисекунд на логический вывод».
Сунил Маллья, технический директор, Flip AI
Torc Robotics
Torc Robotics является независимой дочерней компанией Daimler Truck AG, мирового лидера и первопроходца в области грузоперевозок, и нацелена на революцию в сфере дальних грузоперевозок с помощью автономных грузовиков класса 8 уровня 4
«Глубокое обучение AWS AMI сыграло важную роль в ускорении разработки передовых систем помощи водителю в Torc. DLAMI позволяет быстро настраивать и развертывать среды машинного обучения на инстансах AWS EC2, что крайне важно для наших исследований и разработок. Драйверы NVIDIA и CUDA работают сразу, не нуждаясь в настройке, обеспечивая стабильную и надежную платформу, которая значительно снижает эксплуатационные издержки. Упрощая управление инфраструктурой машинного обучения, AWS DLAMI позволяет нам сосредоточить ресурсы на ускорении вывода продуктов на рынок. Эффективность и надежность Глубокого обучения AWS AMI сделали его незаменимым инструментом в реализации основной миссии Torc в сфере автономных транспортных средств».
Джейсон Фокс, старший менеджер по разработке, платформа для разработчиков, Torc
Как это работает
Глубокое обучение AWS AMI (DLAMI) предоставляет специалистам по машинному обучению и исследователям проверенные безопасные наборы платформ, зависимостей и инструментов для ускорения глубокого обучения на Amazon EC2. Образы машин Amazon (AMI), созданные для Amazon Linux и Ubuntu, предварительно сконфигурированы с использованием драйверов и библиотек TensorFlow, PyTorch и NVIDIA CUDA, а также Intel MKL, интерфейса эластичной матрицы (EFA) и плагина AWS OFI NCCL, что позволяет быстро развертывать и запускать эти платформы и инструменты в любом масштабе.
Семинары в рамках re:Invent
AWS re:Invent 2023 – Обучение работе с большими моделями на AWS Deep Learning AMI и PyTorch, ft. Pinterest – AIM326