Accenture, Dell Technologies и Lenovo — одни из компаний, использующих новый NVIDIA AI Blueprint для разработки визуальных ИИ-агентов, которые могут повысить производительность, оптимизировать процессы и создать более безопасные пространства.
Компании и государственные организации по всему миру разрабатывают ИИ-агентов для повышения возможностей рабочей силы, которая полагается на визуальную информацию от растущего числа устройств, включая камеры, IoT-сенсоры и транспортные средства.
Для поддержки их работы новый NVIDIA AI Blueprint для поиска и обобщения видео позволит разработчикам практически в любой отрасли создавать визуальные ИИ-агенты, которые анализируют видео и изображения. Эти агенты могут отвечать на вопросы пользователей, генерировать обобщения и создавать оповещения для конкретных сценариев.
Часть NVIDIA Metropolis, набора инструментов для разработки приложений визуального ИИ, этот блюпринт представляет собой настраиваемый рабочий процесс, который объединяет технологии компьютерного зрения и генеративного ИИ от NVIDIA.
Глобальные системные интеграторы и поставщики технологических решений, включая Accenture, Dell Technologies и Lenovo, приносят NVIDIA AI Blueprint для визуального поиска и обобщения в бизнес и города по всему миру, запуская новую волну ИИ-приложений, которые могут быть развернуты для повышения производительности и безопасности на заводах, складах, в магазинах, аэропортах, на перекрестках и в других местах.
Анонсированный перед Smart City Expo World Congress, NVIDIA AI Blueprint предоставляет разработчикам визуальных вычислений полный набор оптимизированного программного обеспечения для создания и развертывания ИИ-агентов, работающих на генеративном ИИ, которые могут обрабатывать и понимать огромные объемы потокового видео или архивных данных.
Пользователи могут настраивать эти визуальные ИИ-агенты с помощью естественно-языковых подсказок вместо жесткого программного кода, снижая барьер для развертывания виртуальных помощников в различных отраслях и приложениях умных городов.
NVIDIA AI Blueprint использует модели визуального языка
Визуальные ИИ-агенты работают на основе моделей визуального языка (VLMs), класса генеративных ИИ-моделей, которые объединяют компьютерное зрение и понимание языка для интерпретации физического мира и выполнения задач по рассуждению.
NVIDIA AI Blueprint для поиска и обобщения видео можно настроить с помощью микросервисов NVIDIA NIM для VLMs, таких как NVIDIA VILA, LLMs, таких как Meta’s Llama 3.1 405B, и ИИ-моделей для ответов на вопросы с ускорением на GPU и контекстно-осознанного поиска с усилением генерации. Разработчики могут легко заменить другие VLMs, LLMs и графовые базы данных и настроить их с помощью платформы NVIDIA NeMo для своих уникальных сред и случаев использования.
Принятие NVIDIA AI Blueprint может сэкономить разработчикам месяцы усилий по исследованию и оптимизации генеративных ИИ-моделей для приложений умных городов. Развернутый на GPU NVIDIA на краю, на месте или в облаке, он может значительно ускорить процесс просмотра видеоархивов для выявления ключевых моментов.
В складской среде ИИ-агент, созданный с помощью этого рабочего процесса, может оповещать работников, если нарушены протоколы безопасности. На оживленных перекрестках ИИ-агент может идентифицировать дорожно-транспортные происшествия и генерировать отчеты для поддержки усилий по экстренному реагированию. А в области общественной инфраструктуры рабочие по обслуживанию могут попросить ИИ-агентов просмотреть аэрофотоснимки и выявить деградирующие дороги, железнодорожные пути или мосты для поддержки проактивного обслуживания.
За пределами умных пространств визуальные ИИ-агенты могут также использоваться для обобщения видео для людей с нарушениями зрения, автоматического создания обзоров спортивных мероприятий и помощи в маркировке огромных визуальных наборов данных для обучения других ИИ-моделей.
Рабочий процесс поиска и обобщения видео присоединяется к коллекции NVIDIA AI Blueprints, которые облегчают создание ИИ-аватаров, виртуальных помощников для персонализированного обслуживания клиентов и извлечение корпоративных инсайтов из данных PDF.
NVIDIA AI Blueprints доступны для разработчиков бесплатно и могут быть развернуты в производстве по всем ускоренным центрам обработки данных и облакам с помощью NVIDIA AI Enterprise, комплексной программной платформы, которая ускоряет конвейеры данных и упрощает разработку и развертывание генеративного ИИ.
ИИ-агенты для предоставления инсайтов от складов до мировых столиц
Корпоративные и государственные клиенты также могут использовать полную коллекцию NVIDIA AI Blueprints с помощью экосистемы партнеров NVIDIA.
Глобальная профессиональная сервисная компания Accenture интегрировала NVIDIA AI Blueprints в свою Accenture AI Refinery, построенную на NVIDIA AI Foundry, что позволяет клиентам разрабатывать специальные ИИ-модели, обученные на корпоративных данных.
Глобальные системные интеграторы в Юго-Восточной Азии, включая ITMAX в Малайзии и FPT во Вьетнаме, создают ИИ-агентов на основе NVIDIA AI Blueprint для поиска и обобщения видео для приложений умных городов и интеллектуального транспорта.
Разработчики также могут создавать и развертывать NVIDIA AI Blueprints на платформах NVIDIA AI с вычислениями, сетями и программным обеспечением, предоставляемыми глобальными производителями серверов.
Dell будет использовать подходы VLM и агентов с платформой Dell’s NativeEdge для улучшения существующих краевых ИИ-приложений и создания новых возможностей, поддерживаемых ИИ на краю. Dell Reference Designs для Dell AI Factory с NVIDIA и NVIDIA AI Blueprint для поиска и обобщения видео будут поддерживать возможности VLM в специальных ИИ-рабочих процессах для мультимодальных корпоративных случаев использования в центрах обработки данных, на краю и на месте.
NVIDIA AI Blueprints также интегрированы в гибридные ИИ-решения Lenovo, работающие на NVIDIA.
Компании, такие как K2K, поставщик приложений для умных городов в экосистеме NVIDIA Metropolis, будут использовать новый NVIDIA AI Blueprint для создания ИИ-агентов, которые анализируют дорожные камеры в реальном времени. Это позволит городским чиновникам задавать вопросы о дорожной активности и получать рекомендации по улучшению операций. Компания также работает с городскими менеджерами по дорожному движению в Палермо, Италия, для развертывания визуальных ИИ-агентов с использованием микросервисов NIM и NVIDIA AI Blueprints.
