geekbench

Автономный сервис мобильности, обеспечивающий работу без водителя на городских дорогах.

Платформа данных ИИ для аннотирования текста, аудио, изображений, видео и 3D-данных, а также для оценки моделей

Открытая аппаратная платформа, предлагающая датчики, модули связи и устройства для периферийных вычислений для прототипирования.

Платформа разработки компьютерного зрения для управления наборами данных, обучения моделей и развертывания сервисов вывода.

Браузерное расширение, которое автоматически фиксирует активность на экране и логи для создания отчетов об ошибках

Платформа для повышения продуктивности разработчиков с поддержкой структурированных код-ревью и инкрементального управления изменениями

Responsible AI Institute (RAI Institute) — это независимая некоммерческая организация, деятельность которой направлена на внедрение надежного искусственного интеллекта в различных отраслях. Институт предлагает практические инструменты управления ИИ, программы валидации и сертификации, а также услуги по мониторингу рисков, призванные обеспечить масштабируемое внедрение ответственного ИИ. Институт сотрудничает с международными научными лабораториями, законодателями и поставщиками решений на базе ИИ для обеспечения соответствия развивающимся нормативным требованиям и отраслевым стандартам. В портфеле его продуктов представлены инструменты для сравнительного анализа ИИ, автоматизации соответствия и программы повышения квалификации персонала, которые способствуют этичному, справедливому и прозрачному развертыванию ИИ.

Transluce — это некоммерческая исследовательская организация, стремящаяся к развитию технологий искусственного интеллекта путём раскрытия внутренних механизмов сложных ИИ-моделей. Автоматически генерируя качественные, понятные человеку описания нейронных компонентов и предоставляя интерактивный интерфейс наблюдаемости, Transluce позволяет исследователям и пользователям лучше понимать, анализировать и направлять поведение ИИ. Все инструменты масштабируемы и имеют открытый исходный код, что способствует формированию отраслевых стандартов безопасности и прозрачности ИИ. Подход Transluce использует ИИ-агентов для анализа больших языковых моделей, обнаружения скрытых поведенческих паттернов и поддержки ответственного внедрения ИИ посредством методов, верифицированных сообществом.

Evidently AI — это комплексное решение, предназначенное для помощи командам в создании, оценке и поддержке высоконадежных продуктов на основе ИИ, охватывающее как традиционные модели машинного обучения, так и приложения с большими языковыми моделями (LLM). Оно включает в себя библиотеку с открытым исходным кодом для Python со 100+ встроенными метриками оценки, а также облачную платформу, поддерживающую тестирование ИИ, мониторинг, генерацию синтетических данных и рабочие процессы для совместной работы. Evidently AI позволяет пользователям обнаруживать дрейф данных и предсказаний, выполнять регрессионное и состязательное тестирование, а также управлять наборами данных и оценками через интуитивно понятный интерфейс, обеспечивая качество ИИ на протяжении всего жизненного цикла продукта.

Ballpark — это быстрая и интуитивно понятная платформа, которая помогает продуктовым командам собирать практичный пользовательский фидбэк на протяжении всего жизненного цикла разработки. Она позволяет тестировать веб-сайты, прототипы Figma, маркетинговые тексты и предложения конкурентов — без необходимости установки. Ballpark объединяет опросы, интерактивные задания и аудио-видеозапись для фиксации искренних реакций пользователей и получения глубоких инсайтов. Благодаря доступу к большой глобальной панели респондентов и широким возможностям скрининга, команды могут быстро находить подходящих тестировщиков. Неограниченное число командных мест и функции совместной работы делают исследования доступными во всей организации, что позволяет принимать решения на основе данных, сокращать сроки проектов и улучшать соответствие продукта рынку.

Confident AI — это мощная платформа для оценки, построенная на базе открытого фреймворка DeepEval, предназначенная для помощи командам в систематическом тестировании и оптимизации приложений на основе больших языковых моделей (LLM). Платформа поддерживает полный рабочий процесс оценки — от создания наборов данных и настройки метрик до непрерывного мониторинга в рабочей среде — что позволяет предприятиям сравнивать различные LLM, выявлять регрессии и повышать производительность с помощью передовых отраслевых метрик и средств защиты, основанных на сценариях. Confident AI способствует сотрудничеству между техническими и нетехническими членами команды, легко интегрируется в CI/CD-процессы и предлагает возможности корпоративного уровня, включая локальное развертывание, единый вход (SSO) и соответствие требованиям HIPAA.

Ragas — это мощная и гибкая библиотека с открытым исходным кодом, предназначенная для оценки крупных языковых моделей (LLM) и RAG-конвейеров. Она предлагает комплексный набор автоматизированных метрик оценки, охватывающих такие аспекты, как фактологическая точность, связность и релевантность, а также поддерживает генерацию синтетических тестовых данных и онлайн-мониторинг. Ragas позволяет проводить сравнительный анализ в соответствии с отраслевыми стандартами и настраивать рабочие процессы оценки для удовлетворения различных потребностей в исследовательской и производственной средах. Её широкие возможности интеграции помогают разработчикам и исследователям оптимизировать и обеспечивать надёжность приложений искусственного интеллекта.