geekbench

도시 도로에서 무인 주행을 구현하는 자율주행 이동 서비스

AI 데이터 플랫폼으로 텍스트, 오디오, 이미지, 비디오 및 3D 데이터를 라벨링하고 모델을 평가합니다.

오픈 소스 하드웨어 플랫폼으로, 프로토타입 개발을 위한 센서, 통신 모듈 및 에지 컴퓨팅 장치를 제공합니다.

컴퓨터 비전 개발 플랫폼으로, 데이터 세트 관리, 모델 학습 및 추론 서비스 배포를 지원합니다.

브라우저 확장 프로그램으로, 화면 활동과 로그를 자동으로 기록하여 결함 보고서를 생성합니다.

개발자 효율 플랫폼으로, 구조화된 코드 리뷰와 증분 변경 관리를 지원합니다.

Responsible AI Institute(RAI 연구소)는 각 산업 분야에서 신뢰할 수 있는 AI의 도입을 촉진하기 위해 설립된 독립적인 비영리 기관입니다. 연구소는 책임 있는 AI를 대규모로 구현할 수 있도록 실행 가능한 AI 거버넌스 도구, 검증 및 인증 프로그램, 리스크 모니터링 서비스를 제공합니다. 전 세계의 학계 연구소, 정책 입안자 및 AI 공급업체와 협력하여 지속적으로 변화하는 규제 및 산업 표준에 부합하도록 노력하고 있습니다. 주요 제품으로는 AI 벤치마킹, 규제 준수 자동화, 인력 역량 강화 프로그램을 운영하며, 윤리적이고 공정하며 투명한 AI의 도입을 보장합니다.

Transluce는 첨단 AI 기술 개발에 집중하는 비영리 연구 기관으로, 복잡한 AI 모델의 내부 작동 원리를 밝히는 데 목적을 두고 있습니다. 고급 AI 모델의 신경망 구성 요소에 대해 자동으로 고품질이며 이해하기 쉬운 설명을 생성하고, 상호작용이 가능한 관측 도구를 제공함으로써, Transluce는 연구자와 사용자가 AI의 동작을 더 잘 이해하고, 질의하며, 유도할 수 있도록 지원합니다. 모든 도구는 확장 가능하고 오픈소스로 제공되어 AI의 안전성과 투명성을 위한 산업 표준 마련을 촉진합니다. Transluce의 접근법은 AI 에이전트를 활용해 대규모 언어 모델을 분석하고 숨겨진 동작을 탐지하며, 커뮤니티 검증을 거친 방법론을 통해 책임감 있는 AI 적용을 뒷받침합니다.

Evidently AI는 전통적인 머신러닝 모델과 대규모 언어 모델(LLM) 애플리케이션에 이르기까지 팀이 높은 신뢰성을 갖춘 AI 제품을 구축하고, 평가하며, 유지 관리할 수 있도록 지원하는 종합 솔루션입니다. Evidently AI는 100개 이상의 내장 평가 지표를 제공하는 오픈소스 Python 라이브러리와 함께 AI 테스트, 모니터링, 합성 데이터 생성 및 협업 프로세스를 지원하는 클라우드 플랫폼을 제공합니다. 이를 통해 사용자는 데이터 및 예측 드리프트를 탐지하고 회귀 테스트와 적대적 테스트를 수행하며 직관적인 인터페이스를 통해 데이터셋과 평가를 관리함으로써 제품의 전체 수명 주기에 걸쳐 AI 품질을 보장할 수 있습니다.

Ballpark은 제품 팀이 개발의 각 단계에서 실행 가능한 사용자 피드백을 신속하고 직관적으로 수집할 수 있도록 도와주는 플랫폼입니다. 웹사이트, Figma 프로토타입, 마케팅 문구 및 경쟁 제품 테스트를 설치 없이 지원하며, 설문조사, 상호작용 과제, 음성 및 화면 녹화 기능을 통합해 실제 사용자의 반응과 상세한 인사이트를 포착합니다. 방대한 글로벌 응답자 패널과 다양한 필터링 옵션을 기반으로 팀은 관련성 높은 테스터를 신속하게 모집할 수 있습니다. 무제한 팀 멤버 참여와 협업 기능을 통해 조직 내 전반에 리서치가 확산되며, 데이터 기반 의사결정을 촉진하고 프로젝트 기간을 단축하며 제품의 시장 적합성을 높이는 데 기여합니다.

Confident AI는 오픈소스 DeepEval 프레임워크 기반으로 구축된 강력한 평가 플랫폼으로, 팀이 대규모 언어 모델(LLM) 애플리케이션을 체계적으로 테스트하고 최적화할 수 있도록 지원합니다. 이 플랫폼은 데이터셋 구축, 지표 사용자 정의부터 프로덕션 환경에서의 지속적인 모니터링에 이르기까지 완전한 평가 프로세스를 제공하며, 기업이 다양한 LLM 모델을 비교하고 리그레션을 탐지하며 업계를 선도하는 시나리오 기반 평가 지표와 보호 장치를 통해 성능을 향상시키는 데 도움을 줍니다. Confident AI는 기술 및 비기술 팀원 간의 협업을 촉진하고 CI/CD 프로세스와 완벽하게 통합되며, 자체 호스팅, SSO, HIPAA 규정 준수 등의 엔터프라이즈급 기능을 제공합니다.

Ragas는 LLM 및 RAG 프로세스 평가를 위해 설계된 강력하고 유연한 오픈소스 라이브러리입니다. 사실 정확성, 일관성, 관련성 등 다양한 차원에서 풍부한 자동 평가 지표를 제공하며, 합성 테스트 데이터 생성 및 온라인 모니터링을 지원합니다. Ragas는 업계 표준에 부합하는 벤치마크를 지원하고 평가 프로세스의 맞춤형 구성이 가능하여 연구 및 실무의 다양한 요구를 충족시킵니다. 우수한 통합성을 통해 개발자와 연구자들이 AI 애플리케이션의 신뢰성을 최적화하고 보장할 수 있도록 도와줍니다.