geekbench

自動運転モビリティサービスにより、都市道路で無人運転を実現

AIデータプラットフォームで、テキスト、音声、画像、動画、3次元データをアノテーションし、モデルを評価します。

オープンソースハードウェアプラットフォームで、センサー、通信モジュール、エッジコンピューティングデバイスをプロトタイピングに提供します。

コンピュータービジョン開発プラットフォームで、データセットの管理、モデルの訓練、推論サービスのデプロイを実現します。

ブラウザ拡張機能で、画面アクティビティとログを自動記録し、不具合レポートを生成します。

開発者効率プラットフォームで、構造化されたコードレビューとインクリメンタル変更管理をサポートします。

Responsible AI Institute（RAI研究所）は、各業界における信頼できるAIの導入を推進することを目的とした独立した非営利組織です。同研究所は、実行可能なAIガバナンスツールや検証・認証プログラム、リスク監視サービスを提供し、大規模な責任あるAIの実施を支援しています。また、グローバルな学術研究機関、政策立案者、AIベンダーと連携しながら、変化し続ける規制や業界標準への適合性を維持しています。同研究所の製品には、AIベンチマーク評価、コンプライアンスの自動化、人材のスキルアッププログラムが含まれ、倫理的で、公平かつ透明性のあるAIの展開を確実にするための支援を行っています。

Transluceは、高度なAI技術の開発に特化した非営利の研究機関であり、複雑なAIモデルの内部メカニズムの解明に取り組んでいます。高品質で理解しやすい神経回路網の構成要素の説明をAIが自動生成し、インタラクティブな可観測性インターフェースを提供することで、研究者や利用者がAIの動作をより深く理解し、照会し、誘導することを可能にします。すべてのツールは拡張性とオープンソースを特徴としており、AIの安全性と透明性に関する業界標準の確立を推進します。Transluceのアプローチは、AIエージェントを活用して大規模言語モデルを分析し、潜在的な挙動を検出するとともに、コミュニティによる検証を経た手法を通じて責任あるAIの導入を支援するものです。

Evidently AIは、伝統的な機械学習モデルおよび大規模言語モデル（LLM）アプリケーションを含む、高信頼性のAI製品をチームが構築、評価、維持するための包括的なソリューションです。100以上の組み込み評価指標を備えたオープンソースのPythonライブラリに加え、AIテスト、モニタリング、合成データ生成、コラボレーションプロセスを支援するクラウドプラットフォームを提供しています。Evidently AIは、データおよび予測のドリフト検出、回帰テストおよび敵対的テストの実行、直感的なインターフェースによるデータセットと評価の管理を可能にし、製品のライフサイクル全体にわたりAIの品質を保証します。

Ballparkは、開発の各段階で実行可能なユーザーのフィードバックを迅速かつ直感的に収集できるプラットフォームです。ウェブサイトやFigmaのプロトタイプ、マーケティング文案、競合製品のテストをインストール不要で実施可能。アンケートやインタラクティブなタスク、音声・映像録画機能を統合しており、リアルなユーザーの反応と詳細なインサイトを捉えられます。豊富な絞り込み条件と大規模なグローバルパネルを活用することで、関連性の高いテスト参加者を迅速にリクルートできます。無制限のチームメンバー参加とコラボレーション機能により、調査を組織全体に普及させ、データ主導の意思決定を支援。これによりプロジェクト期間の短縮と製品の市場適合性の向上を実現します。

Confident AIは、オープンソースのDeepEvalフレームワークに基づいて構築された強力な評価プラットフォームであり、チームが大規模言語モデル（LLM）アプリケーションを体系的にテストおよび最適化するのを支援します。このプラットフォームは、データセットの構築や指標のカスタマイズから、本番環境での継続的監視まで、評価プロセスの全工程をサポートし、企業が異なるLLMモデルを比較したり、リグレッションを検出したり、業界をリードするシナリオベースの指標と保護措置によりパフォーマンスを向上させるのを実現します。Confident AIは技術者と非技術者のメンバー間の協働を促進し、CI/CDプロセスに完全に統合可能で、セルフホスティング、SSO、HIPAAコンプライアンスなどのエンタープライズ機能も提供します。

Ragasは、LLMおよびRAGプロセスの評価に特化して設計された、強力で柔軟性の高いオープンソースライブラリです。事実の正確性、一貫性、関連性といったさまざまな評価次元にわたる豊富な自動評価指標を提供し、合成テストデータの生成やオンライン監視にも対応しています。Ragasは業界標準に準拠したベンチマークテストをサポートするとともに、評価プロセスのカスタマイズを可能にし、研究および実運用における多様なニーズに対応します。優れた統合性により、開発者や研究者がAIアプリケーションの信頼性を最適化し、確実に運用できるよう支援します。