geekbench

Serviço de mobilidade autônoma que permite operação sem motorista em vias urbanas

Plataforma de dados de IA para anotação de texto, áudio, imagens, vídeo e dados 3D, além de avaliação de modelos

Uma plataforma de hardware de código aberto que oferece sensores, módulos de comunicação e dispositivos de computação de borda para prototipagem.

Uma plataforma de desenvolvimento de visão computacional para gerenciamento de conjuntos de dados, treinamento de modelos e implantação de serviços de inferência.

Extensão de navegador que captura automaticamente a atividade da tela e registros para gerar relatórios de defeitos.

Uma plataforma de produtividade para desenvolvedores que suporta revisões de código estruturadas e gerenciamento incremental de alterações

O Responsible AI Institute (RAI Institute) é uma organização independente sem fins lucrativos dedicada a promover a adoção de IA confiável em todos os setores. Ele oferece ferramentas práticas de governança de IA, programas de validação e certificação, e serviços de monitoramento de riscos, projetados para viabilizar a implementação em larga escala de IA responsável. O Instituto colabora com laboratórios acadêmicos globais, formuladores de políticas e fornecedores de IA para garantir alinhamento com regulamentações em evolução e padrões do setor. Seus produtos incluem avaliação comparativa de IA, automação de conformidade e programas de capacitação da força de trabalho para apoiar a implantação ética, justa e transparente de IA.

A Transluce é uma organização de pesquisa sem fins lucrativos dedicada a avançar as tecnologias de IA desvendando os mecanismos internos de modelos de IA complexos. Ao gerar automaticamente descrições de alta qualidade e compreensíveis para humanos sobre componentes neuronais e ao fornecer uma interface interativa de observabilidade, a Transluce capacita pesquisadores e usuários a entender, consultar e orientar melhor o comportamento da IA. Todas as ferramentas são escaláveis e de código aberto, impulsionando os padrões do setor para segurança e transparência em IA. A abordagem da Transluce utiliza agentes de IA para analisar grandes modelos de linguagem, detectar comportamentos ocultos e apoiar a implantação responsável de IA por meio de métodos validados pela comunidade.

A Evidently AI é uma solução abrangente desenvolvida para ajudar equipes a criar, avaliar e manter produtos de IA altamente confiáveis, atendendo tanto a modelos tradicionais de machine learning quanto a aplicações de modelos de linguagem de grande escala (LLM). Ela inclui uma biblioteca Python de código aberto com mais de 100 métricas de avaliação integradas, bem como uma plataforma em nuvem que oferece suporte a testes de IA, monitoramento, geração de dados sintéticos e fluxos de trabalho colaborativos. A Evidently AI permite que os usuários detectem desvios de dados e previsões, realizem testes de regressão e adversários, e gerenciem conjuntos de dados e avaliações por meio de uma interface intuitiva, garantindo a qualidade da IA em todo o ciclo de vida do produto.

O Ballpark é uma plataforma rápida e intuitiva que ajuda equipes de produto a coletarem feedback acionável dos usuários durante todo o ciclo de desenvolvimento. Ele permite testar sites, protótipos do Figma, textos de marketing e ofertas da concorrência—sem necessidade de instalação. O Ballpark integra pesquisas, tarefas interativas e gravação de áudio e vídeo para capturar reações autênticas dos usuários e insights aprofundados. Com acesso a um grande painel global de respondentes e amplas opções de triagem, as equipes podem recrutar testadores relevantes rapidamente. Assentos ilimitados e recursos de colaboração democratizam a pesquisa nas organizações, permitindo decisões baseadas em dados, encurtando prazos de projeto e melhorando o fit produto-mercado.

Confident AI é uma poderosa plataforma de avaliação construída sobre o framework de código aberto DeepEval, projetada para ajudar equipes a testar e otimizar sistematicamente aplicações de modelos de linguagem de grande escala (LLM). A plataforma suporta um fluxo de trabalho completo de avaliação – desde a criação de conjuntos de dados e métricas personalizadas até o monitoramento contínuo em produção – permitindo que empresas comparem diferentes LLMs, detectem regressões e aprimorem o desempenho usando métricas e salvaguardas baseadas em cenários líderes do setor. O Confident AI promove a colaboração entre membros técnicos e não técnicos da equipe, integra-se perfeitamente a pipelines de CI/CD e oferece capacidades de nível empresarial, incluindo implantação local (on-premises), SSO e conformidade com HIPAA.

Ragas é uma biblioteca open-source poderosa e flexível, projetada para avaliar LLMs e pipelines RAG. Oferece um conjunto abrangente de métricas de avaliação automatizada que cobrem dimensões como precisão factual, coerência e relevância, além de suportar a geração de dados de teste sintético e o monitoramento online. Ragas permite realizar benchmarking alinhado com padrões do setor e possibilita fluxos de trabalho de avaliação personalizáveis para atender a diversas necessidades em ambientes de pesquisa e produção. Suas sólidas capacidades de integração ajudam desenvolvedores e pesquisadores a otimizar e garantir a confiabilidade de aplicações de IA.