evidently-ai

自动驾驶出行服务,在城市道路中实现无人执驾驶行

AI数据服务平台,标注文本、音频、图像、视频和三维数据并进行模型评测

开源硬件平台,提供传感器、通信模块与边缘计算设备用于原型开发

计算机视觉开发平台,管理数据集、训练模型并部署推理服务

浏览器扩展,自动记录屏幕活动与日志并生成缺陷报告

开发者效率平台,支持结构化代码评审与增量变更管理

Confident AI 是基于开源 DeepEval 框架打造的强大评测平台，帮助团队系统性测试与优化大语言模型（LLM）应用。平台支持从数据集构建、指标定制到生产环境持续监控的完整评测流程，助力企业对比不同LLM模型、检测回归并以行业领先的场景化指标与防护措施提升性能。Confident AI 促进技术与非技术成员协作，完美集成CI/CD流程，并提供自托管、SSO和HIPAA合规等企业级功能。

Ragas是一款强大且灵活的开源库，专为LLM和RAG流程评估而设计。它提供丰富的自动化评测指标，涵盖事实准确性、连贯性、相关性等维度，并支持合成测试数据生成及在线监控。Ragas支持与行业标准对齐的基准测试，并允许评估流程的个性化定制，满足科研与生产多样化需求。其良好的集成性帮助开发者和研究者优化并保障AI应用的可靠性。

Datafold通过自动化数据迁移、代码测试和监控来简化关键数据工程工作流，确保高数据质量和可靠性。它使团队能够通过自动化SQL转换和数据比对加速数据库迁移，将全面测试集成到CI/CD管道中以防止回归，并通过实时异常检测和警报保持主动可观察性。通过提供详细的数据血缘、元数据管理和协作工具，Datafold使数据团队能够更快、更自信地交付可信赖的数据产品。

Cyara是一个领先的客户体验(CX)保障平台，旨在通过自动化联络中心系统的测试、监控和优化，帮助组织提供完美的互动体验。它支持整个CX开发生命周期，从设计和发现到功能和回归测试、负载测试和实时生产监控。Cyara使团队能够在包括IVR、语音、聊天机器人、短信、电子邮件和网络聊天在内的多个渠道上可视化、测试和验证客户旅程，确保大规模提供一致、高质量的客户体验。

Ethiack通过将自动化渗透测试与精英人工道德黑客相结合，提供持续、精准的网络安全测试。它为组织提供外部和内部攻击面的完整视图，以高精度和最小的误报识别关键漏洞。该平台支持合规报告并与开发流程集成，使团队能够主动保护其数字基础设施，同时从详细的漏洞洞察中学习。

LangWatch是一款全面的LLM运维平台，帮助AI团队管理大语言模型（LLM）应用的全生命周期。平台可无缝集成任意技术栈，提供监控、评估与优化工具，确保AI质量、安全与性能。通过自动化质量检查、引入人工闭环评估和详尽分析，LangWatch帮助企业降低幻觉、数据泄露等AI风险，加速从概念验证到生产部署。平台支持可视化实验追踪、定制化评估和告警系统，助力团队打造可靠合规的AI产品，实现持续优化。