Opik – quan sát và đánh giá hệ thống AI

Comet ML, Inc. phát hành Opik, nền tảng quan sát và đánh giá mã nguồn mở cho các hệ thống AI dạng tác tử, địa chỉ tại New York theo chính sách quyền riêng tư. Sản phẩm giải quyết lỗi âm thầm và chi phí không được theo dõi trong ứng dụng LLM. Comet công bố ra mắt Opik vào tháng 12/2024 và tham gia Amazon SageMaker Partner AI Apps cùng tháng.

Opik ghi mỗi bước của tác tử thành một trace, chấm điểm đầu ra bằng hơn 30 chỉ số LLM-as-a-judge, giám sát sản xuất với guardrail PII và chính sách, và theo dõi chi phí token. Bản tháng 6/2026 bổ sung Cost Intelligence cho các đội dùng Claude Code và Codex. Trang nêu AssemblyAI, NatWest, Stellantis, Uber, Netflix và Etsy.

• Truy vết và gỡ lỗi: hiển thị các bước của tác tử, ghi chú và nhật ký kiểm toán.
• Đánh giá: hơn 30 chỉ số LLM-as-a-judge và khẳng định văn bản thường qua Test Suites.
• Giám sát sản xuất: đánh giá thời gian thực, cảnh báo và guardrail PII hoặc chính sách.
• Cost Intelligence: theo dõi mức dùng và chi phí Claude Code, Codex theo đội.
• Agent Playground: chạy kiểm thử tác tử đầu cuối với prompt có phiên bản.
• Prompt Optimizer: sáu thuật toán tối ưu cùng trợ lý gỡ lỗi AI Ollie.

Công ty gia công phần mềm Việt Nam có thể theo dõi chi phí Claude Code giữa các đội. Ngân hàng có thể chạy chỉ số ảo giác và độ liên quan trên trợ lý RAG trước khi ra mắt. Startup có thể tự vận hành Opik để giám sát chatbot AI miễn phí.

Phần lõi mã nguồn mở và miễn phí, có tài khoản miễn phí trên nền tảng lưu trữ sẵn và gói doanh nghiệp theo yêu cầu. Mọi bước của tác tử đều truy vết được để gỡ lỗi. Guardrail có thể gắn cờ PII và vi phạm chính sách trong môi trường thực. Cost Intelligence cho thấy chi phí dùng tác tử lập trình trên toàn đội kỹ thuật.

Observability LLM mã nguồn mở là lĩnh vực đông đúc, và người mua ngày càng cần truy vết cấp tác tử, đánh giá tự động và kiểm soát chi phí trợ lý lập trình. Doanh nghiệp Việt Nam áp dụng AI tạo sinh thường ưu tiên công cụ mã nguồn mở có thể tự vận hành.

Pháp nhân Comet ML, Inc. (địa chỉ New York trong chính sách quyền riêng tư). Opik ra mắt tháng 12/2024; Comet tham gia Amazon SageMaker Partner AI Apps tháng 12/2024; thông cáo Cost Intelligence tháng 6/2026. Chân trang hiển thị huy hiệu HIPAA, AICPA và ISO.