Introdução
Arize é uma plataforma de engenharia de IA construída para equipes que precisam entender, medir e melhorar agentes de IA e aplicações LLM quando esses sistemas chegam à produção. Depurar um agente é difícil porque as falhas abrangem muitas etapas — chamadas de ferramentas, prompts, retrievers e respostas do modelo — e a Arize resolve isso coletando traces, executando avaliações e transformando sinais de produção em feedback acionável para as equipes.
A plataforma é organizada em torno de três fluxos de trabalho: observar o que um agente realmente fez durante uma requisição, avaliar se a qualidade do agente está melhorando ou regredindo e testar correções propostas antes do deploy. A Arize oferece o Arize AX, uma plataforma SaaS gerenciada, junto com o Phoenix, uma ferramenta open-source de observabilidade e avaliação que os desenvolvedores podem executar localmente ou self-hosted. Ambas são construídas sobre o padrão de instrumentação OpenInference, que é baseado em OpenTelemetry. A empresa, Arize AI, também mantém documentação, guias e um newsletter chamado The Evaluator para praticantes de engenharia de IA.
Principais Recursos
- Rastreamento de agentes: a Arize registra traces de ponta a ponta das execuções dos agentes, incluindo spans, chamadas de ferramentas, sessões e conteúdo multimodal como imagens, voz e PDFs, permitindo que os engenheiros vejam exatamente o que um agente fez.
- Framework de avaliação: a plataforma suporta evals online em traces, evals offline em datasets e experimentos, avaliadores LLM-as-a-judge, avaliadores de código customizados e anotação humana com filas de labeling.
- Signal: um recurso que destaca os problemas de produção mais importantes, ajuda a identificar as causas raiz e propõe correções prontas para revisão.
- Alyx: um agente de engenharia de IA dentro da Arize que executa avaliações, depura problemas e melhora agentes em resposta a problemas declarados, com conceito semelhante ao de assistentes de código, mas voltado para tarefas de engenharia de IA.
- Ferramentas de experimentação: playgrounds, datasets e experimentos permitem que as equipes testem prompts e harnesses antes de implantar mudanças em produção.
- Datastore ADB: um datastore desenvolvido para traces de GenAI que armazena dados em formatos abertos e se conecta ao BigQuery, Databricks e Snowflake por meio do DataFabric.
- Fundamentos open-source: o OpenInference fornece convenções semânticas vendor-neutral sobre o OpenTelemetry, e o Phoenix pode ser executado localmente ou self-hosted com controle total dos dados.
Destaques
- Preços: o Arize AX tem três planos — AX Free por $0 (25k spans/mês, 1 GB de ingestão, retenção de 15 dias, 10 problemas do Signal/mês), AX Pro por $50 por mês (50k spans/mês, 10 GB de ingestão, retenção de 30 dias, 25 problemas do Signal/mês) e AX Enterprise com limites customizados e deploy SaaS ou self-hosted. Há preços especiais para startups.
- Plano gratuito: o AX Free não exige cartão de crédito e inclui usuários ilimitados, evals ilimitados e experimentos ilimitados.
- Integrações: a Arize funciona com mais de 40 modelos, frameworks e ferramentas, incluindo OpenAI, Anthropic, Google, Amazon Bedrock, LangGraph, LangChain, LlamaIndex, CrewAI, OpenAI Agents SDK e DSPy, no Google Cloud, AWS, Azure e ambientes self-hosted.
- Segurança e conformidade: a Arize possui certificações SOC 2 Type II, ISO 27001, PCI DSS, HIPAA e GDPR, com opções flexíveis de deploy.
- Open source: o Phoenix está disponível como alternativa open-source para equipes que precisam de rastreamento e avaliação locais ou self-hosted.
Para Quem É
A Arize foi projetada para engenheiros de IA e ML, equipes de plataforma e líderes de engenharia que constroem e operam sistemas de IA em produção, como chatbots, pipelines RAG, copilots e agentes autônomos. É adequada para organizações que precisam depurar falhas de agentes, medir qualidade com avaliações, monitorar o desempenho em produção e iterar em prompts e fluxos de trabalho. Equipes com requisitos rigorosos de conformidade podem usar o Arize AX Enterprise com self-hosting, enquanto construtores individuais e equipes menores podem começar com o plano gratuito ou com o Phoenix open-source.
