Galileo

Galileo

Galileo é uma plataforma de observabilidade e engenharia de avaliação de IA para equipes que desenvolvem aplicações e agentes com LLM. Ela ajuda a avaliar modelos offline, monitorar o tráfego de produção e transformar avaliações passadas em diretrizes em tempo real, para que falhas sejam detectadas antes que os usuários percebam. A plataforma é direcionada a desenvolvedores e equipes empresariais de IA que precisam de medição ao longo de todo o ciclo de construção até a produção.

Galileo sintetiza avaliadores caros de LLM como juiz, em modelos Luna compactos que operam com baixa latência e menor custo, tornando prático avaliar 100% do tráfego de produção. O motor de insights analisa o comportamento do agente para identificar modos de falha e sugerir correções, enquanto mais de 20 avaliadores integrados cobrem RAG, agentes, segurança e proteção imediatamente. A Cisco anunciou sua intenção de adquirir a Galileo.

Fundada em 2021, a Galileo foi criada com base na ideia de que LLMs não-determinísticos precisam de fluxos de trabalho de confiabilidade que envolvam avaliação, monitoramento, observabilidade e proteção. Os fundadores trouxeram experiências do Google AI, Uber AI e Apple Siri. Os clientes podem implantar a plataforma via SaaS, nuvem privada virtual ou localmente, dependendo das necessidades de segurança.

Galileo é ideal para engenheiros de ML, equipes de plataforma e líderes de produtos de IA que precisam de datasets, métricas personalizadas, rastros e políticas de diretrizes em um único local, ao invés de juntar ferramentas de testes e monitoramento separadas.

Recursos Principais:
  1. Mais de 20 avaliadores integrados para RAG, agentes, segurança e proteção

  2. Destilar avaliadores LLM-como-juiz em modelos Luna com custo 96% menor

  3. Avaliadores Luna-2 têm média inferior a 200ms para guardrails de produção em tempo real

  4. Motor de insights identifica modos de falha do agente e sugere correções concretas

  5. Autoajuste métricas personalizadas com aprendizado contínuo a partir do feedback humano

  6. Implante em SaaS, VPC ou on-premises com integrações SDK e API

Pros:
  1. Abrange avaliações offline, observabilidade de produção e guardrails em tempo real em uma única plataforma.

  2. O plano gratuito inclui 5.000 rastreamentos mensais com usuários ilimitados e avaliações personalizadas.

  3. Os modelos Luna tornam a avaliação de produção com tráfego completo prática, com menor latência e custo.

  4. As opções de implantação empresarial incluem VPC, on-premises, SSO e servidores de inferência dedicados.

Cons:
  1. A precificação Pro escala conforme o volume de traces além da cota listada de 50.000 traces.

  2. Recursos empresariais como SSO, implantação on-premises e suporte por telefone exigem uma conversa com vendas.

  3. Diretrizes avançadas e traces ilimitados não estão disponíveis no plano Free.

Perguntas frequentes:

O Galileo possui um plano gratuito?

Sim. O Galileo oferece um plano gratuito por $0 por mês com 5.000 rastreamentos mensais, usuários ilimitados e avaliações personalizadas ilimitadas. Você pode se inscrever em app.galileo.ai sem precisar agendar uma chamada de vendas.

O que o Galileo Pro inclui?

O Galileo Pro custa $100 por mês quando faturado anualmente e inclui tudo do plano gratuito, além de 50.000 rastreamentos por mês, RBAC padrão, análises avançadas e insights, e suporte dedicado via Slack. Os preços variam conforme o volume de rastreamentos.

Quais opções de implantação o Galileo suporta?

O Galileo suporta implantação SaaS, virtual private cloud e on-premises. Planos Enterprise adicionam limites personalizados de taxa, RBAC de nível empresarial, SSO, guardrails em tempo real e servidores dedicados de inferência de baixa latência opcionais.

O que são os modelos Luna no Galileo?

Modelos Luna são os modelos compactos de avaliação do Galileo, destilados de avaliadores maiores de LLM-as-judge. As variantes Luna-2 operam com latência média abaixo de 200ms, permitindo que equipes monitorem o tráfego de IA em produção quase em tempo real a um custo menor do que os modelos completos de juiz.

Quais tipos de sistemas de IA o Galileo pode avaliar?

O Galileo suporta avaliação e observabilidade para pipelines RAG, agentes multi-etapas, chatbots e aplicações gerais de GenAI. A plataforma inclui métricas pré-construídas e ferramentas para criar avaliadores personalizados baseados em código ou LLM-as-judge.

Como entro em contato com o suporte do Galileo?

Você pode contatar o Galileo pelo e-mail [email protected] para questões gerais e de privacidade. Clientes Pro recebem suporte dedicado via Slack, e os planos Enterprise adicionam suporte 24/7 por Slack, e-mail ou telefone, além de um gerente dedicado de sucesso do cliente.

Categoria:

Preços:

Freemium

Tags:

LLM Evaluation
AI Observability
Agent Monitoring
RAG Testing

Tecnologia utilizada:

Ant Design
Framer Sites
Google Analytics
Google Tag Manager
Facebook Pixel
Google Fonts
Font Awesome
Ruby
GitHub

Avaliações:

Give your opinion on Galileo :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

Melhor Gratuito Galileo Alternativas (e Pagas)

By Rishit