SchemaFit - AI Radar

About SchemaFit

CI linter para esquemas de saída estruturada de LLM

AI Summary

SchemaFit é um linter de CI licenciado MIT para esquemas de saída estruturada de LLM. Ele verifica JSON Schema, definições de ferramentas e esquemas response_format contra restrições específicas do provedor antes da execução. Detecta palavras-chave não suportadas, problemas de aninhamento, incompatibilidades entre obrigatórios/optionais e problemas de portabilidade entre OpenAI, Anthropic, Gemini, Mistral e Cohere, permitindo que as equipes falhem PRs em vez de chamadas de produção.

Detailed Description

SchemaFit é uma ferramenta de CI linter para esquemas de saída estruturados de LLMs, garantindo compatibilidade e qualidade em definições de JSON Schema, ferramentas e formatos de resposta. Com suporte a OpenAI, Anthropic, Gemini, Mistral e Cohere, identifica problemas como chaves não suportadas, aninhamento incorreto, inconsistências em campos obrigatórios/opcionais e limitações específicas de cada provedor. Licenciada sob MIT, permite que equipes detectem erros antes da execução, evitando falhas em produção e facilitando a portabilidade entre modelos. Ideal para projetos que buscam padronização, manutenção e confiabilidade em interfaces com LLMs, integrando-se facilmente em pipelines de desenvolvimento. ⚙️🔍🚀

Key Features

Validação de esquemas JSON Schema, definições de ferramentas e response_format
Verificação de conformidade com restrições específicas de provedores (OpenAI, Anthropic, Gemini, Mistral, Cohere)
Detecção de palavras-chave não suportadas
Identificação de problemas de aninhamento
Detecção de inconsistências entre campos obrigatórios e opcionais
Análise de problemas de portabilidade entre diferentes provedores
Integração em pipelines de CI para falhar PRs antes de chamadas em produção
Comments 0

No comments yet

Be the first to share your thoughts and start the conversation!

Join the conversation

Sign in to leave a comment and share your thoughts.

0.0
0 reviews
Loading...
Loading rating distribution...
Loading...

Loading reviews...