Pular para o conteúdo

Selecionar língua

Idioma atual: Português (Brasil)

Prompt Engineering

Source: https://github.com/promptslab/Awesome-Prompt-Engineering at 23542555e534
License: Apache-2.0
Read the English original

This edition is an AI-assisted translation.

Uma coleção manual de recursos para Engenharia de Prompt e Engenharia de Contexto — cobrindo artigos, ferramentas, modelos, APIs, benchmarks, cursos e comunidades para trabalhar com Modelos de Língua Grande.

https://promptslab.github.io

Master Prompt Engineering. Join the Course at https://promptslab.github.io

Awesome License PRs Welcome Community Last Updated


Seção intitulada “ Master Prompt Engineering. Join the Course at https://promptslab.github.io ”

Novo para a engenharia? Siga este caminho:

  1. Aprenda o básico → Engenharia de Prompt ChatGPT para Desenvolvedores (gratuito, ~90 min)
  2. Leia o guia → Guia de Engenharia Prompt da DAIR. IA (open-source, abrangente)
  3. Documentos do fornecedor do estudo → Guia de Engenharia de Prompt da OpenAI · Guia Antrópico de Engenharia Prompt
  4. Entenda para onde o campo está indo → Antrópico: Engenharia de Contexto Eficaz para Agentes de IA
  5. Leia a pesquisa → O Relatório Prompt — taxonomia de 58+ técnicas de incentivo de 1500+ artigos


📄

Estes trabalhos estabeleceram os conceitos centrais que a engenharia rápida moderna baseia-se em:


🔧

NomeDesignação das mercadoriasLigação
PromptfooCLI de código aberto para testar, avaliar e equipar LLM prompts. Configuração do YAML, integração CI/CD, testes contraditórios. ~9K+GitHub
PromptifyResolver NLP Problemas com LLM & facilmente gerar diferentes pedidos de tarefas NLP para modelos generativos populares como GPT, PaLM, e muito mais com Promptify[Github]
AgentaPlataforma de desenvolvimento LLM de código aberto para gerenciamento, avaliação, feedback humano e implantação.GitHub
PromptLayerVersão, teste e monitore cada prompt e agente com avaliações robustas, rastreamento e conjuntos de regressão.Website
HeliconePlataforma de monitoramento e otimização rápidas de produção.Website
LangGPTFramework para projeto estruturado e meta-prompt. 10K+GitHub
ChainForgeKit de ferramentas visual para construir, testar e comparar respostas de prompt LLM sem código.GitHub
LMQLUma linguagem de consulta para LLMs tornando programável a lógica prompt complexa.GitHub
PromptotypePlataforma para desenvolver, testar e gerenciar prompts LLM estruturados.Website
PromptPandaSistema de gerenciamento rápido alimentado por IA para agilizar fluxos de trabalho rápidos.Website
Promptimize AIExtensão do navegador para melhorar automaticamente as solicitações do usuário para qualquer modelo de IA.Website
PROMPTMETHEUS“Prompt Engineering IDE” baseado na Web para criar e executar prompts de forma iterativa.Website
Better PromptSuporte de teste para prompts LLM antes de empurrar para a produção.GitHub
OpenPromptFramework de código aberto para pesquisa de aprendizagem rápida.GitHub
Prompt SourceToolkit para criar, compartilhar e usar prompts de linguagem natural.GitHub
Prompt EngineBiblioteca de utilitários NPM para criar e manter prompts para LLMs (Microsoft).GitHub
PromptInjectFramework para análise quantitativa da robustez LLM para ataques de alertas adversários.GitHub
LynxPromptPlataforma auto-hostável para gerenciar arquivos de configuração do IDE de IA (.cursorrules, CLAUDE.md, copilot-instrutions.md). Web UI, API REST, CLI e mercado de projetos federados para assistentes de codificação de IA 30+.GitHub
flomptVisual AI prompt builder que se decompõe em 12 blocos semânticos (papel, contexto, restrições, exemplos, etc.) e os compila em XML otimizado. Extensão de navegador para ChatGPT/Claude/Gemini e servidor MCP para agentes Claude Code. Livre, código aberto.Website
NomeDesignação das mercadoriasLigação
DeepEvalFramework de avaliação de código aberto cobrindo RAG, agentes e conversas com integração CI/CD. ~7K+GitHub
RagasAvaliação de RAG com geração de conjuntos de testes baseados em gráficos de conhecimento e métricas de 30+. ~8K+GitHub
LangSmithPlataforma LangChain para depuração, teste, avaliação e monitoramento de aplicativos LLM.Website
LangfuseObservabilidade LLM de código aberto com rastreamento, gerenciamento rápido e anotação humana. ~7K+GitHub
BraintrustPlataforma de avaliação de IA de ponta a ponta, certificado SOC2 Tipo II.Website
Arize AI / PhoenixMonitoramento LLM em tempo real com detecção e rastreamento de deriva.GitHub
TruLensAvaliando e explicando aplicativos LLM; rastreia alucinações, relevância, fundamento.GitHub
InspectAIDestinado a avaliar os agentes em função dos parâmetros de referência (AISI do Reino Unido).GitHub
OpikAvaliar, testar e enviar aplicações LLM através dev e ciclos de vida de produção.GitHub
EvalViewFerramenta CLI para testar agentes de IA multi-passo com casos de teste YAML, detecção de regressão e monitoramento da produção.GitHub
NomeDesignação das mercadoriasLigação
LangChain / LangGraphFramework de aplicativos LLM mais amplamente adotado; LangGraph adiciona fluxos de trabalho de agentes multi-step baseados em gráficos. ~100K+ / ~10K+GitHub · LangGraph
CrewAIA orquestração de agentes de IA com mais de 700 integrações. ~44K+GitHub
AutoGen (AG2)O framework de conversação multi-agente da Microsoft. ~40K+GitHub
DSPyFramework de Stanford para programação de LLMs com otimização automática prompt/peso. ~22K+GitHub
OpenAI Agents SDKFramework de agente oficial com funções de chamada, guardiões e transferências. ~10K+GitHub
Semantic KernelFramework de IA da Microsoft que alimenta o M365 Copilot; C#, Python, Java. ~24K+GitHub
LlamaIndexFramework de dados para capacidades de RAG e agente. ~40K+GitHub
HaystackFramework NLP de código aberto com arquitetura de pipeline para RAG e agentes. ~20K+GitHub
Agno (formerly Phidata)Framework de agente Python com instanciação de microsegundo. ~20K+GitHub
SmolagentsA estrutura minimalista do agente centrado em código (~1000 LOC). ~15K+GitHub
Pydantic AIFramework de agente seguro de tipo usando o Pydantic para validação estruturada. ~8K+ □GitHub
MastraFramework do agente AI do TypeScript com assistentes, RAG e observação. ~20K+GitHub
Google ADKKit de Desenvolvimento de Agentes profundamente integrado com Gemini e Google Cloud.GitHub
Strands Agents (AWS)Framework diagnóstico-modelo com integrações AWS profundas.GitHub
LangflowConstrutor de agentes visuais baseados em nós com arrastar- e- soltar. ~ 50K+GitHub
n8nAutomação de fluxo de trabalho com capacidades de agente de IA e integrações 400+. ~60K+GitHub
DifyInfraestrutura tudo-em-um para fluxos de trabalho agentic com agentes de uso de ferramentas e RAG.GitHub
PraisonAIMulti- IA Framework de agentes com suporte LLM 100+, integração MCP e memória incorporada.GitHub
NeurolinkFramework de agente de IA multifornecedor unificando mais de 12 provedores com orquestração de fluxo de trabalho.GitHub
ComposioConecte mais de 100 ferramentas aos agentes de IA com configuração zero.GitHub
NomeDesignação das mercadoriasLigação
DSPyVários otimizadores (MIPROv2, BootstrapFewShot, COPRO) para ajuste automático de prompt. ~22K+GitHub
TextGradDiferenciação automática através do texto (Stanford). ~2K+GitHub
OPROOtimização do Google DeepMind por solicitação.GitHub
NomeDesignação das mercadoriasLigação
Garak (NVIDIA)Scanner de vulnerabilidade de LLM para alucinações, injeções e fugas de cadeia — o “nmap para LLMs.” ~3K+GitHub
PyRIT (Microsoft)Ferramenta de Identificação de Risco Python para equipagem automática a vermelho. ~ 3K+GitHub
DeepTeam40+ vulnerabilidades, 10+ métodos de ataque, suporte OWASP Top 10.GitHub
LLM GuardKit de ferramentas de segurança para validação de I/O do LLM. ~2K+GitHub
NeMo Guardrails (NVIDIA)Guardas programáveis para sistemas de conversação. ~5K+GitHub
Guardrails AIDefina formatos de saída rigorosos (esquemas JSON) para garantir a confiabilidade do sistema.Website
LakeraPlataforma de segurança de IA para detecção de injeção rápida em tempo real.Website
Purple Llama (Meta)Avaliação de segurança LLM de código aberto, incluindo CyberSecEval.GitHub
GPTFuzzGeração automática do modelo jailbreak atingindo > 90% de taxas de sucesso.GitHub
RebuffFerramenta de código aberto para detecção e prevenção de injeção rápida.GitHub
AgentSeal“Escâner de código aberto que executa 150 sondas de ataque para testar agentes de IA para rápida injeção e vulnerabilidades de extração.”GitHub

MCP é um padrão aberto desenvolvido pela Anthropic (nov 2024, doado para Linux Foundation Dez 2025) para conectar assistentes de IA a fontes de dados externas e ferramentas através de uma interface padronizada. Tem. 97M+ downloads mensais SDK e foi adotado pelo GitHub, Google, e a maioria dos principais fornecedores de IA.

NomeDesignação das mercadoriasLigação
MCP SpecificationA especificação do protocolo principal e SDKs. ~15K+GitHub
MCP Reference ServersImplementações oficiais: fetch, filesystem, GitHub, Slack, Postgres.GitHub
FastMCP (Python)Framework Pythonic de alto nível para a construção de servidores MCP. ~5K+GitHub
GitHub MCP ServerO servidor MCP oficial do GitHub para a interação repo, issue, PR e Actions. ~15K+GitHub
Awesome MCP ServersLista com curadoria de mais de 10.000 servidores MCP comunitários. ~30K+GitHub
Context7Servidor MCP fornecendo documentação específica para reduzir a alucinação de código.GitHub
GitMCPCria servidores MCP remotos para qualquer repo do GitHub alterando o domínio.Website
MCP InspectorFerramenta de teste visual para o desenvolvimento de servidores MCP.GitHub

🟢 = Código aberto · 🔵 = Comercial · 🟣 = Código aberto + comercial (núcleo aberto com nuvem/API pagos)

Ferramentas nativas de terminal que entendem seu codebase e executam tarefas multi-step.

NomeDesignação das mercadoriasTipoLigação
Claude CodeA codificação agente do Anthropic CLI; compreende bases de código completas e executa tarefas complexas multi-passos via linguagem natural.🔵Docs
OpenAI Codex CLIAgente de codificação de terminal de código aberto do OpenAI; leve, local-primeiro, com execução de código sandboxed. ~68K+🟣GitHub
Gemini CLIAgente de IA terminal de código aberto do Google com janela de contexto de 1M-token e Google Search grounding. ~96K+🟣GitHub
Qwen CodeAgente de IA de terminal de código aberto otimizado para Qwen3-Coder; suporte multiprotocolo (A API OpenAI/Anthropic/Gemini), 1.000 solicitações grátis/dia. ~21K+🟢GitHub
AiderProgramação de pares de IA em terminal com integração Git profunda; mapeia bases de código inteiras e compromete alterações automáticas. ~42K+🟢GitHub
OpenCodePoderoso agente de codificação de IA de código aberto com bela TUI; suporta quase todos os fornecedores de modelos de IA. ~120K+🟢GitHub
GooseExtensível agente de IA de código aberto do Bloco (Square/Cash App); instala, executa, edita e testa com qualquer LLM. ~29K+ .🟢GitHub
CrushGlamorous agente de codificação agente de Charmbracelet com suporte multi-modelo, integração LSP, e bela UI terminal. ~9K+🟢GitHub
Amazon Q Developer CLIExperiência de chat agente em terminal da AWS; transição para Kiro CLI.🟣GitHub
AmpA ferramenta de codificação agentic do Sourcegraph (sucessor do Cody); funciona em CLI e IDE.🔵Website
Junie CLIO agente de codificação LLM-agnóstico da JetBrains CLI (beta 2026); suporta todos os principais fornecedores de modelos.🔵Website
Autohand Code CLIAutónomo agente de codificação de terminais com suporte LLM multifornecedor, mais de 40 ferramentas e sistema de habilidades modulares.🟢GitHub

Editores autônomos ou garfos IDE com integração de IA profunda.

NomeDesignação das mercadoriasTipoLigação
CursorEditor de código IA-nativo líder (VS Code fork); Composer gera aplicativos inteiros a partir de linguagem natural, multi-edições de arquivo agentic.🔵Website
WindsurfIDE alimentado por IA (VS Code fork) com agente Cascade proprietário e modelo SWE-1.5; adquirido pela Cognition AI.🔵Website
ZedEditor de alto desempenho em Rust com recursos nativos de IA, previsão de edição do Zeta e suporte ao Agent Client Protocol. ~77K+🟢GitHub
TraeIDE com IA livre da ByteDance (“O Engenheiro de IA real”) com Modo Builder; oferece acesso gratuito a Claude, GPT-4o e DeepSeek.🔵Website
Google AntigravityO primeiro IDE de agente do Google (VS Code fork) com vista de gerente para orquestrar vários agentes em paralelo; alimentado por Gemini.🔵Website
KiroO AI IDE (VS Code fork) específico da AWS; transforma prompts em especificações, em seguida, código de trabalho, documentos e testes.🔵Website
PearAIEditor de código AI de código aberto (VS Code fork) com bate-papo e completações baseados em Continuar. ~40K+🟢GitHub
VoidAlternativa de cursor de código aberto (VS Code fork); qualquer modelo ou hospedagem local com visualização de mudança. ~28K+🟢GitHub
MeltyEditor de código de IA de chat aberto com edição de vários arquivos e integração com Git profundo. ~7K+🟢GitHub
EmdashAmbiente dev agentic de código aberto (YC W26) para executar múltiplos agentes de codificação em paralelo em árvores de trabalho Git isoladas.🟢GitHub

Plugins para VS Code, JetBrains, Neovim e outros editores.

NomeDesignação das mercadoriasTipoLigação
GitHub CopilotAssistente de codificação de IA mais amplamente adotado; completações em linha, chat, e agente de codificação agente em VS Code, JetBrains, Neovim.🔵Website
ClineAgente de codificação autônoma em VS Code com aprovações humanas no circuito; edição de arquivos, comandos de terminal e uso do navegador. ~59K+🟢GitHub
ContinueExtensão VS Code e JetBrains de código aberto para criar sistemas de dev de IA modulares personalizados; qualquer modelo. ~32K+🟢GitHub
CodyAssistente de IA com fonte de imagens que puxa o contexto de bases de código locais e remotas; Código VS, JetBrains, Visual Studio.🔵Website
CodeiumExtensão gratuita de codificação de IA para 40+ IDEs com completações, chat e pesquisa em mais de 70 idiomas.🟣Website
Amazon Q DeveloperAssistente de codificação de IA do AWS com completações, chat em linha e modo agente; integração AWS profunda.🟣Website
Gemini Code AssistExtensão IDE do Google alimentado pela Gemini com completações, Next Edit Predictions e diferenças em linha; livre para indivíduos.🟣Website
TabnineAssistente de IA focado em privacidade treinado em OSS licenciado por permissão; suporta todos os principais IDEs com implantação no local.🔵Website
Augment CodeAssistente de codificação de IA empresarial com o motor de contexto de 200K-token para compreensão de base de código profunda.🔵Website
QodoAI revisão de código e plataforma de qualidade com arquitetura multi-agente; geração de teste, revisão de código, CI/CD execução.🟣Website
CodeGeeXModelo de geração de código multilingue de código aberto suportando 20+ idiomas com extensões VS Code e JetBrains. ~11K+🟢GitHub
TabbyAuxiliar de codificação de IA de código de código de código de código de código aberto (alternativa Copilot); funciona inteiramente na sua infraestrutura. ~25K+🟢GitHub

Plataformas de codificação de IA / Agentes de nuvem

Seção intitulada “Plataformas de codificação de IA / Agentes de nuvem”

Agentes hospedados em nuvem ou baseados em navegadores que constroem, testam e implementam de forma autônoma.

NomeDesignação das mercadoriasTipoLigação
DevinPrimeiro engenheiro de software de IA totalmente autônomo baseado em nuvem; planos, códigos, testes e abre RPs de forma independente.🔵Website
Replit AgentAgente de IA nativo na nuvem que constrói, testa e implementa aplicativos completos em navegador; 50+ idiomas.🔵Website
bolt.newAgent web dev alimentado por IA; prompt, execute, edite e implante aplicativos completos diretamente no navegador via WebContainers. ~15K+🟢GitHub
bolt.diyForquilha comunitária de parafuso.novo com características estendidas e flexibilidade LLM mais ampla. ~12K+🟢GitHub
LovableAplicativos completos de linguagem natural com Supabase, autenticação e implantação de um clique; inicialização europeia mais rápida para ARR de $20M.🔵Website
v0Plataforma de IA da Vercel para gerar React/Next de alta qualidade. js componentes UI da linguagem natural.🔵Website
GitHub Copilot WorkspaceAmbiente de codificação baseado em nuvem com agentes de planejamento, brainstorm e reparo; incluído com planos Copilot pagos.🔵Website
Firebase StudioAmbiente de desenvolvimento baseado em nuvem agentic do Google.🔵Website

Frameworks do Agente de Codificação de Código Aberto

Seção intitulada “Frameworks do Agente de Codificação de Código Aberto”

Quadros e projectos de investigação para a construção de agentes de codificação autónomos.

NomeDesignação das mercadoriasTipoLigação
OpenHandsPlataforma de código aberto líder para agentes de codificação em nuvem; consistentemente no topo do SWE-bench. Ex- OpenDevin. ~69K+🟢GitHub
SWE-agentPega um problema do GitHub e corrige-o automaticamente usando uma interface agente-computador personalizada. [NeurIPS 2024] ~19K+🟢GitHub
Open SWEO framework de agente de codificação hospedado na nuvem do LangChain foi construído no LangGraph com integração Slack/Linear. ~8K+🟢GitHub
DevikaEngenheiro de software agente de código aberto; quebra instruções, pesquisas e escreve código. Alternativa Devin. ~ 18K+🟢GitHub
AutoCodeRoverMelhoria de programas autônomos combinando LLMs com localização de falhas para resolução de problemas GitHub. ~2.8K+🟢GitHub
AgentlessAbordagem trifásica simples (localize → reparar → validar) para resolver problemas de desenvolvimento de software. ~2K+ .🟢GitHub
DevonProgramador de pares de código aberto agente SWE com código de escrita, planejamento e pesquisa; suporta Claude, GPT-4, Llama, Ollama. ~3.5K+🟢GitHub
NomeDesignação das mercadoriasLigação
Prompt Engineering Guide (DAIR.AI)O guia definitivo de código aberto e o hub de recursos. 3M+ alunos. ~55K+GitHub
Awesome ChatGPT Prompts / Prompts.chatA maior biblioteca de código aberto do mundo. 1000s de prompts para todos os modelos principais.GitHub
12-Factor AgentsPrincípios para a construção de software de qualidade de produção LLM. ~17K+GitHub
NirDiamant/Prompt_Engineering22 tutoriais manuais do Jupyter Notebook. ~3K+GitHub
Context Engineering RepositoryManual de primeiros princípios para ir além da engenharia rápida para o design de contexto.GitHub
AI Agent System Prompts LibraryRecolha de alertas de sistema a partir de agentes de codificação de IA de produção (Claude Code, Gemini CLI, Cline, Aider, Roo Code).GitHub
Awesome Vibe CodingLista com mais de 245 ferramentas e recursos para a construção de software através de prompts de linguagem natural.GitHub
OpenAI CookbookReceitas oficiais para alertas, ferramentas, RAG e avaliações.GitHub
EmbedchainFramework para criar bots tipo ChatGPT sobre seu conjunto de dados.GitHub
ThoughtSourceFramework para a ciência do pensamento de máquina.GitHub
PromptextExtrai e formata o contexto de código para prompts de IA com contagem de tokens.GitHub
Price Per TokenCompare os preços da API LLM em mais de 200 modelos.Website
OpenPawFerramenta CLI (npx pawmode) que transforma Claude Code em um assistente pessoal, gerando prompts de sistema (CLAUDE.md + SOUL.md) com personalidade, memória e 38 roteadores de habilidade.GitHub
Think BetterCLI de código aberto que injeta permanentemente 10 frameworks de decisão estruturados (MECE, Issue Trees, Pré-Mortems) e 12 detectores de viés cognitivo em alertas assistentes de IA. Vai, MIT.GitHub

💻

ModeloContextoPreço (input/output per 1M tokens)Característica chave
GPT-5.2 / 5.2 Thinking400K$1.75 / $14Última emblemática, 90% de desconto em cache, raciocínio configurável
GPT-5.1400K$1.25 / $10Emblema de geração anterior
GPT-4.1 / 4.1 mini / nano1M$2 / $8Melhor modelo não racional, 40% mais rápido e 80% mais barato do que GPT-4o
o3 / o3-pro200KVariaçõesRaciocínio de modelos com uso de ferramenta nativa
o4-mini200KCusto-eficienteRaciocínio rápido, melhor em AIME em sua classe de custo
GPT-OSS-120B / 20B128K$0.03 / $0.30Primeiros modelos de peso aberto, Apache 2.0

Principais características: Respostas API, Agentes SDK, Saídas Estruturadas, Chamada de função, cache rápido (90% de desconto), API Batch (50% de desconto), suporte MCP. Documentos da Plataforma

ModeloContextoPreço (input/output per 1M tokens)Característica chave
Claude Opus 4.61M (beta)$5 / $25Codificação mais poderosa, de última geração e tarefas agentivas
Claude Sonnet 4.5200K$3 / $15Melhor modelo de codificação, 61,4% OSWorld (uso do computador)
Claude Haiku 4.5200KNível rápidoClasse de modelo mais rápida e próxima da fronteira
Claude Opus 4 / Sonnet 4200K$15/$75 (Opus)Opus: 72,5% SWE-bench, Sonnet 4 poderes GitHub Copilot

Principais características: Pensamento estendido com uso de ferramenta, Uso de Computador, MCP (originado aqui), cache prompt, Claude Code CLI, disponível no AWS Bedrock e Google Vertex AI. API Docs

ModeloContextoPreço (input/output per 1M tokens)Característica chave
Gemini 3 Pro Preview1M$2 / $12Modelo Google mais inteligente, implantado em 2B+ Pesquisar usuários
Gemini 2.5 Pro1M$1.25 / $10Melhor para tarefas de codificação/agente, modelo de pensamento
Gemini 2.5 Flash / Flash-Lite1M$0.30/$1.50 · $0.10/$0.40Líderes de desempenho de preços

Principais características: Pensando (todos os modelos 2.5+), Google Search grounding, execução de código, Live API (audio/vídeo em tempo real), cache de contexto. Google AI Studio

ModeloArquiteturaContextoCaracterística chave
Llama 4 Scout109B MoE / 17B activo10MSe encaixa em H100 simples, multimodal, de peso aberto
Llama 4 Maverick400B MoE / 17B ativo, 128 especialistas1MVence GPT-4o, peso aberto
Llama 3.3 70BDensa128KFósforos Llama 3.1 405B

Disponível em 25+ parceiros de nuvem, Hugging Face e APIs de inferência. Llama

FornecedorDesignação das mercadoriasLigação
Mistral AIMistral Large 3 (675B MoE), Devstral 2, Ministral 3. Apache 2.0.Website
DeepSeekV3.2 (671B MoE), R1 (razão, licença MIT). $0.15/$0.75 por 1M fichas.Website
xAI (Grok)Grok 4.1 Rápido: contexto 2M, $0.20/$0.50 por tokens 1M.Website
CohereComando A (111B, 256K context), Incorporar v4, Rerank 4.0. Excels na RAG.Website
Together AI200+ modelos abertos com latência sub-100ms.Website
Groqhardware LPU com ~300+ tokens/sec inferência.Website
Fireworks AIInferência rápida com conformidade HIPAA + SOC2.Website
OpenRouterAPI unificada para mais de 300 modelos de todos os provedores.Website
CerebrasChips em escala de wafer com melhor tempo total de resposta.Website
Perplexity AIAPI aumentada por pesquisa com citações.Website
Amazon BedrockServiço multimodelo gerenciado com Claude, Llama, Mistral, Cohere.Website
Hugging Face InferenceAcesso a modelos abertos via API.Website

💾

NomeDesignação das mercadoriasLigação
Chatbot Arena / LM Arena6M+ votos de usuários para comparações LLM emparelhadas. Padrão de facto para preferência humana.Website
MMLU-ProMais de 12.000 questões de nível de pós-graduação em 14 domínios. NeurIPS 2024 Spotlight.GitHub
GPQA448 questões STEM à prova de Google; validadores não especialistas atingem apenas 34%.arXiv
SWE-bench VerifiedSubconjunto de 500 tarefas para resolução de problemas GitHub no mundo real.Website
SWE-bench Pro1.865 tarefas em 41 acordos profissionais; melhores modelos pontuam apenas ~23%.Leaderboard
Humanity’s Last Exam (HLE)2.500 perguntas qualificadas; as melhores pontuações de IA são apenas ~10–30%.Website
BigCodeBench1.140 tarefas de codificação em 7 domínios; IA atinge ~35,5% vs. 97% de sucesso humano.Leaderboard
LiveBenchResistente à contaminação com perguntas frequentemente atualizadas.Paper
FrontierMathMatemática em nível de pesquisa; IA resolve apenas ~2% dos problemas.Investigação
ARC-AGI v2Raciocínio abstrato medindo a inteligência fluida.Investigação
IFEvalAvaliação seguindo instruções com restrições de formatação/conteúdo.arXiv
MLE-benchAvaliação de engenharia ML da OpenAI através de tarefas de estilo Kaggle.GitHub
PaperBenchAvalia a capacidade da IA de replicar 20 documentos ICML 2024 do zero.GitHub
NomeDesignação das mercadoriasLigação
Hugging Face Open LLM Leaderboard v2Avalia modelos abertos em MMLU-Pro, GPQA, IFEval, MATH.Leaderboard
Artificial Analysis Intelligence Index v3Agrega 10 avaliações.Website
SEAL by Scale AIHosts SWE-bench Pro e avaliações de agentes.Leaderboard
NomeDesignação das mercadoriasLigação
P3 (Public Pool of Prompts)Modelos rápidos para 270+ tarefas NLP usadas para treinar modelos T0 e similares.HuggingFace
System Prompts Dataset944 modelos de prompt de sistema para fluxos de trabalho de agentes (por Daniel Rosehill, Ago 2025).HuggingFace
OpenAssistant Conversations (OASST)161.443 mensagens em 35 idiomas com 461,292 avaliações de qualidade.HuggingFace
UltraChat / UltraFeedbackConjuntos de dados sintéticos de instrução e preferência em larga escala para treinamento de alinhamento.Cara de Abraço
SoftAge Prompt Engineering Dataset1.000 prompts diversos em 10 categorias para desempenho rápido de benchmarking.Cara de Abraço
Text Transformation Prompt LibraryColeta abrangente de prompts de transformação de texto (maio de 2025).Cara de Abraço
Writing Prompts~300K histórias escritas por humanos emparelhadas com prompts de r/WritingPrompts.Kaggle
Midjourney PromptsChamadas de texto e URLs de imagem raspadas da Discórdia pública de MidJourney.HuggingFace
CodeAlpaca-20k20.000 pares de instruções de programação.HuggingFace
ProPEX-RAGConjunto de dados para otimização rápida em fluxos de trabalho RAG.Cara de Abraço
NanoBanana Trending PromptsImagens de IA com curadoria 1000+ do X/Twitter, classificadas por engajamento.GitHub
NomeDesignação das mercadoriasLigação
HarmBench510 comportamentos nocivos em categorias padrão, contextual, copyright e multimodal.Website
JailbreakBenchAbra o benchmark de robustez para quebra de cadeia com 100 prompts.Investigação
AgentHarm110 tarefas de agentes maliciosos em 11 categorias de danos.arXiv
DecodingTrust243.877 estimula a avaliação da confiabilidade em 8 perspectivas.Investigação
SafetyPrompts.comAgregador rastreando mais de 50 conjuntos de dados de segurança / equipe vermelha.Website

🧠

ModeloFornecedorContextoDosagem da Chave
GPT-5.2OpenAI400KInteligência geral, 100% AIME 2025
Claude Opus 4.6Antrópico1M (beta)Codificação, tarefas agente, pensamento estendido
Gemini 3 ProGoogle1M# 1 LMArena (~ 1500 Elo), multimodal
Grok 4.1x IA2M# 2 LMArena (1483 Elo), baixa alucinação
Mistral Large 3IA Mistral256KMelhor peso aberto (675B MoE/41B ativo), Apache 2.0
DeepSeek-V3.2DeepSeek128KMelhor valor (671B MoE/37B ativo), licença MIT
Llama 4 MaverickMeta1MVence GPT-4o (400B MoE/17B ativo), peso aberto
ModeloDetalhe da Chave
OpenAI o3 / o3-pro87,7% GPQA Diamond. Utilização de ferramentas nativas.
OpenAI o4-miniMelhor AIME em sua classe de custo com raciocínio visual.
DeepSeek-R1 / R1-0528Peso aberto, treinado em RL. 87,5% na AIME 2025. Licença MIT.
QwQ (Qwen with Questions)Modelo de raciocínio 32B. Apache 2.0. Comparado com R1.
Gemini 2.5 Pro/Flash (Thinking)Raciocínio integrado com orçamento de pensamento configurável.
Claude Extended ThinkingModo híbrido com cadeia de pensamento visível e uso de ferramenta.
Phi-4 Reasoning / Plus14B modelos de raciocínio rivalizando com modelos muito maiores. Peso aberto.
GPT-OSS-120BOpenAI é peso aberto com CoT. Quase paridade com o4-mini. Apache 2.0.
ModeloFornecedorDetalhe da Chave
Qwen3-235B-A22BAlibabaFlagship MoE. Forte raciocínio/código/multilingual. Apache 2.0. A família mais baixada no HuggingFace.
Gemma 3Google270M a 27B. Multimodal. Contexto 128K. 140+ línguas.
OLMo 2/3Allen AITotalmente aberto (dados, código, pesos, logs). OLMo 2 32B ultrapassa o GPT-3.5. Apache 2.0.
SmolLM3-3BRosto AbraçadoSupera Llama-3.2-3B. Raciocínio em modo duplo. Contexto 128K.
Kimi K2AI Moonshot32B activo. Peso aberto. Alfaiate para codificação/utilização de agentes.
Llama 4 ScoutMeta109B MoE/17B activo. Contexto token 10M. Encaixa em H100.
ModeloDetalhe da Chave
Qwen3-Coder (480B-A35B)69,6% SWE-bench — marco para a codificação de código aberto. Contexto 256K. Apache 2.0.
Devstral 2 (123B)72,2% SWE-bench Verificado. 7x mais rentável do que Claude Sonnet.
Codestral 25.01O modelo de código da Mistral. 80+ línguas. Suporte de preenchimento no meio.
DeepSeek-Coder-V2236B MoE / 21B activo. 338 programa de acção.
Qwen 2.5-Coder7B/32B. 92 linguagens de programação. 88,4% HumanEval. Apache 2.0.

Estes modelos estabeleceram conceitos-chave, mas são largamente substituídos para uso prático:

ModeloFornecedorSignificado
GLM-130BTsinghuaAberto inglês/chinês LLM (2023)
Falcon 180BTIIGrande modelo generativo aberto (2023)
Mixtral 8x7BIA MistralArquitetura MoE pioneira para modelos abertos (2023)
GPT-NeoX-20BEleutherAILLM autorregressivo aberto precoce
GPT-J-6BEleutherAIModelo de linguagem causal aberta precoce

🔎

NomePrecisãoCaracterística chaveLigação
GPTZero99% alegaram10M+ usuários, #1 no G2 (2025). Detecta GPT-4/5, Gemini, Claude, Llama. Camada livre disponível.Website
Originality.ai98–100% (revisão por pares)Avaliado consistentemente mais preciso. Combina detecção de IA + plágio + verificação de fatos. De 14,95 dólares por mês.Website
Turnitin AI Detection98%+ no texto de IA não modificadoDominante na academia. Foi lançada a detecção de AI bypasser/humanizador (ago 2025). Licença institucional.Website
Copyleaks99%+ alegaramFerramenta empresarial detectando IA em mais de 30 idiomas. Integrações LMS.Website
Winston AI99,98% alegaramOCR para documentos digitalizados, imagem de IA/deepfake detection. 11 línguas.Website
Pangram Labs99,3% (COLING 2025)Maior pontuação em COlling 2025 Shared Task. 100% TPR no texto “humanizado”. 97,7% robustez adversa.Website
NomeDesignação das mercadoriasLigação
BinocularsDetector de pesquisa de código aberto usando perplexidade cruzada entre dois LLMs.arXiv
DetectGPT / Fast-DetectGPTMétodo estatístico comparando log-probabilidades de texto original vs. perturbações.arXiv
Openai DetectorClassificador de IA para indicar texto escrito por IA (embrulho Python do Detector OpenAI)[GitHub]
Sapling AI DetectorDetector gratuito baseado em navegador (até 2.000 caracteres). Acerto de 97% em alguns estudos.Website
QuillBot AI DetectorLivre, sem necessidade de inscrição.Website
Writer AI Content DetectorFerramenta gratuita com resultados codificados por cores.Website
ZeroGPTDetector livre popular avaliado em múltiplos estudos acadêmicos.Website
NomeDesignação das mercadoriasLigação
SynthID (Google DeepMind)Marca d’água para texto, imagens e áudio de IA através de amostragem de fichas estatísticas. Implantado em produtos Google.Website
OpenAI Text WatermarkingDesenvolvido mas ainda experimental a partir de 2025. As pesquisas mostram preocupações de fragilidade.Experimental

Ressalva importante: Nenhum detector reivindica 100% de precisão. O texto misto humano/AI permanece mais difícil de detectar (precisão de 50% a 70%). A robustez adversária varia muito. O mercado de detecção de IA deverá crescer de ~$2.3B (2025) para $15B até 2035.


📖

TítuloAutor(es)EditorAno
Prompt Engineering for LLMsJohn Berryman & Albert ZieglerO’Reilly2024
Prompt Engineering for Generative AIJames Phoenix & Mike TaylorO’Reilly2024
Prompt Engineering for LLMsThomas R. CaldwellIndependente2025
TítuloAutor(es)EditorAno
AI Engineering: Building Applications with Foundation ModelsChip HuyenO’Reilly2025
Build a Large Language Model (From Scratch)Sebastian RaschkaManning2024
Building LLMs for ProductionLouis-François Bouchard & Louie PetersO’Reilly2024
LLM Engineer’s HandbookPaul Iusztin & Maxime LabonnePackt2024
The Hundred-Page Language Models BookAndriy BurkovAuto-Publicado2025
TítuloAutor(es)EditorAno
Building Applications with AI AgentsMichael AlbadaO’Reilly2025
AI Agents and ApplicationsRoberto InfanteManning2025
AI Agents in ActionMicheal LanhamManning2025
TítuloAutor(es)EditorAno
LLMs in ProductionChristopher Brousseau e Matthew SharpManning2025
Building Reliable AI SystemsRush ShahaniManning2025
The Developer’s Playbook for LLM SecuritySteve WilsonO’Reilly2024

👩‍🏫


📚


🎥


🤝

  • r/PromptEngineering — Dedicado subreddit para técnicas de elaboração e discussões rápidas.
  • r/ChatGPT — 10M+ membros. hub primário para usuários ChatGPT e compartilhamento rápido.
  • r/LocalLLaMA — Comunidade altamente técnica para a execução de LLMs de código aberto localmente.
  • r/ClaudeAI — Comunidade de Claude do Anthropic: compartilhamento rápido, dicas de API, comparações de modelos.
  • r/MachineLearning — Debates de investigação sobre a LM orientadas para o académico.
  • r/OpenAI — Discussão sobre produtos e API OpenAI.
  • r/StableDiffusion — 450K+ membros para o prompting de arte de IA e fluxos de trabalho.
  • r/ChatGPTPromptGenius — avisos de partilha e de refinação dos membros 35K+.
  • LangChain — Framework de aplicação LLM de código aberto. 100 mil mais estrelas.
  • Promptslab — Modelos Generativos □ Engineering Prompt-LLMs
  • Rosto Abraçado — Central hub: Transformadores, Difusores, Datasets, TRL.
  • DSPy (Stanford NLP) — Crescendo a comunidade para otimização sistemática.
  • OpenAI — Modelos, benchmarks e ferramentas de código aberto.

• Pesquisa Autônoma e Agentes Auto-melhoradores

Seção intitulada “• Pesquisa Autônoma e Agentes Auto-melhoradores”

Sincronizado automaticamente de awesome-autoresearch Última sincronização: 2026-10-03

  • kayba-ai/recursivo-melhorar — Framework de auto-melhoria recursiva onde os agentes capturam traços de execução, analisam padrões de falha e aplicam correções direcionadas com avaliação keep-or-revert.
  • vukrosic/auto- pesquisa — Avião de controlo apenas para docs para um laboratório de investigação de IA autónomo aberto — modelo operacional baseado em ficheiros para a direcção humana e a execução do agente.
  • uditgoenka/autoresearch — Claude Code habilidade que generaliza autopesquisa em um loop reutilizável para software, documentos, segurança, transporte, depuração, e outros objetivos mensuráveis.
  • leo-lilinxiao/codex-autoresearch — habilidade de auto-pesquisa codex-nativo com suporte de currículo, aulas em toda corrida, experiências paralelas opcionais e fluxos de trabalho específicos de modo.
  • junjunjunbong/research-loop — Autopesquisa-estilo Agente Skill para Codex e Código Claude com um corredor determinístico, aprovação plano-hash, árvores de trabalho Git isoladas, avaliação métrica autoritária, e um livro de experiência somente apêndice.
  • xieyulai/steer — Estrutura de experiências governada onde os agentes de codificação editam código de treino e executam rondas, enquanto a tarefa, marcador e evidência permanecem fixos.
  • SeeleAI/Thoth — Primeiro Código Claude e Codex para auto-pesquisa, com execuções duráveis, itens de trabalho bloqueados, registros visíveis e vereditos revetíveis.
  • supratikpm/gemini-autoresearch — Gemini CLI habilidade que generaliza autopesquisa para qualquer objetivo mensurável. Gemini-native: usa o Google Search como uma fonte de verificação ao vivo dentro do loop, verdadeiro modo noturno sem cabeça via —yolo —prompt e contexto de token 1M. Também funciona no Antigravity IDE via .agents/skills/.
  • davebcn87/pi-autoresearch — pi extensão mais painel para loops de experimentos persistentes, métricas ao vivo, rastreamento de confiança e sessões de pesquisa automática reutilizáveis.
  • drivelineresearch/autoresearch-claude-code — Claude Code plugin / skill porto de pi-autoresearch, com um workflow de experimento limpo e um estudo de caso de biomecânica concreta.
  • greyhaven-ai/autocontexto — plano de controlo do circuito fechado para a melhoria do agente repetido, com avaliação, conhecimentos persistentes, validação faseada e destilação facultativa em tempos de execução locais mais baratos.
  • Necmttn/ax — Loop retro local para agentes de codificação de IA: capta traços de sessão, transforma atritos repetidos em propostas e rastreia correções aceitas como experimentos.
  • jmilinovich — Generaliza a auto-investigação num GOAL.md padrão para repos onde o agente deve primeiro construir uma função de aptidão mensurável antes que possa otimizar.
  • james-s-tayler/lazy-developer — Claude Code habilidade que orquestra autopesquisa através de uma sequência priorizada de objetivos de otimização (cobertura, velocidade de teste, velocidade de construção, complexidade, LOC, desempenho) usando GOAL.md como o motor. Suporta execução independente e Ralph Mode multi-instance.
  • mutável-state-inc/autoresearch-at-home — Forquilha colaborativa de auto-research upstream que adiciona experiência reivindicando, melhor-configuração compartilhada sincronia, troca de hipóteses e coordenação em estilo enxame em muitos agentes de uma única GPU.
  • zkarimi22/ pesquisa automática-qualquer coisa — Generaliza a auto-investigação para qualquer métrica mensurável — prompts de sistema, desempenho API, landing pages, suites de teste, ajuste de configuração, consultas SQL. “Se conseguir medi-lo, pode optimizá-lo.”
  • Entrpi/Investigação Automática-em todos os lugares — Expansão entre plataformas que detecta automaticamente a configuração do hardware e inicia o loop. A “cola e generalização” metade da pesquisa automática.
  • ShengranHu/ADAS — Desenho automatizado de sistemas agentic — ICLR 2025. Meta-agentes que inventam novas arquiteturas de agentes, programando-as em código.
  • MaximeRobeyns/self_melhoria_codificação_agente — SICA: Auto-melhoramento da codificação Agente que edita a sua própria base de códigos. Documento do seminário ICLR 2025 que demonstra a auto-aperfeiçoamento do andaime em benchmarks de codificação.
  • peterskoett/agente de auto-melhoria — Melhoria alternativa da arquitectura dos agentes com ciclos de reflexão e de meta-aprendizagem.
  • metauto-ai/HGM — Máquina Huxley- Gödel para agentes de codificação — aplica-se auto-melhoramento ao desempenho do banco SWE através de otimização de meta-nível.
  • gepa-ai/gepa — GEPA (Genético- Pareto) — ICLR 2026 Oral. Reflexiva rápida evolução que supera RL (GRPO) em benchmarks. Otimiza quaisquer parâmetros textuais contra qualquer métrica usando reflexão de linguagem natural.
  • sencient-agi/EvoSkill — Descoberta automatizada de habilidades para agentes de codificação: evolui habilidades reutilizáveis e alertas de trajetórias falhadas contra benchmarks, com suporte para Claude Code, Codex CLI, OpenCode, OpenHands e Goose.
  • Tsepa/autoevolve — Pesquisa auto-auto-inspirada GEPA para auto-jogo: estratégias de código mutado, avaliar cabeça-a-cabeça, taxa com Elo/Bradley-Terry, ramo da frente Pareto. O agente lê traços correspondentes às mutações alvo. Funciona como uma habilidade do Código Claude.
  • HKUDS/ClawTeam — Inteligência de enxame de agentes para pesquisa automática — gera direções paralelas de pesquisa da GPU, distribui trabalho entre agentes, agrega resultados.
  • Orquestra-Investigação/AI-Investigação-SKILLs — Biblioteca de competências abrangente, incluindo orquestração de auto-pesquisa com arquitetura de dois circuitos (otimização interna + síntese externa).
  • WecoAI/aideml — AIDE: Tree-search Agente de engenharia ML que autonomamente melhora o desempenho do modelo através da geração e avaliação de código iterativo.
  • weco.ai — Weco: Plataforma em nuvem para AIDE com observação, rastreamento de experimentos e execução gerenciada — traz o loop de pesquisa automática para a produção.
  • Mirando-lab/AutoResearchClaw — Oleoduto de pesquisa de ponta a ponta que transforma um tópico em revisão de literatura, experimentos, análise, revisão por pares e rascunhos de papel; mais amplo do que a pesquisa automática, mas claramente na mesma linhagem.
  • OpenLAIR/dr-claw — Espaço de trabalho de investigação de código aberto, com oleodutos de ideias a papel sequenciais e pacotes integrados de ferramentas de auto-investigação.
  • Openraiser/NanoPesquisa — Motor de pesquisa autônomo de ponta a ponta que planeja experimentos, gera código, executa trabalhos localmente ou em SLURM, analisa resultados reais, e escreve trabalhos baseados nessas saídas.
  • kaust-ark/ARK — ARK (Kit de Pesquisa Automática): idea + local → pipeline de papel orquestrando 6 agentes — análise de proposta, pesquisa de literatura, experimentos Slurm, redação LaTeX, revisão iterativa por pares. Controlado através de CLI, painel web ou Telegram.
  • wanshuiyin/Auto- claude- code- research- in- sleep — Primeiros fluxos de trabalho de pesquisa para Claude Code e outros agentes, centrados em revisão de literatura autônoma, experimentos, iteração de papel e crítica cross-model.
  • skyllwt/AutoSci — Plataforma de pesquisa de ciclo de vida completo centrada no Wiki construída em Claude Code, percebendo a visão de Karpathy LLM-Wiki. 20+ habilidades cobrir o loop completo: ingerir → ideate → verificação novidade → projeto de experimento / execução / eval → escrita de papel. O estado de pesquisa vive em uma wiki de conhecimento estruturado com um gráfico interativo.
  • Sibyl-Research-Team/AutoResearch-SibylSystem — Cientista totalmente autônomo de IA construído em Claude Code, com linhagem de AutoPesquisa explícita, iteração de pesquisa multi-agente, execução de experimentos GPU, e um laço externo auto-evolutivo.
  • wjc2830/Fácil-AutoPesquisa-para-DeepLearning — Claude Code habilidade que executa uma auto-pesquisa-estilo, humano-gated profunda aprendizagem loop em seis papéis, experiências versionadas, e prova-checked conclusão.
  • eimenhdt/autopesquisador — Primeiro pacote de código aberto para automatizar fluxos de trabalho científicos, actualmente centrado na geração de revisão de literatura com uma ambição de investigação autónoma mais ampla.
  • hiperspaceai/agi — Rede de pesquisa distribuída, peer-to-peer, onde agentes autônomos executam experimentos, descobertas de fofocas, mantêm os leaderboards CRDT e arquivam resultados para o GitHub em vários domínios de pesquisa.
  • Human-Agent-Society/CORAL — CORAL: Evolução autónoma dos multiagentes para a descoberta aberta (arXiv:2604.0165). Agentes de longa duração com memória persistente compartilhada, execução assíncrona e intervenções baseadas em batimentos cardíacos; SOTA em 10 tarefas matemáticas/algorítmicas/sistemas.
  • SakanaAI/AI-Scientist — O cientista da IA: Primeiro sistema abrangente para descoberta científica totalmente automática. Da geração de ideias à escrita de papel com supervisão humana mínima.
  • SakanaAI/AI-Scientist-v2 — Descoberta científica automatizada a nível do seminário através de uma pesquisa arbórea agentiva. Remove dependência de modelo do v1, generaliza em todos os domínios de pesquisa.
  • AweAI-Team/AiScientist — AiScientist: laboratório de pesquisa de longo horizonte ML com orquestração hierárquica e coordenação File-as-Bus - arquivos de espaço de trabalho funcionam como o sistema durável de registro. Ativa loops autônomos de reprodução de papel (PaperBench) e competição-estilo MLE-Bench iteração sob orçamentos fixos de computação/tempo (arXiv 2604.13018)
  • Pesquisador HKUDS/AI — Papel NeurIPS 2025. Automação de pesquisa completa de ponta a ponta: hipótese → experimentos → manuscrito → revisão por pares. Versão de produção em novix. science.
  • openags/Auto- Pesquisa — OpenAGS: Orquestra uma equipe de agentes de IA em todo o ciclo de vida da pesquisa — revisão de literatura, geração de hipóteses, experimentos, escrita de manuscritos e revisão por pares.
  • SamuelSchmidgall/AgenteLaboratório — Fluxo de trabalho de investigação autónomo: ideia → revisão de literatura → experiências → relatório. Suporta os modos autônomo e co-piloto.
  • AgenteRxiv — Quadro de investigação autónomo colaborativo, em que os laboratórios de agentes partilham um servidor pré-impresso para desenvolver o seu trabalho iterativo.
  • JinheonBaek/Agente de Investigação — Geração iterativa de ideias de investigação sobre literatura científica com LLMs. Multi-agente revisão e feedback loops.
  • du-nlp-lab/MLR-Copilot — Quadro autónomo de investigação ML — gera ideias, implementa experiências, analisa resultados.
  • MASWorks/ML-Agent — Reforço dos agentes LLM para a engenharia autónoma de ML. Aprende com tentativa e erro para melhorar o desempenho do modelo.
  • PouriaRouzrokh/LatteReview — Pacote Python de código baixo para revisões sistemáticas automatizadas da literatura através de agentes com IA.
  • LitLLM/LitLLM — Assistente de revisão de literatura com I.A. utilizando RAG para seções precisas e bem estruturadas relacionadas com o trabalho em escrita académica.
  • Laboratório de agentes — Oleoduto de pesquisa trifásico: Revisão de Literatura → Experimentação → Redação de Relatórios, com agentes especializados para cada fase.
  • happy happy-jun/writing-driven-autoresearch — Autoresearch-estilo arnês que mantém um papel submittable desde o primeiro minuto e impulsiona cada experiência a partir das reivindicações nesse rascunho, looping modificar → medida → verificar → rever. 1o lugar no Ralphthon@ ICML 2026 Hackathon de investigação autónoma.
  • Fábrica/Agon de Pesquisa Automática — Orchestrator de pesquisa de ponta a ponta construído sobre um princípio fundamental, Prompt Economy (laops reutilizáveis, não prompts one-off), mais cinco regras de apoio; executa loops cientista/coder/auditor em mais de 10 disciplinas, mesma linhagem de loop reutilizável como autopesquisa, mas escalou para programas de pesquisa completos.
  • gianfrancopiana/openclaw-autoresearch — Porto OpenClaw de pi-autopesquisa; ciclo de experiências autónomo para qualquer alvo de otimização com pontuação de confiança estatística.
  • miolini/autoresearch-macos — Forquete macOS amplamente adotado que adapta a pesquisa automática upstream para Apple Silicon / MPS, preservando a forma original do laço.
  • trevin-creator/autoresearch-mlx — porta MLX-native Apple Silicon que mantém o orçamento fixo a montante val_bpb loop ao remover completamente a dependência PyTorch/CUDA.
  • jsegov/autoresearch-win-rtx — Garfo RTX nativo do Windows focado em GPUs de consumo NVIDIA, com pisos VRAM explícitos e um caminho prático de configuração de desktop.
  • iii-hq/n-auto-research — Infraestrutura de pesquisa automática multi-GPU com rastreamento estruturado de experiências, estratégia de busca adaptativa, recuperação de falhas e orquestração questionável em torno do clássico train.py Loop.
  • lucasgelfond/autoresearch-webgpu — Porta Browser/WebGPU que permite aos agentes gerar código de treinamento, executar experimentos in-browser, e feed resultados de volta para o loop sem uma configuração Python.
  • tonitangbatato/autoresearch-engram — Forquilha com memória cognitiva persistente — recuperação ponderada em frequência dos conhecimentos intersessões para uma melhor continuidade das experiências.
  • Porta Colab/Kagle T4 — Adapta auto-research para GPUs T4 grátis (Google Colab / Kaggle) com custo zero e configuração local zero. Principais alterações: Flash Atenção 3 → PyTorch SDPA, remove dependência de kernel somente H100.
  • ArmanJR- Lab/auto-research — porto de Jetson AGX Orin com um diretor — um binário Go que atua como um “diretor criativo” injetando novidade (papers arxiv + DeepSeek Reasoner) no loop para escapar de mínimos locais. Inclui comparação multi-experimento (baseline vs diretor-guiado) com análise detalhada da baia.
  • mattprusak/genealogia de pesquisa automática — Aplica o padrão de auto-pesquisa à genealogia, usando prompts estruturados, guias de arquivo, verificações de fonte e fluxos de trabalho de cofre para expandir iterativamente e verificar a pesquisa de história familiar.
  • ArchishmanSengupta/autovoicevals — Utiliza chamadas adversas mais edições rápidas para endurecer agentes de IA de voz em Vapi, Menor IA e OnzeLabs.
  • chrisworsey55/atlas-gic — Aplica a auto-research keep-ou-revert loop aos agentes de negociação, otimizando os prompts e orquestração de portfólio contra a relação Sharpe rolamento em vez de perda de modelo.
  • Now-AI/autokernel — Aplica o loop de autopesquisa à otimização do kernel da GPU: gargalos de perfil, editar um kernel, benchmark, manter ou reverter, repetir.
  • ElliotXie/autozima — Framework multi-agente que aplica a auto-research keep-ou-revert loop para software científico do lado da CPU: perfilar uma função alvo, gerar um candidato de otimização, referência para a velocidade, preservando as saídas originais, manter ou reverter, repetir.
  • Agent-Analytics/Autoresearch-crescimento — Aplica auto-pesquisa ao posicionamento da página de aterragem e aos candidatos aos testes A/B, utilizando instantâneos analíticos e resultados de experiências medidos nas rodadas subsequentes.
  • Rkcr7/autoresearch-sudoku — Melhoramento do fluxo de trabalho de pesquisa automática, onde um agente de IA reescreve iterativamente e faz referência a um solucionador Rust sudoku, derrotando os principais solucionadores construídos por humanos em conjuntos de benchmark rígidos.
  • jeongph/autospec — Lê regras de negócios em linguagem natural e constrói autonomamente um serviço de Boot Spring com testes através do loop keep-or-revert. Avalia com Gradle build + JUnit XML. esqueleto de 119 linhas para 950 linhas em 5 ciclos.
  • vlasenkoalexey/tpu_desempenho_pesquisa automática_wiki — Aplica o auto-research keep-or-revert loop ao desempenho do modelo TPU (MFU / tokens-per-sec) em hardware v6e: perfis cada um executado através de um servidor XProf MCP, faz uma mudança de código de modelo por experimento, e mantém ou reverte contra MFU medido. Emparelha o loop com uma wiki LLM estilo Karpathy para conhecimento de domínio e traços de otimização por experiência; inclui estudos de caso Llama3-8B e Qwen3-8B em todas as faixas JAX e tochax.
  • snap-stanford/MLAgentBench — Conjunto Benchmark para avaliação de agentes de IA em tarefas de experimentação ML. 13 tarefas do CIFAR-10 à BabyLM.
  • OpenAI/mle-bench — referência da OpenAI para medir o desempenho dos agentes de IA na engenharia ML.
  • chchenhui/mlrbench — MLR-Bench: Avaliar os agentes de IA em matéria de investigação em ML em fase aberta. 201 tarefas das oficinas NeurIPS/ICLR/ICML.
  • gersteinlab/ML-Bench — Avalia LLMs e agentes para tarefas de ML no código de repositório.
  • THUDM/AgentBench — Referência abrangente para avaliação LLM-as-Agent em 8 ambientes distintos. ICLR 2024.

Congratulamo-nos com as contribuições para esta lista! Antes de contribuir, por favor, tome um momento para rever o nosso Orientações para as contribuiçõesEssas diretrizes ajudarão a garantir que suas contribuições se alinham aos nossos objetivos e atendam aos nossos padrões de qualidade e relevância.

O que estamos à procura:

  • Novos artigos, ferramentas ou recursos de alta qualidade com uma breve descrição do porquê eles importam
  • Atualiza as entradas existentes (links quebrados, informações desatualizadas)
  • Correções às contagens de estrelas, preços ou detalhes do modelo
  • Traduções e melhorias de acessibilidade

Normas de qualidade:

  • Todas as ferramentas devem ser mantidas ativamente (atualizadas nos últimos 6 meses)
  • Os documentos devem ser provenientes de locais revistos por pares ou ter uma adopção comunitária significativa
  • Os conjuntos de dados deverão ser acessíveis ao público
  • Por favor, inclua uma descrição de uma linha explicando por que o recurso é valioso

Obrigado pelo seu interesse em contribuir para este projeto!


Mantido por PedidosLab · Estrelar este repo Se achares útil!

HagiCode

O HagiCode é um ambiente de programação com agentes. Interações de interface ricas e práticas tornam o planejamento, a execução de agentes e o trabalho em projetos mais acessíveis e fáceis de acompanhar, criando uma experiência de desenvolvimento envolvente.

Uma experiência de desenvolvimento envolvente, com interações de interface ricas e práticas.

Acessar HagiCodeLer a documentação
  • InteligenteOs fluxos de trabalho do OpenSpec transformam a intenção em um caminho executável, da proposta ao design, às tarefas e à entrega.
  • EficienteA execução multiagente mantém pesquisa, implementação e revisão em andamento em paralelo, em vários repositórios e com os Agent CLI que você já usa.
  • InteressanteInterações de interface ricas e práticas tornam o planejamento, a execução de agentes e o trabalho em projetos mais acessíveis e fáceis de acompanhar.

Baixar para Windows

Obter na Microsoft StoreTodos os downloads

Transforme ideias em software entregue.

O HagiCode é um ambiente de programação com agentes: os fluxos de trabalho do OpenSpec planejam a mudança, a execução multiagente a realiza e o Hero Scenario torna o longo percurso visível, para transformar ideias em software entregue.

Inteligente
Os fluxos do OpenSpec transformam a intenção em um caminho da proposta à entrega.
Eficiente
A execução multiagente conduz pesquisa, implementação e revisão em paralelo.
Divertido
As interações de interface facilitam o planejamento, a execução de agentes e os projetos.

Sair do Awesome Site?

Você está prestes a visitar um site externo. Não controlamos o conteúdo nem as práticas de privacidade dele.

Destino

Continuar para o site