콘텐츠로 이동

언어 선택

현재 언어: 한국어

Prompt Engineering

Source: https://github.com/promptslab/Awesome-Prompt-Engineering at 23542555e534
License: Apache-2.0
Read the English original

This edition is an AI-assisted translation.

Prompt Engineering and Context Engineering에 대한 자원의 손으로 수집 - 종이, 도구, 모델, APIs, 벤치 마크, 코스 및 큰 언어 모델과 작업을위한 지역 사회.

https://promptslab.github.io

Master Prompt Engineering. Join the Course at https://promptslab.github.io

Awesome License PRs Welcome Community Last Updated


섹션 제목: “ Master Prompt Engineering. Join the Course at https://promptslab.github.io ”

신속한 엔지니어링 이 길을 따라:

  1. 기본 학습 → ChatGPT Prompt 엔지니어링 (무료, ~90분)
  2. 자주 묻는 질문 → DAIR의 신속한 엔지니어링 가이드. 사이트맵 (오픈소스, 종합)
  3. 연구 공급자 docs → OpenAI Prompt 엔지니어링 가이드 · Anthropic Prompt 엔지니어링 가이드
  4. 필드가 헤드링되는 곳 → Anthropic: AI Agents를 위한 효과적인 Context 기술설계
  5. 연구 읽기 → Prompt 보고서 - 1,500개 이상의 종이에서 58개 이상의 신속한 기술


📄

Prompt 최적화 및 자동적인 Prompting

섹션 제목: “Prompt 최적화 및 자동적인 Prompting”

Agentic Prompting 및 다중 상태 시스템

섹션 제목: “Agentic Prompting 및 다중 상태 시스템”

이 종이는 현대 신속한 기술설계가 위에 건설하는 핵심 개념을 설치했습니다:


🔧

이름 *이름 *팟캐스트
Promptfoo테스트, 평가 및 Red-teaming LLM 프롬프트를 위한 오픈 소스 CLI. YAML 구성, CI/CD 통합, adversarial 테스트. ~9K+ ⭐GitHub
Promptify해결 NLP LLM의 문제 & 쉽게 GPT, PaLM 및 Promptify와 같은 인기있는 유전 모델에 대한 다른 NLP 작업 프롬프트를 생성[Github]
AgentaOpen-source LLM Developer platform for 신속한 관리, 평가, 인간 피드백 및 배포.GitHub
PromptLayer버전, 테스트 및 모니터링 모든 신속한 및 강력한 evals, 추적 및 회귀 세트와 에이전트.Website
Helicone생산 신속한 모니터링 및 최적화 플랫폼.Website
LangGPTStructured 및 meta-prompt 디자인을 위한 기구. 10K+ ⭐·GitHub
ChainForge코드없이 LLM 신속한 응답을 구축, 테스트 및 비교하기위한 비주얼 도구 키트.GitHub
LMQLLLMs에 대한 쿼리 언어 복잡한 신속한 논리 프로그래밍 가능.GitHub
PromptotypeLLM 프롬프트 개발, 테스트 및 관리를위한 플랫폼.Website
PromptPanda신속한 작업 흐름을 간소화하기위한 AI-powered 신속한 관리 시스템.Website
Promptimize AI브라우저 확장은 모든 AI 모델에 대한 사용자 프롬프트를 자동으로 개선합니다.Website
PROMPTMETHEUSWeb-based “Prompt Engineering IDE”는 이차적으로 생성하고 실행된 프롬프트입니다.Website
Better Prompt생산에 밀어 전에 LLM 프롬프트에 대한 테스트 스위트.GitHub
OpenPrompt신속한 연구를위한 오픈 소스 프레임 워크.GitHub
Prompt SourceToolkit for create, sharing, and using natural language prompts.GitHub
Prompt EngineLLMs (Microsoft)에 대한 프롬프트 생성 및 유지를위한 NPM 유틸리티 라이브러리.GitHub
PromptInjectAdversarial 신속한 공격에 LLM 견고성의 양적 분석을위한 프레임 워크.GitHub
LynxPromptAI IDE config 파일을 관리하기위한 자체 호스팅 플랫폼 (.cursorrules, CLAUDE.md, copilot-instructions.md). 웹 UI, REST API, CLI 및 30 + AI 코딩 조수를위한 청사진 시장.GitHub
flomptVisual AI prompt Builder는 12개의 semantic 블록(role, context, constraints, examples, etc.)로 프린트하고 최적화된 XML로 컴파일합니다. ChatGPT/Claude/Gemini 및 Claude Code Agent를 위한 MCP 서버의 브라우저 확장. 무료, 오픈 소스.Website
이름 *이름 *팟캐스트
DeepEvalRAG, 에이전트 및 CI/CD 통합과 대화를 다루는 오픈 소스 평가 프레임워크. ~7K+ ⭐GitHub
Ragas지식 기반 테스트 세트 및 30 + 미터와 RAG 평가. ~8K + ⭐GitHub
LangSmithLLM 응용 프로그램을 디버깅, 테스트, 평가 및 모니터링을위한 LangChain의 플랫폼.Website
Langfuse트래킹, 프롬프트 관리 및 인문학을 통한 오픈소스 LLM 관측성. ~7K+ ⭐GitHub
BraintrustAI 평가 플랫폼 종료, SOC2 Type II 인증.Website
Arize AI / Phoenix실시간 LLM 모니터링 및 추적.GitHub
TruLensLLM 앱을 평가하고 설명합니다. Hallucinations, relevance, 접지를 추적합니다.GitHub
InspectAI벤치 마크 (UK AISI)에 대한 증발 에이전트에 대한 목적 내장.GitHub
OpikEvaluate, 테스트 및 선박 LLM 응용 프로그램 dev 및 생산 수명주기.GitHub
EvalViewYAML 시험 케이스, 회귀 탐지 및 생산 모니터링을 가진 다단계 AI 대리인을 시험하는 CLI 공구.GitHub
이름 *이름 *팟캐스트
LangChain / LangGraph가장 널리 채택 된 LLM 앱 프레임 워크; LangGraph는 그래프 기반 멀티 스텝 에이전트 워크플로우를 추가합니다. ~100K+ / ~10K+ ⭐GitHub · LangGraph
CrewAI700개 이상의 통합을 갖춘 AI 에이전트 오케스트라 조정. ~44K+ ⭐GitHub
AutoGen (AG2)Microsoft의 다중 시약 대화 프레임 워크. ~40K+ ⭐·GitHub
DSPy자동 프롬프트/무게 최적화를 갖춘 LLM 프로그래밍을위한 Stanford의 프레임 워크. ~22K+ ⭐·GitHub
OpenAI Agents SDK기능 호출, 난간 및 손전등이있는 공식 에이전트 프레임 워크. ~10K+ ⭐·GitHub
Semantic KernelMicrosoft의 AI 프레임 워크는 M365 Copilot을 강화합니다; C#, Python, Java. ~24K+ ⭐GitHub
LlamaIndexRAG 및 에이전트 기능을 위한 데이터 프레임 워크. ~40K+ ⭐·GitHub
HaystackRAG 및 대리인을 위한 파이프라인 건축술을 가진 Open-source NLP 기구. ~20K+ ⭐·GitHub
Agno (formerly Phidata)microsecond 순간을 가진 Python 대리인 기구. ~20K+ ⭐·GitHub
Smolagents얼굴의 최소 부호 중심 대리인 기구 (~1000 LOC). ~15K+ ⭐GitHub
Pydantic AI구조 검증을 위한 Pydantic를 사용하는 유형 안전한 대리인 기구. ~8K+ ⭐GitHub
Mastra조수, RAG 및 관찰성을 가진 TypeScript AI 대리인 기구. ~20K+ ⭐·GitHub
Google ADKGemini 및 Google Cloud와 통합 된 Agent Development Kit.GitHub
Strands Agents (AWS)깊은 AWS 통합을 가진 Model-agnostic 기구.GitHub
Langflow드래그 앤 드롭이있는 노드 기반 시각적 에이전트 빌더. ~ 50K + ⭐GitHub
n8nAI 대리인 기능 및 400+ 통합을 가진 Workflow 자동화. ~60K+ ⭐·GitHub
Dify툴링 에이전트와 RAG를 활용한 에이전트 워크플로우를 위한 올인원 백엔드GitHub
PraisonAI멀티 AI 100+ LLM 지원, MCP 통합 및 내장 메모리를 가진 대리인 기구.GitHub
NeurolinkMulti-provider AI Agent Framework는 워크플로우 오케스트라와 함께 12+ 제공업체를 통합합니다.GitHub
Composio0 설정으로 AI 에이전트에 100 + 도구를 연결합니다.GitHub
이름 *이름 *팟캐스트
DSPy자동 프롬프트 튜닝을 위한 다중 최적화기 (MIPROv2, BoottrapFewShot, COPRO). ~22K+ ⭐GitHub
TextGrad텍스트 (Stanford)를 통해 자동 차별화. ~2K + ⭐GitHub
OPROGoogle DeepMind의 최적화를 통해 프롬프트합니다.GitHub
이름 *이름 *팟캐스트
Garak (NVIDIA)LLM 취약성 스캐너, 주입 및 탈옥 - “LLMs를위한 Nmap.” ~3K + ⭐GitHub
PyRIT (Microsoft)자동화된 빨간teaming를 위한 Python 위험 ID 공구. ~3K+ ⭐GitHub
DeepTeam40+ 취약점, 10+ 공격 방법, OWASP Top 10 지원.GitHub
LLM GuardLLM I/O 검증을 위한 보안 툴킷. ~2K+ ⭐GitHub
NeMo Guardrails (NVIDIA)대화 시스템을 위한 풀그릴 난간. ~5K+ ⭐GitHub
Guardrails AI시스템 신뢰성을 보장하기 위해 엄격한 출력 형식 (JSON schemas)를 정의합니다.Website
Lakera실시간 신속한 주입 탐지를 위한 AI 보안 플랫폼.Website
Purple Llama (Meta)CyberSecEval을 포함한 오픈 소스 LLM 안전 평가GitHub
GPTFuzz자동화된 탈옥 템플렛 생성 달성 >90% 성공률.GitHub
Rebuff신속한 주사의 탐지 및 예방을위한 오픈 소스 도구.GitHub
AgentSeal“Open-source Scanner는 신속한 주입 및 추출 취약점을위한 AI 에이전트를 테스트하기 위해 150 공격 프로브를 실행합니다.”GitHub

MCP는 Anthropic (Nov 2024, Linux Foundation Dec 2025)에 의해 개발 된 개방형 표준이며 표준 인터페이스를 통해 외부 데이터 소스 및 도구에 AI 보조를 연결하는 데 사용됩니다. 그것은 있다 97M+ 월간 SDK 다운로드 GitHub, Google 및 대부분의 주요 AI 제공 업체에 의해 채택되었습니다.

이름 *이름 *팟캐스트
MCP Specification핵심 의정서 명세와 SDK. ~15K+ ⭐GitHub
MCP Reference Servers공식 구현: fetch, filesystem, GitHub, Slack, Postgres.GitHub
FastMCP (Python)MCP 서버 구축을위한 고급 Pythonic 프레임 워크. ~5K + ⭐GitHub
GitHub MCP ServerGitHub의 Repo, Issue, PR 및 Actions 상호 작용을 위한 공식 MCP 서버. ~15K+ ⭐·GitHub
Awesome MCP Servers10,000개 이상의 커뮤니티 MCP 서버 목록 ~30K+ ⭐·GitHub
Context7MCP 서버는 code hallucination을 줄이기 위해 version-specific 문서를 제공합니다.GitHub
GitMCP도메인을 변경하여 GitHub 저장소에 원격 MCP 서버를 만듭니다.Website
MCP InspectorMCP 서버 개발을위한 비주얼 테스트 도구.GitHub

🟢 = 오픈 소스 · 🔵 = 상용 · 🟣 = 오픈 소스 + 상용 (핵심은 오픈, 클라우드/API는 유료)

Codebase를 이해하고 다단계 작업을 수행한 Terminal-native Agentic 도구.

이름 *이름 *제품정보팟캐스트
Claude CodeAnthropic의 에이전트 코딩 CLI; 전체 코덱을 이해하고 자연 언어를 통해 복잡한 다중 단계 작업을 수행합니다.🔵Docs
OpenAI Codex CLIOpenAI의 오픈 소스 터미널 코딩 에이전트; 경량, 현지 최초, 샌드박스 코드 실행. ~68K+ ⭐🟣GitHub
Gemini CLIGoogle의 오픈 소스 터미널 AI 에이전트 1M-token 컨텍스트 윈도우와 구글 검색 접지. ~96K + ⭐🟣GitHub
Qwen CodeQwen3-Coder에 최적화 된 오픈 소스 터미널 AI 에이전트; 멀티 프로토콜 지원 (OpenAI / Anthropic / Gemini APIs), 1,000 무료 요청 / 일. ~ 21K + ⭐🟢GitHub
Aider깊고 Git 통합을 가진 맨끝에 있는 AI 쌍 프로그램; 지도 전체 codebases 및 자동 질량 변화. ~42K+ ⭐🟢GitHub
OpenCode강력한 오픈 소스 AI 코딩 에이전트 아름다운 TUI; 거의 모든 AI 모델 제공 업체를 지원합니다. ~120K+ ⭐🟢GitHub
GooseBlock (Square/Cash App)의 Extensible open-source AI 에이전트; 설치, 실행, 편집 및 LLM 테스트. ~29K + ⭐🟢GitHub
Crush멀티 모델 지원, LSP 통합 및 아름다운 터미널 UI와 함께 Charmbracelet의 매력적인 에이전트 코딩 에이전트. ~9K + ⭐🟢GitHub
Amazon Q Developer CLIAWS의 터미널에서 에이전트 채팅 경험; Kiro CLI로 전환.🟣GitHub
AmpSourcegraph의 에이전트 코딩 도구 (Cody Successor); CLI와 IDE의 작동.🔵Website
Junie CLIJetBrains의 LLM-agnostic 코딩 에이전트 CLI (beta 2026); 모든 주요 모델 제공 업체를 지원합니다.🔵Website
Autohand Code CLI멀티 프로바이더 LLM 지원, 40 + 도구 및 모듈 기술 시스템을 갖춘 자율 터미널 코딩 에이전트.🟢GitHub

독립 편집기 또는 딥 AI 통합과 IDE 포크.

이름 *이름 *제품정보팟캐스트
CursorLeading AI-native code editor (VS Code fork); Composer는 자연적인 언어, 대리인 다중 파일 편집에서 전체 앱을 생성합니다.🔵Website
WindsurfAI-powered IDE (VS Code fork) 독점 Cascade 에이전트 및 SWE-1.5 모델; Cognition AI에 의해 인수.🔵Website
Zed기본 AI 기능으로 Rust의 고성능 편집기, Zeta 편집 예측 및 Agent Client Protocol 지원. ~77K+ ⭐🟢GitHub
TraeFree AI-powered IDE from ByteDance (“Real AI Engineer”) with Builder Mode; Claude, GPT-4o 및 DeepSeek에 무료 액세스를 제공합니다.🔵Website
Google AntigravityGoogle의 에이전트-first IDE (VS Code fork)는 병렬에 여러 에이전트를 관현하는 관리자보기; Gemini에 의해 구동.🔵Website
KiroAWS의 spec 구동되는 대리인 AI IDE (VS 부호 포크); specs로 신속한, 그 후에 일 부호, docs 및 시험.🔵Website
PearAIOpen-source AI 코드 편집기 (VS Code fork) 을 Continue 기반 채팅 및 완료. ~40K+ ⭐·🟢GitHub
Void오픈 소스 커서 대안 (VS Code fork); 변경 시각화와 함께 모든 모델 또는 로컬 호스팅. ~28K + ⭐🟢GitHub
Melty오픈 소스 채팅-First AI 코드 편집기 멀티 파일 편집 및 깊은 Git 통합. ~7K+ ⭐🟢GitHub
Emdash고립 된 Git worktrees에서 평행한 다수 기호를 달리기를 위한 오픈 소스 대리인 dev 환경 (YC W26).🟢GitHub

VS Code, JetBrains, Neovim 및 기타 편집기용 플러그인.

이름 *이름 *제품정보팟캐스트
GitHub Copilot가장 널리 채택 된 AI 코딩 조수; 인라인 완료, 채팅, 에이전트 코딩 에이전트 VS Code, JetBrains, Neovim.🔵Website
ClineVS Code의 자율 코딩 에이전트는 인간의 반복 승인; 파일 편집, 터미널 명령 및 브라우저 사용. ~59K + ⭐🟢GitHub
Continue오픈 소스 VS 코드 및 JetBrains 확장 사용자 정의, 모듈 AI dev 시스템; 어떤 모델. ~32K + ⭐🟢GitHub
Cody현지 및 원격 코드베이스에서 컨텍스트를 끌어내는 Sourcegraph-powered AI Assistant; VS Code, JetBrains, Visual Studio.🔵Website
Codeium무료 AI 코딩 확장 40 + 완료, 채팅 및 70 + 언어를 통해 검색 IDE.🟣Website
Amazon Q DeveloperAWS의 AI 코딩 어시스턴트, 인라인 채팅 및 에이전트 모드; 깊은 AWS 통합.🟣Website
Gemini Code AssistGoogle의 IDE 확장은 Gemini에서 완료, Next Edit Predictions 및 인라인 디퓨즈로 구동됩니다.🟣Website
TabninePrivacy-focused AI 조수는 permissive-licensed OSS에 훈련했습니다; 온프레미스 배치를 가진 모든 중요한 IDE를 지원합니다.🔵Website
Augment Code200K-token Context Engine과 함께 엔터프라이즈 AI 코딩 보조.🔵Website
QodoAI 코드 검토 및 멀티 시약 아키텍처와 품질 플랫폼; 테스트 세대, 코드 검토, CI/CD 시행.🟣Website
CodeGeeXVS Code 및 JetBrains 확장을 지원하는 오픈 소스 다국어 코드 생성 모델. ~11K+ ⭐🟢GitHub
Tabby자체 호스팅 오픈 소스 AI 코딩 조수 (Copilot 대안); 완전히 인프라에서 실행. ~25K + ⭐🟢GitHub

AI 코딩 플랫폼 / 클라우드 에이전트

섹션 제목: “AI 코딩 플랫폼 / 클라우드 에이전트”

브라우저 기반 또는 클라우드 호스팅 에이전트 구축, 테스트, 자율적으로 배치.

이름 *이름 *제품정보팟캐스트
Devin최초의 자율 클라우드 기반 AI 소프트웨어 엔지니어; 계획, 코드, 테스트 및 PR을 독립적으로 엽니 다.🔵Website
Replit Agent자율적으로 빌드, 테스트, 배포하는 Cloud-native AI 에이전트는 풀스택 앱을 사내에서 배포합니다. 50+ 언어.🔵Website
bolt.newAI-powered web dev Agent; 신속한, 실행, 편집 및 WebContainers를 통해 브라우저에서 Full-stack 앱을 직접 배포합니다. ~15K+ ⭐·🟢GitHub
bolt.diy장시간 특징과 더 넓은 LLM 융통성을 가진 bolt.new의 공동체 포크. ~12K+ ⭐🟢GitHub
Lovable내장 Supabase, auth 및 One-click 배포를 가진 자연적인 언어에서 가득 차 있는 앱; $20M ARR에 가장 빠른 유럽 시작.🔵Website
v0Vercel의 고품질 React/Next를 생성하는 AI 플랫폼. js UI 구성 요소🔵Website
GitHub Copilot Workspace플랜, Brainstorm 및 Repair Agent를 사용한 클라우드 기반 코딩 환경; 유료 Copilot 플랜 포함.🔵Website
Firebase StudioGoogle의 에이전트 클라우드 기반 개발 환경.🔵Website

오픈 소스 코딩 에이전트 Frameworks

섹션 제목: “오픈 소스 코딩 에이전트 Frameworks”

자율 코딩 에이전트 구축을위한 프레임 워크 및 연구 프로젝트.

이름 *이름 *제품정보팟캐스트
OpenHands클라우드 코딩 에이전트를위한 오픈 소스 플랫폼; SWE-bench에서 지속적으로 최고. 이전 OpenDevin. ~69K+ ⭐🟢GitHub
SWE-agentGitHub 이슈를 가져 와서 사용자 정의 에이전트-컴퓨터 인터페이스를 사용하여 자동으로 수정합니다. [NeurIPS 2024] ~19K+ ⭐🟢GitHub
Open SWELangChain의 동기화 클라우드 호스팅 코딩 에이전트 프레임 워크는 Slack/Linear 통합으로 LangGraph에 내장. ~8K+ ⭐·🟢GitHub
DevikaOpen-source Agentic 소프트웨어 엔지니어; 지시, 연구 및 쓰기 코드를 깰. Devin 대안. ~18K + ⭐🟢GitHub
AutoCodeRoverGitHub 문제 해결을 위한 오류 로컬라이제이션과 LLM을 결합한 자율 프로그램 개선. ~2.8K+ ⭐·🟢GitHub
Agentless소프트웨어 개발 문제를 해결하기 위해 간단한 3 단계 접근 (localize → repair → validate). ~2K+ ⭐🟢GitHub
Devon오픈 소스 쌍 프로그래머 SWE 에이전트 코드 작성, 계획, 연구; 지원 Claude, GPT-4, Llama, Ollama. ~3.5K+ ⭐·🟢GitHub
이름 *이름 *팟캐스트
Prompt Engineering Guide (DAIR.AI)definitive 오픈 소스 가이드 및 리소스 허브. 3M+ 학습자. ~55K+ ⭐GitHub
Awesome ChatGPT Prompts / Prompts.chat세계 최대의 오픈 소스 프롬프트 라이브러리. 모든 주요 모델에 대한 신속한 1000s.GitHub
12-Factor Agents생산 등급 LLM 전원 소프트웨어를 구축하기위한 원칙. ~17K + ⭐GitHub
NirDiamant/Prompt_Engineering22개의 손에 Jupyter 노트북 튜토리얼. ~3K+ ⭐GitHub
Context Engineering Repository신속한 엔지니어링을 통한 컨텍스트 디자인에 대한 First-principles 핸드북.GitHub
AI Agent System Prompts Library생산 AI 코딩 에이전트 (Claude Code, Gemini CLI, Cline, Aider, Roo Code)에서 시스템 프롬프트 컬렉션.GitHub
Awesome Vibe Coding245개 이상의 도구와 자원을 수집하여 천연어 프롬프트를 통해 소프트웨어를 구축합니다.GitHub
OpenAI Cookbook신속한 도구, RAG 및 평가를위한 공식 요리법.GitHub
EmbedchainFramework는 데이터셋을 통해 ChatGPT-like bots를 만듭니다.GitHub
ThoughtSource기계 사고의 과학을위한 프레임 워크.GitHub
Promptext토큰 계산으로 AI를 위한 추출 및 포맷 코드 컨텍스트.GitHub
Price Per TokenLLM API 가격 비교 200+ 모델.Website
OpenPawCLI 도구 (npx pawmode) Claude Code를 시스템 프롬프트 (CLAUDE.md + SOUL.md)를 생성하여 개인 조수로 전환합니다.GitHub
Think Better오픈 소스 CLI 영구적으로 10 구조화 결정 프레임 워크 (MECE, Issue Trees, Pre-Mortems) 및 12 인지 Bias 검출기를 AI 보조 프롬으로 주사합니다. 이동, MIT.GitHub

💻

주요 특징설정하기가격 (1M 토큰 당 입력 / 출력)주요 특징
GPT-5.2 / 5.2 Thinking400K의$1.75 / $14최신 기함, 90 % 캐시 할인, 구성 요소
GPT-5.1400K의$1.25 / $10이전 세대 주력
GPT-4.1 / 4.1 mini / nano1시간$2 / $8GPT-4o보다 40 % 빠르고 80 % 저렴
o3 / o3-pro200K의팟캐스트기본 도구 사용 Reasoning 모델
o4-mini200K의공급 능력빠른 reasoning, 그것의 비용 종류에 AIME에 베스트
GPT-OSS-120B / 20B128K의$0.03 / $0.30첫 번째 개방형 모델, Apache 2.0

주요 기능: 응답 API의 대리인 SDK, Structured 산출, 호출하는 기능, 신속한 캐싱 (90% 할인), 배치 API (50% 할인), MCP 지원. 플랫폼 Docs

주요 특징설정하기가격 (1M 토큰 당 입력 / 출력)주요 특징
Claude Opus 4.61M (베타)$5 / $25가장 강력한, 최첨단 코딩 및 에이전트 작업
Claude Sonnet 4.5200K의$3 / $15최고의 코딩 모델, 61.4% OSWorld (컴퓨터 사용)
Claude Haiku 4.5200K의빠른 층주변, 빠른 모델 클래스
Claude Opus 4 / Sonnet 4200K의$15/$75 (오푸스)Opus: 72.5% SWE-bench, Sonnet 4 파워 GitHub Copilot

주요 기능 : 도구 사용, 컴퓨터 사용, MCP (여기 시작), 신속한 캐싱, Claude Code CLI, AWS Bedrock 및 Google Vertex AI에서 사용할 수 있습니다. API 문서

주요 특징설정하기가격 (1M 토큰 당 입력 / 출력)주요 특징
Gemini 3 Pro Preview1시간$2 / $12대부분의 지능형 Google 모델, 2B +로 배포 사용자 정의
Gemini 2.5 Pro1시간$1.25 / $10코딩 / 시약 작업을위한 최고의, 생각 모델
Gemini 2.5 Flash / Flash-Lite1시간$0.30/$1.50 · $0.10/$0.40가격-성능 리더

주요 기능: Thinking (모든 2.5+ 모델), 구글 검색 접지, 코드 실행, 라이브 API (실시간 오디오 / 비디오), 컨텍스트 캐싱. Google AI 스튜디오

주요 특징회사연혁설정하기주요 특징
Llama 4 Scout109B MoE / 17B 활성10 분적합 단일 H100, 다중화, 개방 중량
Llama 4 Maverick400B MoE / 17B 활성, 128 전문가1시간GPT-4o, 개방 중량
Llama 3.3 70B팟캐스트128K의경기 라마 3.1 405B

25+ 클라우드 파트너, Hugging Face 및 Inference APIs에서 사용할 수 있습니다. 스낵 바

회사 소개이름 *팟캐스트
Mistral AIMistral 대형 3 (675B MoE), Devstral 2, Ministral 3. Apache 2.0.Website
DeepSeekV3.2 (671B MoE), R1 (지역, MIT 라이센스). 1M 토큰 당 $0.15/$0.75.Website
xAI (Grok)Grok 4.1 빠른: 2M 컨텍스트, 1M 토큰 당 $0.20/$0.50.Website
Cohere명령 A (111B, 256K 컨텍스트), Embed v4, Rerank 4.0. RAG에서 Excels.Website
Together AI200+는 sub-100ms latency를 가진 모형을 엽니다.Website
Groq~300+ 토큰/초회를 가진 LPU 기계설비.Website
Fireworks AIHIPAA + SOC2 준수와 빠른 출현.Website
OpenRouter모든 공급자에게서 300+ 모형을 위한 자격이 없는 API.Website
Cerebras최고의 총 응답 시간을 가진 웨이퍼 가늠자 칩.Website
Perplexity AI인용을 가진 Search-augmented API.Website
Amazon BedrockClaude, Llama, Mistral, Cohere와 관리 된 멀티 모델 서비스.Website
Hugging Face InferenceAPI를 통해 모델을 엽니 다.Website

💾

이름 *이름 *팟캐스트
Chatbot Arena / LM ArenaElo-rated 쌍방향 LLM 비교를 위한 6M+ 사용자 투표. 인간적인 선호도를 위한 De facto 기준.Website
MMLU-Pro14개 도메인의 12,000+ 대학원 수준의 질문. NeurIPS 2024 스포트라이트.GitHub
GPQA448 “Google-proof” STEM 질문; 비 폭발 검증자는 단지 34% 달성.arXiv
SWE-bench Verified실제 GitHub 문제 해결을 위한 Human-validated 500-task subset.Website
SWE-bench Pro1,865 작업 41 전문 저장소; 최고의 모델 점수 만 ~23%.Leaderboard
Humanity’s Last Exam (HLE)2,500명의 전문가가 질문; 최고 AI는 1030%만 점수를 매깁니다.Website
BigCodeBench1,140 7 영역에서 코딩 작업; AI는 ~35.5% 대를 달성합니다. 97% 인간 성공.Leaderboard
LiveBench자주 묻는 질문(FAQ)Paper
FrontierMath연구 수준 수학; AI는 문제의 단지 ~2%를 해결합니다.연구분야
ARC-AGI v2측정 유체 인텔리전스를 초래합니다.연구분야
IFEvalformatting/content constraints에 대한 지침 따르는 평가.arXiv
MLE-benchKaggle-style 작업을 통해 OpenAI의 ML 엔지니어링 평가.GitHub
PaperBench20 ICML 2024 종이를 스크래치에서 복제하는 AI의 능력을 평가합니다.GitHub
이름 *이름 *팟캐스트
Hugging Face Open LLM Leaderboard v2MMLU-Pro, GPQA, IFEval, MATH에 개방형 모델.Leaderboard
Artificial Analysis Intelligence Index v3총 10개의 평가.Website
SEAL by Scale AIHosts SWE-bench Pro 및 에이전트 평가.Leaderboard
이름 *이름 *팟캐스트
P3 (Public Pool of Prompts)T0 및 유사한 모델을 훈련하는 데 사용되는 270 + NLP 작업을위한 신속한 템플릿.HuggingFace
System Prompts Dataset에이전트 워크플로우에 대한 944 시스템 프롬프트 템플릿 (Daniel Rosehill, 8월 2025).HuggingFace
OpenAssistant Conversations (OASST)161,443 메시지 35 언어와 461,292 품질 평가.HuggingFace
UltraChat / UltraFeedback고급 교육을위한 대규모 합성 교육 및 선호 데이터 세트.Hugging 얼굴
SoftAge Prompt Engineering Dataset1,000개의 다양한 프롬프트 성능을 벤치마킹하기 위한 10개의 카테고리를 통해 프롬프트합니다.Hugging 얼굴
Text Transformation Prompt Library텍스트 변환 프롬프트의 종합 컬렉션 (May 2025).Hugging 얼굴
Writing Prompts~300K 인간 - 쓰기 이야기는 r/WritingPrompts에서 프롬프트와 페어링.Kaggle
Midjourney Prompts텍스트 프롬프트 및 이미지 URL은 MidJourney의 공개 Discord에서 긁혔습니다.HuggingFace
CodeAlpaca-20k20,000의 프로그램 지시 산출 쌍.HuggingFace
ProPEX-RAGRAG 워크플로우에서 신속한 최적화를 위한 Dataset.Hugging 얼굴
NanoBanana Trending Prompts1,000+ curated AI 이미지는 X/Twitter에서, 참여에 의해 순위를 매깁니다.GitHub

Red Teaming 및 Adversarial 데이터 세트

섹션 제목: “Red Teaming 및 Adversarial 데이터 세트”
이름 *이름 *팟캐스트
HarmBench510 표준, 컨텍스트, 저작권 및 다중 카테고리의 유해한 행동.Website
JailbreakBench100개의 프롬프트로 탈옥을 위한 견고 벤치 마크를 엽니다.연구분야
AgentHarm110 악의적 인 에이전트 작업 11 해 범주.arXiv
DecodingTrust243,877 프롬프트는 8개의 관점에 걸쳐 신뢰를 평가합니다.연구분야
SafetyPrompts.comAggregator 추적 50+ 안전/빨간선 데이터셋.Website

🧠

주요 특징회사 소개설정하기핵심 힘
GPT-5.2오시는 길400K의일반 정보, 100% AIME 2025
Claude Opus 4.6인기 카테고리1M (베타)코딩, 에이전트 작업, 장시간 생각
Gemini 3 Pro구글 +1시간#1 LMArena (~1500 Elo), 멀티 모달
Grok 4.1₢ 킹 사이트맵2시간#2 LMArena (1483 Elo), 낮은 복도
Mistral Large 3미스트랄 AI256K의최고의 개방 중량 (675B MoE / 41B 활성), Apache 2.0
DeepSeek-V3.2딥스카이128K의최고의 가치 (671B MoE/37B 활성), MIT 라이센스
Llama 4 Maverick·1시간비트 GPT-4o (400B MoE/17B 활성), 개방 중량
주요 특징핵심 정보
OpenAI o3 / o3-pro87.7% GPQA 다이아몬드. 기본 도구 사용.
OpenAI o4-mini시각적인 이유를 가진 그것의 비용 종류에 제일 AIME.
DeepSeek-R1 / R1-0528무게를 여십시오, RL 훈련되는. AIME 2025에 87.5%. MIT 라이센스.
QwQ (Qwen with Questions)32B reasoning 모형. 아파치 2.0. R1에 비교할 수 있습니다.
Gemini 2.5 Pro/Flash (Thinking)configurable 사고 예산을 가진 붙박이 reasoning.
Claude Extended Thinking볼록한 chain-of-thought 및 툴 사용으로 하이브리드 모드.
Phi-4 Reasoning / Plus14B 이유 모델 rivaling 훨씬 더 큰 모델. 체중 감량
GPT-OSS-120BCoT와 OpenAI의 개방 중량. o4-mini와 비교. 아파치 2.0.
주요 특징회사 소개핵심 정보
Qwen3-235B-A22B알리Flagship MoE. 강한 reasoning/code/다 언어. 아파치 2.0. HuggingFace에서 가장 다운로드 된 가족.
Gemma 3구글 +270M에서 27B. 다중 상태. 128K 컨텍스트. 140+ 언어.
OLMo 2/3알렌 AI완전 오픈 (데이터, 코드, 무게, 로그). OLMo 2 32B는 GPT-3.5를 능가합니다. Apache 2.0.
SmolLM3-3BHugging 얼굴외형 Llama-3.2-3B. 이중 형태 이유. 128K 컨텍스트.
Kimi K2문샷 AI32B 활성. 체중 감량 coding/agentic 사용을 위해 tailored.
Llama 4 Scout·109B MoE/17B 활성. 10M 토큰 컨텍스트. 적합 단 하나 H100.
주요 특징핵심 정보
Qwen3-Coder (480B-A35B)69.6% SWE-bench — 오픈 소스 코딩에 대한 이정표. 256K 컨텍스트. 아파치 2.0.
Devstral 2 (123B)72.2% SWE-bench Verified. Claude Sonnet보다 7x 더 많은 비용 효율적인.
Codestral 25.01Mistral의 코드 모델. 80+ 언어. Fill-in-the-Middle 지원.
DeepSeek-Coder-V2236B MoE / 21B 활성. 338 프로그래밍 언어.
Qwen 2.5-Coder7B / 32B. 92 프로그래밍 언어. 88.4% HumanEval. 아파치 2.0.

이 모형은 열쇠 개념을 설치하고 그러나 실제적인 사용을 위해 크게 supersed:

주요 특징회사 소개이름 *
GLM-130BTsinghua의이중 언어 영어 / 중국어 LLM (2023)
Falcon 180B사이트맵대형 개방형 모델 (2023)
Mixtral 8x7B미스트랄 AI개방형 모델을위한 Pioneered MoE 아키텍처 (2023)
GPT-NeoX-20B인기 카테고리이른 열려있는 autoregressive LLM
GPT-J-6B인기 카테고리초기 오픈 카우스 언어 모델

🔎

이름 *제품정보주요 특징팟캐스트
GPTZero99% 청구10M+ 사용자, G2에 #1 (2025). GPT-4/5, Gemini, 클로드, 라마를 탐지합니다. 무료 계층 사용 가능.Website
Originality.ai98-100 % (피어리스)지속적으로 가장 정확한 평가. AI 검출 + plagiarism + 사실 검사를 결합하십시오. $ 14.95 / 월.Website
Turnitin AI Detection미분류되지 않은 AI 텍스트의 98%+학대에서 지배. AI bypasser/humanizer 탐지 출시 (Aug 2025). 기관 라이센스.Website
Copyleaks99%+ 청구30+ 언어에서 AI를 검출하는 기업 공구. LMS 통합.Website
Winston AI주장되는 99.98%스캔된 문서를 위한 OCR, AI image/deepfake 탐지. 11 언어.Website
Pangram Labs99.3% (색깔 2025)COLING 2025 에 가장 높은 점수 공유 작업. “humanized” 텍스트에 100 % TPR. 97.7% 대담한 견고함.Website
이름 *이름 *팟캐스트
Binoculars두 개의 LLMs 사이 크로스 퍼플렉스를 사용하여 오픈 소스 연구 탐지기.arXiv
DetectGPT / Fast-DetectGPT원래 텍스트 vs. perturbations의 로그 확률을 비교하는 통계 방법.arXiv
Openai DetectorAI-written 텍스트를 나타내는 AI 클래스터 (OpenAI Detector Python wrapper)[GitHub]
Sapling AI Detector무료 브라우저 기반 검출기 (최대 2,000 숯). 몇몇 학문에 있는 97% 정확도.Website
QuillBot AI Detector무료, 가입 필요 없음.Website
Writer AI Content Detector컬러 코딩 결과를 가진 무료 도구.Website
ZeroGPT여러 학술 연구에서 평가 된 인기있는 무료 검출기.Website
이름 *이름 *팟캐스트
SynthID (Google DeepMind)statistical 토큰 샘플링을 통해 AI 텍스트, 이미지 및 오디오에 대한 워터 마크. Google 제품에 배포합니다.Website
OpenAI Text Watermarking2025 년으로 개발되었지만 여전히 실험. 연구는 fragility 관심사를 보여줍니다.회사 소개

중요한 caveat: 검출기는 100% 정확도를 주장합니다. 혼합 인간 / AI 텍스트는 가장 어려운 (50 ~ 70 % 정확도)를 감지합니다. Adversarial 견고는 넓게 변화합니다. AI 탐지 시장은 2035년까지 ~ $ 2.3B (2025)에서 $ 15B로 성장할 것으로 예상됩니다.


📖

이름 *저자(s)주요연혁1 년
Prompt Engineering for LLMs존 Berryman & 알버트 지글러오릴리2024
Prompt Engineering for Generative AI제임스 피닉스 & 마이크 테일오릴리2024
Prompt Engineering for LLMs토마스 R. Caldwell한국어2025
이름 *저자(s)주요연혁1 년
AI Engineering: Building Applications with Foundation Models칩 후엔오릴리2025
Build a Large Language Model (From Scratch)세바스티안 Raschka한국어2024
Building LLMs for ProductionLouis-François 바우처 & 루리 피터오릴리2024
LLM Engineer’s HandbookPaul Iusztin 및 Maxime Labonne뚱 베어2024
The Hundred-Page Language Models Book앤리 Burkov자기 출판2025
이름 *저자(s)주요연혁1 년
Building Applications with AI Agents마이클 Albada오릴리2025
AI Agents and Applications콜롬비아한국어2025
AI Agents in Action프로모션한국어2025
이름 *저자(s)주요연혁1 년
LLMs in ProductionChristopher Brousseau & Matthew 샤프한국어2025
Building Reliable AI Systems프로모션한국어2025
The Developer’s Playbook for LLM Security스티브 윌슨오릴리2024

👩‍🏫


📚


🎥


🤝

  • 학습 팁 — 40,000+ 회원. 가장 큰 PE Discord 과정, Hackathons, HackAPrompt 경쟁.
  • PromptsLab 디코드 - 커뮤니티
  • 주 메뉴 — 1M+ 회원. text-to-image 신속한 공유를 위한 기본 허브.
  • OpenAI 디코드 - GPTs, Sora, DALL-E 및 API에 대한 채널이있는 공식 커뮤니티.
  • Anthropic 정보 - AI 개발 협력을위한 공식 Claude 커뮤니티.
  • Hugging 얼굴 Discord - 모델 토론, 라이브러리 지원, 커뮤니티 이벤트.
  • 흐름GPT - 33K+ 회원 ChatGPT, DALL-E, Stable Diffusion, Claude에 걸쳐 100K + 프롬프트.

RM 자율 연구 및 자기 개선 에이전트

섹션 제목: “RM 자율 연구 및 자기 개선 에이전트”

자동 동기화 멋진 연구 · 마지막으로 동기화 : 2026-10-03

  • 카테고리 - 에이전트 캡처 실행 추적, 분석 실패 패턴을 추적하는 반복적 자기 개선 프레임 워크, 및 계속 반복 평가와 대상 수정 적용.
  • vukrosic/자동 연구 — Docs-only control plane for the open autonomous AI research lab — 인간 방향 및 에이전트 실행을위한 파일 기반 운영 모델.
  • uditgoenka/자동 연구 — 소프트웨어, 문서, 보안, 배송, 디버깅 및 기타 유해한 목표에 대한 재사용 가능한 루프로 자동화를 종합하는 Claude Code 기술.
  • leo-lilinxiao/codex-자동 연구 — Codex-native autoresearch 기술로 이력서 지원, 런닝, 옵션 병렬 실험 및 모드 별 워크플로우를 통해 수업.
  • junjunbong / 연구 루프 — Codex 및 Claude Code에 대한 Autoresearch-style Agent Skills with a deterministic runner, plan-hash 승인, 고립 된 Git worktrees, 권위있는 메트릭 평가 및 append-only experiment ledger.
  • Xieyulai / 스테어 — 코딩 에이전트가 훈련 코드를 편집하고 작업, scorer 및 증거가 고정되는 동안 라운드를 실행하는 준거 실험 프레임 워크.
  • 톱 페이지 — Dashboard-first Claude Code and Codex runtime for autoresearch, 튼튼한 실행, 잠금 작업 항목, 가시 ledgers, 및 검토 가능한 verdict.
  • supratikpm/gemini-자동 연구 — Gemini CLI 기술은 모든 측정 가능한 목표에 대한 연구를 종합합니다. Gemini-native: 루프 내에서 라이브 검증 소스로 접지하는 Google Search를 사용하여 —yolo —prompt 및 1M 토큰 컨텍스트를 통해 진정한 헤드리스 하룻밤 모드. 또한 .agents/skills/를 통해 Antigravity IDE에서 작동합니다.
  • davebcn87/pi-autoresearch에 대 한 — pi persistent 실험 루프, 실시간 메트릭, 자신감을 추적하고, resumable autoresearch 세션을 위한 확장 플러스 대쉬보드.
  • drivelineresearch/autoresearch-claude 부호 — Claude Code 플러그인/스킬 포트 pi-autoresearch, 깨끗한 실험 루프 워크플로우와 콘크리트 생물역학 사례 연구.
  • Greyhaven-ai/자동 텍스트 — 반복된 대리인 개선을 위한 닫히 반복 통제 비행기, 평가와 더불어, 지속적인 지식, 단계로 된 검증 및 더 싼 국부적으로 런타임으로 선택적인 증류.
  • 사이트맵 - AI 코딩 에이전트를위한 로컬 복고풍 루프 : 세션 추적을 캡처하고 제안으로 반복 마찰을 회전하고 실험으로 해결 된 수정을 추적합니다.
  • jmilinovich/골드 md — autoresearch를 GOAL.md 대리인이 낙관할 수 있는 전에 measurable 적당 기능을 첫째로 건설해야 하는 repos를 위한 본.
  • 잼-s-tayler/lazy-developer - 엔진으로 GOAL.md를 사용하여 최적화 목표 (복사, 테스트 속도, 빌드 속도, 복잡성, LOC, 성능)의 우선 순위를 통해 자율 조사를 관용하는 Claude Code 기술. 독립적이고 랄프 모드 멀티 인스턴스 실행을 지원합니다.
  • mutable-state-inc/자동화 집에서 - 실험 청구를 추가, 공유 최고의 구성 동기화, hypothesis 교환 및 많은 단일 GPU 에이전트를 통해 swarm-style 조정을 추가하는 업스트림 자동 연구의 협업 포크.
  • zkarimi22/autoresearch-anything에 - autoresearch를 일반화 어떤 measurable 미터 - 시스템 프롬프트, API 성능, 랜딩 페이지, 테스트 스위트, 구성 튜닝, SQL 쿼리. “당신이 측정 할 수 있다면, 당신은 그것을 최적화 할 수 있습니다.”
  • Entrpi/자동 연구-everywhere — Cross-platform 확장은 하드웨어 구성을 자동 감지하고 루프를 시작합니다. autoresearch의 “glue and generalization”반.
  • ShengranHu/다스 — Agentic Systems의 자동화 설계 - ICLR 2025. JavaScript licenses API 웹 사이트
  • MaximeRobeyns/각자_더 보기_코딩_제품정보 — 아프리카: 자체 개선 코딩 자체 codebase를 편집하는 에이전트. ICLR 2025 작업장 종이 코딩 벤치 마크에 비계 수준의 자기 개선을 민주화.
  • peterskoett/self-improving 시약 — 반사 및 메타 러닝 사이클을 가진 대체 자기 추진 에이전트 아키텍처.
  • metauto-ai/HGM에 의하여 — Huxley-Gödel 기계 코딩 에이전트에 대한 - 메타 레벨 최적화를 통해 SWE-Bnch 성능에 자체 개선을 적용합니다.
  • gepa-ai/게파 — GEPA (Genetic-Pareto) — ICLR 2026 구두. 벤치 마크에 RL (GRPO)를 초과하는 반사적 신속한 진화. 자연적인 언어 반사를 사용하여 어떤 미터에 대하여 어떤 textual 모수든지 낙관합니다.
  • 이자카야/EvoSkill — 코딩 에이전트에 대한 자동화 된 기술 발견 : Claude Code, Codex CLI, OpenCode, OpenHands 및 Goose에 대한 지원과 벤치 마크에 대한 실패 트레이서에서 재사용 가능한 기술 및 프롬프트를 진화.
  • MrTsepa/자동차 — GEPA-inspired autoresearch for self-play: mutate code 전략, Elo/Bradley-Terry와 함께 헤드에 대한 평가, Pareto 프론트에서 지점. Agent는 타겟 mutations에 매치 추적을 읽습니다. Claude Code 기술로 작동합니다.
  • HKUDS / 클로팀 — autoresearch에 대한 에이전트 swarm 인텔리전스 — spawns 병렬 GPU 연구 방향, 에이전트 전반에 걸쳐 작업을 배포, 결과 집계.
  • 오케스트라 연구/AI-Research-SKILLs - 2 루프 아키텍처 (안심 최적화 + 외부 합성)로 autoresearch Orchestration를 포함한 종합 기술 라이브러리.
  • WecoAI/아데ml — 아오이: 트리 연구 ML 엔지니어링 에이전트는 자율적으로 모델 성능 향상을 통해 그것의 코드 생성 및 평가.
  • 카테고리 — 채용정보: 관찰성, 실험 추적, 관리 실행을 가진 AIDE를 위한 클라우드 플랫폼 - 생산에 autoresearch 루프를 가져옵니다.
  • 목표랩/AutoResearchClaw — End-to-end 연구 파이프라인은 문학 검토, 실험, 분석, 동료 검토 및 종이 초안으로 주제를 전환합니다. autoresearch보다 더 넓지만 명확하게 동일한 선량에 있습니다.
  • OpenLAIR/드롭 클로 — 연속적인 아이디어에 종이 파이프라인과 통합된 autoresearch 공구 팩을 가진 Open-source 연구 작업 공간.
  • OpenRaiser/Nano연구 — 실험을 계획하고, 코드를 생성하고, 로컬 또는 SLURM에서 작업을 실행하고, 실제 결과를 분석하고, 그 출력에 근거를 둔 논문을 작성합니다.
  • 카테고리 — ARK (자동 연구 키트): 아이디어 + 장소 → 제프 라인 오케스트라 6 에이전트 - 제안 분석, 문학 검색, Slurm 실험, LaTeX 초안, iterative 동료 검토. CLI, 웹 대시보드 또는 Telegram을 통해 제어됩니다.
  • wanshuiyin/자동 claude 부호 연구에서 잠 — Claude Code 및 기타 에이전트에 대한 Markdown-first 연구 워크플로우는 자율적인 문학 검토, 실험, 종이 반복 및 크로스 모델의 critique에 중심.
  • skyllwt/자동 - Claude Code에 내장 된 Wiki-centric 풀 라이프 사이클 연구 플랫폼, Karpathy의 LLM-Wiki 비전을 실현. 20 + 기술 전체 루프를 커버: ingest → ideate → 소설 검사 → 실험 디자인 / 실행 / eval → 종이 쓰기. 연구 상태는 대화 형 그래프와 구조화된 지식 위키에 살고 있습니다.
  • Sibyl-Research-Team/AutoResearch-Sibyl시스템 — Claude Code에 내장 된 완전 자율 AI 과학자, 명시된 AutoResearch 선량, 다중 시약 연구 반복, GPU 실험, 자기 진화 외부 루프.
  • wjc2830/Easy AutoResearch-for-DeepLearning를 위해 — 자동 연구 스타일, 6개의 역할, 버전 실험 및 증거 검사된 완료를 통해 인간의 변화된 딥러닝 루프를 실행하는 클로드 코드 기술.
  • eimenhmdt / 자동 연구 - 과학적 워크플로우 자동화를 위한 초기 오픈 소스 패키지, 현재는 더 넓은 자율적인 연구에 대한 야심을 가진 문학적 검토 생성에 집중했습니다.
  • 하이퍼스페이스ai/agi — Distributed, 자율 에이전트가 실험을 실행하는 피어 투 피어 연구 네트워크, gossip finds, CRDT 리더 보드 유지, 여러 연구 영역에서 GitHub에 아카이브 결과.
  • 인간존중-Society/CORAL — 한국어: 열린 발견을위한 자율 멀티 시약 진화 (Autonomous multi-agent 진화)arXiv:2604.01658). 공유 영구 기억, 비동기 실행 및 심박수 기반 개입을 가진 장기적인 대리인; 10 math/algorithmic/systems 일에 SOTA.
  • SakanaAI/AI 과학자 — AI 과학자: 완전 자동 과학적 발견을위한 최초의 종합 시스템. 아이디어 생성에서 최소한의 인간 감독과 종이 쓰기.
  • SakanaAI/AI 과학자 V2 — Agentic tree search를 통해 작업장 수준의 자동화된 과학적 발견. v1에서 템플릿 의존성을 제거, 연구 영역 전반에 걸쳐 일반화.
  • AweAI-Team/아이 과학자 — 아이 과학자: 흥행정과 File-as-Bus coordination-workspace 파일이 기록의 튼튼한 시스템으로 동작합니다. 자율주행물(PaperBench) 및 경쟁형 MLE-Bench의 반복 루프를 고정 계산/시간 예산에 따라 구동한다. (스카이프 8.49.0.49)
  • HKUDS/AI 연구자 — NeurIPS 2025 종이. Full end-to-end 연구 자동화: hypothesis → 실험 → manuscript → 동료 검토. 생산 버전 at novix. 과학.
  • openags/자동 연구 — 공지사항: lit review, hypothesis generation, experiments, manuscript Writing, 그리고 동료 검토를 통해 AI Agent 팀에 합류했습니다.
  • SamuelSchmidgall/AgentLaboratory에 대하여 — 최종 자율 연구 워크플로우: 아이디어 → 문학 검토 → 실험 → 보고서. 자율적이고 공동 조종 모드를 모두 지원합니다.
  • 에이전트Rxiv — Collaborative autonomous research framework where Agent 실험실은 다른 작업에 맞게 사전 인쇄 서버를 공유합니다.
  • 전체메뉴 — LLMs를 가진 과학적인 문학에 이차적인 연구 아이디어 발생. 멀티 시약 리뷰 및 피드백 루프.
  • 듀-nlp-lab/MLR-Copilot — Autonomous ML 연구 프레임 워크 — 아이디어 생성, 실험 구현, 결과 분석.
  • MASWorks/ML 일관성 — 자율 ML 엔지니어링 LLM 에이전트를 강화. 시험 및 오류에서 모델 성능을 개선합니다.
  • PouriaRouzrokh/레이테Review — 저코드 Python 패키지 자동화된 체계적인 문학 리뷰 AI-powered 대리인을 통해.
  • 리틀릭스 — RAG를 사용하여 AI-powered 문학 검토 조수, 학업 쓰기에서 잘 구조화 된 관련 작업 섹션.
  • 학회소개 — 3단계 연구 파이프라인: 문학 검토 → 실험 → 보고서 쓰기, 각 단계에 대한 전문 에이전트와.
  • happyhappy-jun / 쓰기 중심 자동 연구 — Autoresearch-style 마구는 첫번째 분에서 제출 가능한 종이를 유지하고 그 초안에서 주장에서 모든 실험을 구동, 반복 수정 → 측정 → 확인 → 개정. 1위 Ralphthon@ICML 2026년 autonomous-research 해커톤.
  • AutoResearch 공장/곤 — 1개의 코너스톤 원리에 내장된 End-to-end 연구 오케스트라터, Prompt Economy (reusable loops, not one-off prompts), 5개의 지원 규칙; 10+ 분야의 과학자/코더/auditor 루프를 실행하고, autoresearch와 같은 재사용 가능한 루프 선량과 전체 연구 프로그램에 확장.
  • gianfrancopiana/openclaw-자동 연구 — OpenClaw 항구의 pi-autoresearch; 통계적 신뢰 득점과 함께 모든 최적화 대상에 대한 자율 실험 루프.
  • miolini / 자동 연구 - macos — Apple Silicon / MPS의 업스트림 자동 연구에 적합한 macOS 포크를 널리 채택하여 원래 루프 모양을 보존합니다.
  • trevin-creator/자동 연구 mlx — MLX-native Apple 실리콘 포트는 상류 고정 판결을 유지 val_bpb PyTorch/CUDA 의존성을 완전히 제거하면서 루프.
  • jsegov/autoresearch-win-rtx에 대 한 — Windows-native RTX fork는 명시된 VRAM 바닥과 실제 데스크톱 설정 경로와 함께 소비자 NVIDIA GPU에 초점을 맞추고 있습니다.
  • iii-hq/n-자동 연구 — Multi-GPU Autoresearch Infrastructure with Structured experiment tracking, 적응 검색 전략, 충돌 복구, 그리고 클래식 주변 쿼리 가능한 관현관 train.py 루프.
  • lucasgelfond/autoresearch 웹 사이트에 - 에이전트가 훈련 코드를 생성 할 수있는 브라우저 / WebGPU 포트, 실험을 실행하고, 파이썬 설치없이 루프로 다시 피드.
  • tonitangpotato/자동 연구 효소 — 포크와 persistent 인식 기억 — 개량한 실험 연속성에 대한 Cross-session 지식의 주파수 무게를 달았습니다.
  • Colab/Kaggle T4 항구 — 무료 T4 GPU (Google Colab / Kaggle)에 대한 자동 조사를 0 비용과 0 로컬 설정. 중요한 변화: 섬광 주의 3 → PyTorch SDPA는, H100 전용 커널 의존도를 제거합니다.
  • ArmanJR-Lab / 자동 연구 - Jetson AGX Orin 포트 주요연혁 — “creative Director”로 행동하는 Go Binary는 소설 (arxiv Papers + DeepSeek Reasoner)를 로컬 minima를 탈출하기 위해 반복합니다. 멀티-experiment 비교(baseline vs Director-guided)를 포함한 상세한 섀시 분석.
  • mattprusak/autoresearch-genealogy에 관하여 - 구조화된 프롬프트, 아카이브 가이드, 소스 체크 및 vault 워크플로우를 사용하여 유전학에 대한 자동 연구 패턴을 적용하여 가족의 연구를 확장하고 검증합니다.
  • ArchishmanSengupta / 자동 송장 — Vapi, Smallest AI 및 ElevenLabs를 통해 음성 AI 에이전트를 Harden로 편집합니다.
  • chrisworsey55/아틀라스-gic — autoresearch keep-or-revert loop to trading Agent, 모델 손실 대신 날카로운 비율에 대한 신속한 및 포트폴리오 관현을 최적화.
  • 현재-AI/autokernel - GPU 커널 최적화에 autoresearch 루프를 적용 : 프로필 병목, 하나의 커널, 벤치 마크를 편집, 유지 또는 반전, 반복.
  • ElliotXie/자동차 - CPU 측 과학 소프트웨어에 autoresearch keep-or-revert 루프를 적용하는 멀티 시약 프레임 워크 : 대상 기능을 프로파일, 원래 출력을 보존하는 동안 하나의 최적화 후보를 생성, 반복.
  • 대리인 분석/autoresearch-growth - 분석 스냅 샷을 사용하여 분석 스냅 샷 및 측정 실험 결과를 사용하여 랜딩 페이지 위치 및 A / B 테스트 후보에 대한 평가를 제공합니다.
  • Rkcr7/자동 연구 스도쿠 — AI Agent Iteratively rewrites and benchmarks a Rust sudoku Solr, 궁극적으로 하드 벤치 마크 세트에 인간의 내장 된 해결사를 선도하는 자동 연구 워크플로우를 강화했습니다.
  • 정프/autospec — Natural-language 비즈니스 규칙을 읽고 자율적으로 스프링 부트 서비스를 구축합니다. Gradle 빌드 + JUnit XML을 준수합니다. 119-line skeleton에서 5 사이클의 950 라인.
  • vlasenkoalexey/tpu의_- 연혁_자동 연구_한국어 - v6e 하드웨어에서 autoresearch keep-or-revert loop을 TPU 모델 성능 (MFU / token-per-sec)에 적용하십시오. XProf MCP 서버를 통해 각 작업을 프로파일링하고 실험 당 하나의 모델 코드 변경을 만들고 측정 된 MFU에 대한 반전을 유지합니다. 도메인 지식과 원예 최적화 추적을위한 Karpathy-style LLM wiki와 루프를 쌍; JAX와 토치사 레인의 Llama3-8B 및 Qwen3-8B 사례 연구를 포함합니다.
  • 스냅 stanford/MLAgentBench — ML 실험 작업에서 AI 에이전트를 평가하기위한 벤치 마크 스위트. CIFAR-10에서 BabyLM에 13 작업.
  • 오픈AI/mle-bench — OpenAI의 벤치 마크는 ML 엔지니어링에서 잘 AI 에이전트가 수행하는 방법을 측정합니다.
  • 첸후이/mlrbench — MLR-Bench: 오픈 엔드 ML 연구에 AI 에이전트를 평가. NeurIPS/ICLR/ICML 작업장에서 201 작업.
  • gersteinlab/ML 벤치 — 저장소 레벨 코드에서 ML 작업에 대한 LLM 및 에이전트를 평가합니다.
  • 채용공고 — LLM-as-Agent 평가를 위한 포괄적인 벤치 마크는 8개의 명백한 환경의 맞은편에 있습니다. ICLR 2024년

우리는이 목록에 기여를 환영합니다! 기여하기 전에, 우리의 검토 순간을 공지사항. 이 가이드라인은 당신의 기여가 우리의 목표와 일치하고 질과 relevance를 위한 우리의 기준을 만나는 것을 도울 것입니다.

우리가 찾고있는 것 :

  • 새로운 고품질 종이, 도구, 또는 왜 그들은 중요 한 설명과 리소스
  • 기존의 항목에 업데이트 (브론 링크, 입력 된 정보)
  • 스타 카운트, 가격, 또는 모델 세부 사항에 대한 수정
  • 번역 및 접근성 개선

품질 규격:

  • 모든 도구는 적극적으로 유지해야합니다 (마지막 6 개월 이내에 업데이트 됨)
  • 종이는 동료 검토 된 장소에서 있어야하거나 중요한 커뮤니티 채택
  • Datasets는 공개적으로 접근되어야 합니다
  • 리소스가 가치있는 이유를 설명하는 한 줄의 설명이 포함되어 있습니다.

이 프로젝트에 기여하는 것에 관심을 가져 주셔서 감사합니다!


관련 기사 프로젝트 · 스타 이 repo 당신이 그것을 유용하게 발견하면!

HagiCode

HagiCode는 에이전트 코딩 작업 공간입니다. 풍부하고 편리한 UI 상호작용으로 계획 수립, 에이전트 실행, 프로젝트 작업을 쉽게 시작하고 따라가며 개발을 더 흥미로운 경험으로 만듭니다.

풍부하고 편리한 UI 상호작용으로 계획부터 프로젝트 작업까지 쉽게 따라갈 수 있습니다.

HagiCode 방문문서 읽기
  • 스마트OpenSpec 워크플로는 의도를 제안, 설계, 작업을 거쳐 배포까지 이어지는 실행 가능한 경로로 바꿉니다.
  • 효율적다중 에이전트 실행으로 조사, 구현, 검토를 병렬로 진행하며 여러 저장소와 익숙한 Agent CLI를 지원합니다.
  • 흥미로운풍부하고 편리한 UI 상호작용으로 계획 수립, 에이전트 실행, 프로젝트 작업을 쉽게 시작하고 따라갈 수 있습니다.

Windows용 다운로드

Microsoft Store에서 받기모든 다운로드

아이디어를 실제로 배포되는 소프트웨어로.

HagiCode는 에이전트 코딩 작업 공간입니다. OpenSpec 워크플로로 변경을 계획하고, 다중 에이전트 실행으로 진행하며, Hero Scenario로 긴 작업의 진행 상황을 한눈에 보여 아이디어를 실제로 배포되는 소프트웨어로 만듭니다.

스마트
OpenSpec 워크플로는 의도를 제안부터 배포까지 이어지는 실행 가능한 경로로 바꿉니다.
효율적
다중 에이전트 실행으로 조사, 구현, 검토를 병렬로 진행합니다.
즐거운
편리한 UI 상호작용으로 계획, 에이전트 실행, 프로젝트 작업을 쉽게 따라갈 수 있습니다.

Awesome Site를 떠나시겠어요?

외부 웹사이트로 이동하려고 합니다. 해당 사이트의 콘텐츠와 개인정보 처리 방식을 관리하지 않습니다.

목적지

웹사이트로 계속하기