ai-orchestration
CHAPTER 38 / 59
읽기 약 2분
FUNCTION
CrewAI 실행 & 모니터링
핵심 개념
Crew 실행을 LangSmith / AgentOps / Helicone으로 추적합니다. 토큰 비용·실패율·실행 시간을 대시보드로 보고 이상 시 알림.
코드 분석
실행 모니터링1. LangSmith:os.environ['LANGCHAIN_TRACING_V2']='true'os.environ['LANGCHAIN_API_KEY']='...'→ 모든 LLM 호출이 trace로 기록2. AgentOps (CrewAI 통합):import agentopsagentops.init()→ agent 단위 metrics3. 비용 분석:per-agent token / cost 추적이상 탐지 시 Slack/Discord 알림4. 재실행:crew.kickoff_for_each( inputs_list=[...])→ 배치 실행AI 프롬프트
🤖 AI에게 잘 물어보는 법 — 모델·전략별 프롬프트
무료 모델
Gemini 2.5 Flash(무료) + Claude Sonnet 4.6(무료) + Grok 4.1(무료)
'CrewAI 실행 & 모니터링'을 무료 도구로 익히고 싶어. Google AI Studio + Anthropic Workbench 무료 크레딧 + Dify(셀프호스팅)로 LangSmith 무료 trace 실습을 0원 안에 만드는 단계별 가이드를 짜줘.
소자본 모델
Claude Sonnet 4.6 + Vercel AI SDK 5 + Supabase — 월 10~30만원
'CrewAI 실행 & 모니터링'을 월 20만원 예산으로 실서비스에 붙이고 싶어. Claude Sonnet 4.6 + Vercel AI SDK 5 + Supabase 조합으로 Sonnet 4.6 + AgentOps production 대시보드을 만드는 예제와 월 비용 분배를 짜줘.
프로덕션 모델
Claude Opus 4.7 + LangGraph + MCP + LangSmith — 월 100만원+
'CrewAI 실행 & 모니터링'을 production 규모로 설계해줘. LangGraph + Claude Opus 4.7 + MCP + LangSmith로 Opus 4.7 + Helicone + Sentry 통합 모니터링을 월 100만원+ 예산 기준으로 그려줘.
스택 프롬프트
0원 → $200/mo → $1000/mo 단계별 스택 비교
'CrewAI 실행 & 모니터링' 3단계 스택 비교: Level 1($0, Dify+HF+무료 크레딧) → Level 2($200/mo, Sonnet 4.6+Vercel AI SDK+Supabase) → Level 3($1000/mo, LangGraph+Opus 4.7+MCP). 각 레벨에서 만들 수 있는 산출물과 한계 포함.
⭐ 이것만 기억하세요
CrewAI 실행 & 모니터링은 이 3가지만 확실히 잡으세요
1.관찰 없이 운영하면 어느 agent에서 비용·실패가 발생하는지 파악할 수 없습니다
2.LangSmith(LLM 호출 trace) + AgentOps(agent metrics) 2종을 켜는 것만으로도 90%의 운영 문제가 가시화됩니다
3.다음 챕터에서 Crew 디버깅 기법으로 실제 실패 사례를 분석합니다
공유하기
진행도 38 / 59