인시던트 대응 AI 에이전트: Sentry 알림에서 승인된 롤백까지
인시던트 하나를 처음부터 끝까지 따라갑니다. 에이전트는 조사하고 제안하며, 무엇이 프로덕션에 반영될지는 당직자가 결정합니다.
· · 출처
핵심 답변
인시던트 대응 AI 에이전트는 Sentry의 새 이슈를 지켜보다가 코드와 로그를 파고들고, 자신의 브랜치에 수정안을 풀 리퀘스트로 열어 채널에 보고합니다. 읽고 조사하는 일에는 허락이 필요 없습니다. 머지, 배포, 롤백은 항상 사람이 채팅에서 정확한 값을 확인하고 승인할 때까지 기다립니다.
AI 에이전트는 인시던트 대응에 어떻게 도움이 되나요?
인시던트가 터지면 시간은 잡무에 들어갑니다. 이슈를 열고, 해당 코드를 건드린 커밋을 찾고, 로그를 읽고, 팀에 공유할 내용을 정리하는 일입니다. 이 부분을 에이전트가 맡으면 사람은 판단에 집중할 수 있습니다.
agentes.chat에서 에이전트는 팀과 같은 채널에서 일합니다. 모든 단계가 에이전트의 메시지에 표시되고, 작업 중에도 메시지를 입력할 수 있습니다. 에이전트는 그 메시지를 바로 읽고 방향을 바꾸며, 멈추라고 하면 멈춥니다. 일반적인 흐름은 다음과 같습니다.
- 알림: Sentry가 새 이슈를 기록하면 루틴이 실행되어 에이전트를 호출합니다.
- 분류: 에이전트가 오류, 스택 트레이스, 영향을 받는 릴리스를 읽고 찾은 내용을 게시합니다.
- 조사: 저장소에서 무엇이 바뀌었는지 찾고 이전 배포와 비교하며, 필요하면 다른 에이전트에게 묻습니다.
- 수정: GitHub 쓰기 권한으로 자신의 브랜치에 수정안을 작성하고 풀 리퀘스트를 엽니다.
- 결정: 수정에 시간이 걸리면 롤백을 제안합니다. 이 요청은 채널에 승인 카드로 나타납니다.
- 이후: 누군가 요청하면 Wiki에 포스트모템 초안을 쓰고 후속 작업을 등록합니다.
인시던트는 처음부터 끝까지 어떻게 진행되나요?
예시 · Acme(가상의 회사)
Acme의 결제 오류
Acme에는 #incidents 채널과 Ops 에이전트가 있습니다. 이 에이전트는 Sentry 읽기 권한, GitHub 읽기와 쓰기 권한, Linear 쓰기 권한을 가지고 있습니다. 에이전트의 루틴 하나는 Sentry에 새 이슈가 생길 때마다 실행됩니다.
오후 2시 10분에 Sentry가 checkout에서 새 오류를 기록합니다. 루틴이 에이전트를 호출하고, 에이전트는 이슈를 읽고 이렇게 게시합니다. 오류는 오후 1시 50분 배포 직후에 시작됐고, 결제 경로에 영향을 주며, 스택 트레이스는 그 배포에서 바뀐 함수를 가리킵니다.
루틴은 읽고 보고만 합니다. 당직 엔지니어가 스레드에 답합니다. “파고들어서 수정안을 제안해 줘.” 이때부터는 평범한 대화입니다. 에이전트는 저장소를 열어 커밋을 찾고, 테스트로 오류를 재현합니다. 자신의 브랜치에 수정안을 쓰고, 테스트를 돌리고, 풀 리퀘스트를 엽니다. 읽기와 자기 브랜치 작업은 이미 허용되어 있으므로 이 중 어느 것도 승인을 요청하지 않습니다.
당직자는 요약을 읽고 같은 스레드에서 수정안을 검토하는 동안 롤백할 수 있는지 묻습니다. 에이전트는 GitHub Actions의 롤백 워크플로 실행을 제안합니다. 워크플로, 환경, 대상 버전이 담긴 카드가 나타납니다. 롤백이므로 승인하려면 버튼을 길게 눌러야 합니다. 당직자가 길게 누르면 워크플로는 카드에 표시된 그대로 한 번 실행됩니다.
검토가 끝나면 당직자는 클릭 한 번으로 풀 리퀘스트 머지를 승인합니다. 그날 일과가 끝날 때 에이전트에게 포스트모템을 요청합니다. 에이전트는 타임라인을 넣어 Wiki에 포스트모템을 쓰고, 팀을 위한 Linear 이슈 두 개를 등록합니다.
에이전트가 혼자 읽을 수 있는 것은 무엇인가요?
읽기와 조사에는 승인이 필요 없습니다. 그래서 에이전트가 인시던트 초반 몇 분에 쓸모가 있습니다. 읽을 수 있는 범위는 워크스페이스에 추가한 커넥터와 에이전트마다 받는 범위에 따라 달라집니다.
- Sentry: Sentry 공식 MCP 서버로 이슈, 오류, 릴리스를 읽으며 클릭 한 번으로 연결됩니다. Sentry는 이 서버를 오류 검색, 성능 분석, 이슈 분류에 쓰는 수단으로 설명합니다[2].
- GitHub: agentes.chat GitHub App이나 OAuth로 저장소, 풀 리퀘스트, 이슈, Actions를 읽으며 저장소는 에이전트별로 고릅니다. GitHub 페이지를 참고하세요.
- 관측과 인프라: Datadog, Grafana, Cloudflare, Railway, Netlify, Supabase도 클릭 한 번으로 연결됩니다.
- 팀 컨텍스트: Wiki, Drive, 작업. 에이전트는 기본적으로 Wiki를 읽습니다.
코드를 쓰고, 테스트를 돌리고, 풀 리퀘스트를 열 때 에이전트는 워크스페이스의 컴퓨터를 사용합니다. 저장소를 복제해 자신만의 폴더에서 작업합니다. 오류 메시지, 웹 페이지, 도구 출력 같은 외부 텍스트는 신뢰할 수 없는 내용으로 표시되어 모델에 전달됩니다.
사람의 승인을 기다리는 작업은 무엇인가요?
이름이나 범위에 merge, deploy, rollback, revert_deploy, promote가 들어간 도구는 커넥터가 어떻게 말하든 항상 승인을 요청합니다. GitHub에서는 워크플로 실행도 승인을 요청합니다. Actions 실행이 배포를 할 수 있기 때문입니다.
| 작업 | 승인 요청 여부 | 승인 방법 |
|---|---|---|
| 이슈, 로그, 코드, PR 읽기 | 전혀 없음 | 필요 없음 |
| 자신의 브랜치(agentes/<agent>/…)에 푸시 | 없음, 쓰기 권한을 허용한 뒤 | 필요 없음 |
| 풀 리퀘스트 또는 Linear 이슈 열기 | 없음, 쓰기 권한을 허용한 뒤 | 필요 없음 |
| 풀 리퀘스트 머지 | 항상 | 클릭 한 번 |
| GitHub Actions 워크플로 실행 | 항상 | 길게 누르기 |
| 커넥터를 통한 배포 또는 롤백 | 항상 | 길게 누르기 |
푸시는 기본 브랜치로 가지 않고 에이전트 자신의 브랜치로만 가며, 강제 푸시와 태그는 없습니다. 승인 카드에는 정확한 작업과 값이 표시됩니다. 카드는 그 값에 묶여 있고 한 번만 실행됩니다. 24시간 안에 아무도 결정하지 않으면 만료됩니다.
결정하는 사람은 에이전트의 담당자나 워크스페이스 관리자입니다. 거절하면 그 이유가 에이전트의 교훈이 됩니다. 또 같은 대상에 다른 에이전트가 최근 30일 안에 이미 작업했다면, 에이전트는 다시 행동하기 전에 그 사실을 전달받고 이유가 있을 때만 진행합니다. 같은 서비스를 두 번 롤백하는 일을 피하는 데 도움이 됩니다. 전체 규칙은 휴먼 인 더 루프 가이드에 있습니다.
오류를 지켜보는 루틴은 어떻게 설정하나요?
루틴은 “평일 오전 9시마다”처럼 쉬운 말로 적은 일정이나 이벤트에 맞춰 에이전트를 실행합니다. 인시던트에 쓸 만한 이벤트는 Sentry의 새 이슈, GitHub 풀 리퀘스트 열림, 배포 성공입니다. 새 오류 감시, 새 PR 검토, 채널 일일 요약용 템플릿이 있습니다.
루틴은 자신만의 공간에서 조용히 실행되고 결과를 채널, 스레드, DM, Drive 중 한 곳으로 전달합니다. 루틴에는 대화보다 엄격한 규칙이 적용됩니다.
- 다른 곳에 게시하거나 사람에게 메시지를 보낼 수 없습니다.
- 연결된 앱에 쓰는 모든 작업은 사람에게 승인을 요청합니다.
- 실행이 겹치지 않으며, 실패가 반복되면 루틴이 일시 중지됩니다.
그래서 알림 루틴은 읽고 보고만 합니다. 수정과 롤백은 그 뒤에 팀원이 함께 있는 대화에서 이루어집니다. 자세한 내용은 루틴과 미션에서 볼 수 있습니다.
에이전트는 포스트모템을 어떻게 도와주나요?
Google의 SRE 책은 포스트모템을 인시던트, 그 영향, 해결을 위해 취한 조치, 원인을 적은 기록으로 정의하며, 비난 없이 쓰라고 요구합니다. 누가 잘못했는지가 아니라 기여한 원인에 초점을 맞추라는 뜻입니다[1].
에이전트는 채널에 전체 타임라인을 가지고 있습니다. 알림, 조사의 각 단계, 승인된 카드, 머지가 모두 있습니다. 누군가 요청하면 이를 메시지와 작업으로 가는 링크가 담긴 Wiki 초안으로 만듭니다. 에이전트는 사람이 요청할 때만 Wiki에 쓰므로 최종 글은 팀의 것으로 남습니다.
교훈은 에이전트의 메모리에도 들어갑니다. 수정 사항과 거절된 승인이 교훈이 되고, 반복되는 교훈은 에이전트 지침의 변경 제안이 되며, 사람이 수락하거나 거절합니다.
agentes.chat이 인시던트 중에 하지 않는 일은 무엇인가요?
- PagerDuty 커넥터가 없으며, 누구에게도 전화를 걸지 않습니다. 알림은 앱, 브라우저 알림, 데스크톱 앱(Mac, Windows, Linux), 모바일 앱(iPhone, Android)을 통해 전달됩니다.
- Slack과 Vercel 커넥터가 없습니다. 해당 업체가 직접 등록하거나 승인한 앱을 요구하기 때문입니다.
- 기존 관측 스택을 대체하지 않습니다. 에이전트는 Sentry, Datadog, Grafana를 읽을 뿐 메트릭을 수집하지 않습니다.
- 어떤 커넥터나 설정에서도 스스로 머지, 배포, 롤백하지 않습니다.
인시던트 에이전트는 어떻게 시작하나요?
- Ops 역할과 월 예산을 정해 에이전트를 만듭니다. 에이전트는 워크스페이스 소유자와 관리자만 만들 수 있습니다.
- Sentry와 GitHub를 연결합니다. 에이전트에게 Sentry 읽기 권한, 그리고 다룰 저장소의 읽기와 쓰기 권한을 줍니다.
- Sentry 새 이슈용 루틴을 만들어 인시던트 채널로 전달하게 합니다.
- 가짜 오류로 시험해 보고, 믿고 맡기기 전에 메시지에서 각 단계를 확인합니다.
agentes.chat은 오픈 베타입니다. 팀에서 이 흐름을 써 보고 싶다면 워크스페이스를 만드세요.
자주 묻는 질문
에이전트가 혼자 롤백할 수 있나요?
아니요. 배포, 롤백, 머지 도구는 항상 채팅의 승인 요청이 되며, 배포와 롤백은 버튼을 길게 눌러야 합니다. 어떤 설정으로도 바뀌지 않습니다.
PagerDuty와 함께 쓸 수 있나요?
아니요. PagerDuty는 PagerDuty에 등록된 앱을 요구하며, agentes.chat에는 PagerDuty 커넥터가 없습니다. 에이전트가 지켜보는 알림은 Sentry에서 오고, Datadog과 Grafana는 클릭 한 번으로 연결됩니다.
에이전트의 요청은 누가 승인하나요?
에이전트의 담당자나 워크스페이스 관리자입니다. 담당자는 선택 사항이며, 담당자가 없으면 관리자가 요청을 받습니다.
에이전트가 기본 브랜치를 건드릴 수 있나요?
아니요. 자신의 브랜치(agentes/<agent>/…)에만 푸시하며, 강제 푸시와 태그는 없습니다. 기본 브랜치에 반영하려면 사람이 승인한 머지가 필요합니다.
출처
링크는 2026년 10월 29일에 확인했습니다. 이 페이지에서 agentes.chat에 대해 설명한 내용은 그 시점의 제품 기준이며, 베타 기간 중 바뀔 수 있습니다.
- 1Google SRE, Postmortem Culture: Learning from Failure.
- 2Sentry, Sentry MCP Server.