AI 에이전트를 도입한 첫 2주는 운영이 흔들리는 구간이다. 도구가 잘못된 것이 아니다. 미리 정해두지 않은 것들이 많아서 매번 즉석에서 판단해야 하기 때문이다. 이 글은 그 2주 동안 가장 자주 흔들리는 지점 3가지와, 미리 결정해두면 안정화되는 항목을 정리한다.
흔들리는 지점 1: 에이전트에게 무엇을 맡길 것인가
에이전트를 켜고 나서 가장 먼저 하는 실수는 "일단 다 맡겨보기"다. 범위가 없으면 에이전트도 기준 없이 움직인다.
미리 결정해둘 것:
- 이 에이전트가 하는 일의 범위를 한 줄로 쓴다 (예: "메일 요약과 중요도 분류")
- 에이전트가 하지 않아도 되는 것도 한 줄로 쓴다 (예: "답장 발송은 내가 한다")
- 새로운 요청이 생길 때 범위에 맞는지를 먼저 확인한다
범위를 미리 정하면 에이전트에게 모호한 지시를 내릴 일이 줄어든다. 모호한 지시는 예상 밖 결과로 이어진다.
흔들리는 지점 2: 결과를 언제 확인할 것인가
에이전트가 일을 했다는 것을 언제 어떻게 알 것인가를 정하지 않으면, 결과 확인이 새로운 작업이 된다. 에이전트를 쓰면서 오히려 화면을 더 자주 열게 되는 상황이다.
미리 결정해둘 것:
- 에이전트 결과를 하루 중 정해진 시간에만 본다 (예: 오전 9시, 오후 6시)
- 즉시 확인이 필요한 결과라면 알림 채널을 따로 정한다
- 결과를 확인하지 않아도 되는 것(자동 처리)과, 확인 후 내가 판단해야 하는 것을 구분한다
확인 루틴이 없으면 에이전트가 오히려 주의를 분산시키는 도구가 된다.
흔들리는 지점 3: 에이전트가 틀렸을 때 어떻게 할 것인가
에이전트는 틀린다. 특히 처음 2주는 예상치 못한 방식으로 틀리는 경우가 많다. 이때 대응 방법을 미리 정해두지 않으면 에이전트를 믿을 수 없게 된다.
미리 결정해둘 것:
- 에이전트 결과를 외부로 보내기 전에 반드시 한 번 읽는다
- 틀린 결과를 발견했을 때 어떤 상황에서 틀렸는지를 기록한다
- 같은 종류의 실수가 2번 이상 반복되면 지시 방식을 바꾼다
기록 없이 틀릴 때마다 즉흥적으로 대응하면 같은 문제가 반복된다. 2주 안에 안정화하려면 실수 패턴을 빠르게 파악하는 것이 핵심이다.
첫 2주 안정화 체크리스트
도입 전날 이 항목을 작성해두면 2주가 달라진다.
- [ ] 에이전트 역할을 한 줄로 정의했는가?
- [ ] 에이전트가 하지 않아야 하는 것을 정했는가?
- [ ] 결과 확인 시간을 하루 일정에 넣었는가?
- [ ] 즉시 알림이 필요한 결과 유형을 정의했는가?
- [ ] 결과를 외부로 보내기 전 확인 단계가 있는가?
- [ ] 에이전트 실수를 기록할 방법을 마련했는가?
6가지 중 미리 정해두지 않은 항목이 있으면 첫 2주 안에 그 지점에서 한 번씩 흔들린다. 체크리스트는 완성 여부가 아니라 흔들릴 지점을 미리 아는 것이 목적이다.