AI에게 가르치려 하지 마세요. 먼저 틀리게 두고, 고친 이유를 한 줄씩 남기세요. 정리가 끝나야 시작하는 게 아니라, 시작해야 정리가 돼요.
"자료가 정리되면 시작하시죠"
예전에 첫 미팅에서 이렇게 말씀드렸어요.
"자료가 정리되면 시작하시죠."
맞는 말 같았어요. AI가 읽을 게 있어야 일을 하니까요. 그런데 그 정리가 영영 안 끝나더라고요.
한 달 뒤에 여쭤보면 "아직 못 했어요"라고 하세요. 게으르셔서가 아니에요. 바쁘시니까요. 오늘 나가야 할 발주가 있고, 전화가 오고, 사람이 그만둬요. 그 사이에 "언젠가 필요할 문서"는 계속 뒤로 밀려요.
몇 번 반복되고 나서야 제 말이 틀렸다는 걸 알았어요.
정리는 왜 안 끝날까요
정리가 안 끝나는 이유는 시간이 없어서만은 아니에요. 뭘 적어야 할지 모르기 때문이에요.
저는 고객사에 업무를 넘기기 전에 네 가지를 적어보시라고 해요.
- 언제 하나요 — 매일 아침? 주문이 들어오면? 누가 물어보면?
- 뭘 보고 하나요 — 어떤 화면, 어떤 파일, 어떤 메시지
- 어떤 순서로 하나요
- 어떻게 하면 잘못된 건가요
1번부터 3번까지는 대체로 적으세요. 매일 하는 일이니까요.
4번에서 다들 멈춰요.
"어떻게 하면 잘못된 건가요"는 한 번도 말로 해본 적이 없는 항목이에요. 20년을 그 일을 해온 분도 못 적어요. 틀린 게 뭔지 모르는 게 아니라, 틀린 걸 볼 때만 알기 때문이에요.
잘못된 결과는 머리로 떠올리는 게 아니라 눈으로 봐야 나와요.
순서를 뒤집었어요
그래서 순서를 바꿨어요.
전에는 이랬어요.
다 적는다 → 가르친다 → 시킨다
첫 칸에서 안 끝나요. 앞서 말씀드린 그 이유로요.
지금은 이렇게 해요.
일단 시킨다 → 틀린다 → 고치면서 적힌다
준비가 덜 된 채로 AI에게 일을 시켜요. 당연히 틀려요. 틀려야 해요. 그 틀린 결과를 사람이 고치는 순간, 비로소 4번이 나와요.
"아, 이건 이렇게 하면 안 되는 거였지."
이 문장이 나오는 순간이 기록이 생기는 순간이에요. 정리해야 해서 적는 게 아니라, 틀린 걸 봐서 적는 거예요.
사람이 손으로 쓴 것만 성능이 올랐어요
이게 저희 경험만은 아니에요.
스위스 취리히 공대(ETH) 연구팀이 AI 에이전트에게 규칙 파일을 주고 성능을 재봤어요. 결과가 갈렸어요.
- AI가 스스로 정리한 규칙을 줬을 때 — 성능이 오히려 떨어졌어요(약 2%). 비용은 20% 늘었고요.
- 사람이 손으로 적은 규칙을 줬을 때 — 4% 올랐어요.
같은 형식의 파일인데 누가 썼느냐가 결과를 갈랐어요. AI는 자기가 뭘 모르는지 몰라요. 그건 옆에서 결과를 본 사람만 알아요.
비슷한 사례가 하나 더 있어요. 개발자들이 쓰는 코드 편집기 커서(Cursor)는 AI가 알아서 기억을 쌓는 기능을 넣었다가 지웠어요. 지금은 사람이 직접 쓰는 규칙 파일로 돌아갔어요.
자동으로 쌓이는 지식은 아직 잘 안 돼요. 사람 손을 거쳐야 해요.
문제는 사람이 스스로 정확하게 적는 순간이 거의 없다는 건데, 딱 하나 있어요. AI가 자기 앞에서 틀렸을 때예요. 안 고치면 자기 일이 잘못되니까요.
고친 것 말고, 고친 이유
여기서 대부분이 한 걸음을 빠뜨려요. 고치기만 하고 넘어가요.
깃허브에서 개발자들이 AI 제안을 거절한 기록을 대규모로 분석한 연구가 있어요. 거절한 것 중 37%가 "쓸 만한데 그냥 안 쓴" 것이었어요.
싫다는 표시만으로는 이유를 알 수 없다는 뜻이에요. AI도 모르고, 나중에 그 기록을 다시 보는 사람도 몰라요. 논문의 결론이 정확해요. 받아들이거나 거절했다는 표시만으로는 불완전한 신호라는 거예요.
그래서 고칠 때 한 줄을 같이 남기셔야 해요.
"A업체 발주서는 부가세를 별도로 적어야 함. 포함으로 보내면 반려됨."
이 한 줄에는 무엇이 틀렸는지와 왜 틀렸는지가 같이 있어요. 고친 결과만 남기면 이번 건에서 끝나지만, 이유를 남기면 다음 건에도 쓰여요.
한 줄이 열 개면 교재예요
이런 한 줄이 쌓인 게 AI의 교재예요.
- "A업체 발주서는 부가세를 별도로 적어야 함. 포함으로 보내면 반려됨." — 반려당한 날 적혔어요
- "거래명세서는 카톡 말고 이메일로. 스크롤로 놓쳐서 미수금이 틀어짐." — 놓친 걸 발견한 날 적혔어요
- "자동 발주 알림은 접었음. 재고가 실물과 2–3일 어긋나서 오발주가 남." — 오발주가 한 번 나고 적혔어요
전부 사고가 한 번 난 뒤에 적힌 문장이에요. 앉아서 "우리 회사 규칙을 정리해봅시다" 해서는 절대 안 나와요.
세 번째 문장을 보시면, 안 하기로 한 결정도 기록이에요. 나중에 누가 같은 걸 또 제안했을 때 "그건 예전에 해봤는데 이래서 접었다"고 말할 수 있어요. 이게 없으면 같은 실패를 2년마다 반복해요.
오늘 해보실 것
지금 자동화를 생각하고 계신 업무가 하나 있으실 거예요. 없으시면 어떤 업무부터 맡겨야 할까를 먼저 보세요. 고르는 기준이 있어요.
그 업무를 오늘 AI에게 그냥 시켜보세요.
준비가 덜 됐어도 괜찮아요. 자료를 안 정리하셨어도 되고, 매뉴얼이 없어도 돼요. 어차피 틀릴 거고, 틀려야 해요.
결과가 나오면 고치실 텐데, 거기서 한 가지만 더 해주세요.
고친 이유를 한 줄로 적기.
메모장이든 노션이든 카톡 나에게 보내기든 상관없어요. 형식은 나중에 정리해도 돼요. 지금 중요한 건 그 순간에 적히느냐예요. 하루 지나면 왜 고쳤는지 기억이 흐려져요.
한 줄 적을 때 **"무엇을 고쳤는지"보다 "왜 그게 틀렸는지"**를 적으세요. 앞의 것은 이번 건에만 쓰이고, 뒤의 것은 다음 건에도 쓰여요.
시작해야 정리가 돼요
"자료 정리되면 시작하시죠"는 제가 틀렸던 말이에요.
정리가 끝나야 시작하는 게 아니라, 시작해야 정리가 돼요. 순서가 반대였어요.
AI가 완벽하게 일하기를 기다리다 보면 1년이 가요. 오늘 틀리게 두시면, 오늘 한 줄이 생겨요. 그 한 줄이 열 개가 되면 그때부터는 AI가 다르게 일해요.
회사에 이런 기록이 이미 흩어져 있는 경우도 많아요. 어디에 뭐가 있는지는 대표 눈에 안 보이는 자동화 거리 15개에 정리해뒀어요.
P.S. 4번을 못 적는 건 실력 부족이 아니에요. 저도 제 일을 적을 때 4번에서 제일 오래 걸려요.