[개발자 이야기] AI Agent 와 인터뷰를 하라. 계획이 가장 중요하다. 쓰레기를 넣으면 쓰레기가 나온다. (grill-me)

Plan 모드

요즘 대부분의 AI Agent 에 기본적으로 Plan 모드라는게 있습니다.

이 Plan 모드는 요구사항을 코드로 구현하기 전에 문서로 계획을 작성해줍니다.

확실히 AI 에게 그냥 시키는 것보다 문서로 한번 정리하고 만들면 더 잘만들어 준다는 것을 체감할 수 있는데요.

 

그런데 말입니다. "그럴싸 하게" 만들기는 했는데 예상치 못한 변수들이 보입니다.

예외 케이스들에 대해서 전혀 고려하지 못했고, 제가 의도한 대로 동작하지 않는 기능들도 있습니다.

왜 그럴까요? 저희는 분명 "Plan 모드" 로 스마트하게 계획을 세웠는데요?

 

사람의 머릿속에 들어있는 내용은 훨씬 복잡하고 말로 설명하기 어려울 정도로,

정리가 잘 되어있지 않고 매우 혼란스러운 상태입니다.

수 초 이내에 모든 예외 케이스들을 고려하고 완벽한 계획을 세울 수 없습니다. 분명히 구멍이 생깁니다.

이 상태로 AI 에게 일을 시켰을때 제대로 된 결과가 나올까요?

쓰레기를 넣으면 쓰레기가 나올 뿐입니다.

 

요구사항 전달의 중요성

부하 직원에게 어떤 요구사항을 전달할때 요구사항에 대해서 정확하게 전달하지 않으면

아무리 똘똘한 직원이어도 내가 원하는대로 만들어오지 못할 것입니다.

 

그러면 그럴 때마다 "아니 그게 아니라" 라고 하실건가요?

"알잘딱깔센 하게 만들어와야지 이게 뭐야" 라고 화를 내실 건가요?

 

당연히 AI 도 마찬가지입니다.

절~대로 한번에 완벽하게 만들 수 없습니다.

당신이 잠깐 생각해서 입력한 내용 가지고는 구멍 투성이인 기능을 만들 수 밖에 없는 겁니다.

 

사전 인터뷰를 해라

저희는 AI 와 충분한 사전 인터뷰를 해야합니다.

이때 사용하면 좋을 스킬이  있습니다. grill-me 입니다.

설명: 계획이나 디자인에 대해 사용자에게 끊임없이 질문하십시오. 사용자가 구축 전에 계획을 철저히 검증하고 싶어하거나, '그릴'과 같은 질문 유형을 사용할 때 유용합니다.

이 계획의 모든 측면에 대해 공통된 이해에 도달할 때까지 끊임없이 질문하십시오. 설계 트리의 각 분기를 따라가며 결정 간의 의존 관계를 하나씩 해결하십시오. 각 질문에 대한 권장 답변을 제시하십시오.
질문은 한 번에 하나씩 하고, 각 질문에 대한 답변을 기다린 후 다음 질문으로 넘어가세요. 여러 질문을 한꺼번에 하면 혼란스러울 수 있습니다.
질문에 대한 답을 코드베이스를 살펴보는 것으로 얻을 수 있다면, 코드베이스를 살펴보세요.

 

이런 비슷한 스킬들이 아주아주 많은데요. 그 중에서 단언컨데 grill-me 를 추천하는 이유는 

"정말 가볍고, 단순한데 강력하기 때문" 입니다.

이 스킬을 사용하면 AI Agent 가 프롬프트 내용에 대해서 5번, 10번, 15번, 그 이상 까지도 저에게 역질문을 합니다 .

이 역질문들은 제가 생각지도 못한 "구멍" 을 채우는 역할을 해줍니다.

또는 아는 내용이지만 이것이 맞나요? A와 B중에 정확히 무엇이 맞나요? 하고 다시 되물어보면서 질문을 "더 명확하게" 해줍니다.

이 차이는 결국에 서비스 품질로 이어집니다.

 

 

진짜 개꿀팁. (돈 안받을 테니 광고 누르고 가세요)

grill-me 는 제가 개인적으로 거의 모든 작업의 시작에 사용하는 필수 스킬이기 때문에 소개드렸습니다.

 

이건 진짜 돈 받고 풀어야하는 개꿀팁인데요

superpowers 의 brainstorming 을 먼저 수행해서 빠르게 뼈대를 잡고 그걸 기반으로 grill-me 를 돌리는걸 추천합니다.

그러고 superpowers 의 writing-a-plan 으로 넘어가서 문서 만들고 코드 구현까지 이어서 하면

진짜 왠만한 주니어 개발자들은 다 씹어먹게 결과가 나옵니다.

 

왜 자신있게 말하냐면, 저도 씹어 먹혔거든요. 제가 만든것 보다 잘 만들더라고요.

 

참고로 grill-me 는 제가 만든 것은 아니고, 맷포콕 씨를 통해 알게 되었습니다.

skills/skills/productivity/grilling/SKILL.md at main · mattpocock/skills

 

이미 있는 코드베이스를 기반으로 할 때에는 grill-with-docs사용하면 됩니다.

skills/skills/engineering/grill-with-docs/SKILL.md at main · mattpocock/skills