3년 전, 나는 구글의 첫 AI 적용 시도 중 하나인 'Help Me Write'를 사용하기 시작했다. 이 글쓰기 도우미는 구글 문서나 Gmail 같은 서비스에 내장되어 있으며, 처음부터 끝까지 이메일을 작성해줬다 - 내가 할 일은 승인 버튼을 누르는 것뿐이었다. Help Me Write를 좋아하지만, 그 기반이 되는 Gemini LLM이 구글의 독립형 AI 앱을 통해 더 나은 결과를 제공한다는 것을 알아냈다.

Gemini에 내 이메일 스레드를 제공해 답장을 작성하게 하고 있었기 때문에, Claude의 성능도 비교해보기로 했다. 일주일간 테스트한 결과, 놀랍게도 Anthropic의 도구가 내가 쓰는 방식과 매우 유사한 메시지를 작성했다.

이 경쟁 LLM들은 여러 모델을 제공하지만, 나는 빠른 응답 시간을 위해 Gemini 3.5 Flash를 Pro 계정으로 사용하고 있다. 하지만 무료로도 사용 가능하며, 사용 제한도 넉넉하다. 중요한 점은, Google Labs의 'Personal Intelligence' 토글을 켰다는 것이다 (Attachments > More Tools > Personal Intelligence). 이 기능은 이전 Gemini 채팅에서 스타일적 단서와 정보를 가져와 현재 응답에 개인적인 터치를 더한다. Anthropic의 도구는 무료 Claude Sonnet 4.6 모델을 사용했고, Effort는 High로 설정했다. 이는 Gemini Flash의 속도와 사실적 정확성 사이의 균형을 잡아준다. 또한, 프롬프트를 음성 입력으로 작성하는데, Claude의 음성-텍스트 엔진은 Gemini보다 훨씬 뛰어나다, 특히 억양이 있는 경우에.

또한: Gemini Flows로 Gmail을 정리하게 했는데, 효과적으로 받은 편지함을 필터링했다 (한 가지 교활한 조건이 있지만). 각 이메일에 대해, 초안의 목적을 설명한 후 두 가지 표준 지침을 따른다. 이는 결과를 일관되게 개인화하고 토큰 낭비를 방지한다. 첫째, AI에게 즉시 응답하지 말고 초기 프롬프트에 없는 세부 사항을 묻는 후속 질문을 자제하라고 요청한다. 둘째, LLM에게 이메일 스레드에서 내 어조를 모방하라고 명령한다. 이 지침이 없으면 실용적인 응답을 기대하기 어렵다.

예를 들어, 내가 리뷰할 제품의 배송 지연과 누락된 추적 번호에 대한 후속 이메일을 들어보자. "다음 이메일 스레드에 대한 응답을 작성하고, 배송 추적 번호를 다시 요청하세요. 7월 중순에 여행을 갈 예정이므로, 여행 전에 리뷰를 완료할 수 있도록 일정을 잡아야 한다고 설명하세요. 즉시 응답하지 마세요. 적절한 응답을 작성하기 위해 질문이 있으면 하세요. 스레드에서 보이는 반격식 어조를 모방하세요." <이메일 체인을 PDF로 첨부>

처음에 Gemini는 요청에 대해 두 가지 후속 질문을 한다. 첫 번째는 내가 언급하지 않은 유용한 세부 사항 - 리뷰 완료 목표 날짜 - 를 묻는다. 안타깝게도, Gemini의 두 번째 질문은 수신자가 내 마지막 이메일 이후에 답장했는지 묻지만, 왜 답변이 필요한지 설명하지 않는다. 제공된 정보를 의심하는 것은 중복된 느낌이다. 왜냐하면 내가 분명히 최신 응답을 포함했을 것이기 때문이며, 그에 대한 설명도 모호하다. 이메일 스레드에는 추적 번호에 대한 이전 요청이 포함되어 있지만, AI는 이를 무시했다. "그가 추적 번호 요청에 답장했다면, 그의 최신 요점을 직접 다루기 위해 그의 말을 아는 것이 도움이 됩니다. 그가 답장하지 않았고 당신이 다시 후속 조치를 취하는 경우, 부드러운 알림으로 구성하겠습니다."

또한: 당신의 Gmail이 AI로 변신 중입니다 - 기대할 점과 시기는 다음과 같습니다. Claude도 비슷하게 수행하지만, 세 가지 질문을 한다. 구글의 도구가 리뷰 완료 날짜를 물은 반면, Anthropic은 구체적인 여행 날짜를 요청했는데, 이는 수신자에게 더 관련성 있고 공감 가는 정보이다. 제품을 기다리는 동안 완료 날짜를 합리적으로 약속할 수 없지만, 여행 날짜는 고정된 상수다. 두 번째 질문은 Claude가 내 프롬프트를 더 잘 '이해'한다는 것을 보여준다. 직접적으로 내가 얼마나 강경하게 나가고 싶은지 묻는다. 설명은 내 응답이 이메일의 어조에 영향을 미칠 것이라고 명시하며, Gemini의 모호함과 대조된다. 세 번째로, Claude는