오픈소스 웹앱 설계 문서를 인간 작성본과 두 AI(Claude Opus 4.6, GPT-5.4) 생성본으로 비교 분석하였습니다.

인간 작성 문서는 개인적 경험과 의견, 독특한 기술 선택(예: NixCI, PolyForm-Noncommercial 라이선스) 및 구체적 사례를 포함하여 더 인간적이고 개성 있는 서술이 특징입니다.

반면, AI 생성 문서는 불필요하게 장황하고 중복된 설명이 많으며, 핵심 설계 문제에 대한 깊이 있는 고민이 부족해 보였습니다. 특히, AI 문서는 설계 시 고려해야 할 어려운 문제나 트레이드오프를 충분히 다루지 못했습니다.

독자들은 인간 작성본을 대체로 잘 구분했으나, 일부는 인간 문서의 상세함과 길이를 AI 문서의 특징으로 오해하기도 했습니다. 또한, AI가 만든 다이어그램은 배치 오류 등에서 비인간적임이 드러났습니다.

이 연구는 AI가 설계 문서 작성에 빠르게 활용될 수 있으나, 진정한 설계 고민과 경험 기반 서술은 아직 인간의 고유 영역임을 시사합니다.