사내 문서를 AI에 넣었을 때 "문서에 적혀 있는데도 답을 못 한다", "그럴듯한데 내용이 틀렸다" 같은 경험을 하신 적 없으신가요?
원인은 문서 쪽에 있는 경우가 적지 않습니다. 다만 흔히 이야기되는 "깔끔한 문장으로 쓴다", "친절하게 설명한다"는 사실 거의 효과가 없습니다. 오히려 정중한 서두는 역효과입니다.
그래서 같은 사실과 같은 정보량을 담고 작성법만 다른 사내 규정 문서 12개를 두 세트 준비해, 실제로 Monoshiri AI에 넣고 같은 질문을 던지는 검증을 진행했습니다. 이 글에서는 그 결과 밝혀진 '정말로 효과 있는 것'을 효과가 큰 순서대로 소개합니다.
이 글에서 알 수 있는 것
- 작성법을 바꾸면 답변 정확도가 얼마나 달라지는가(실측)
- 정확도를 가장 크게 망가뜨리고 있던 의외의 원인
- AI가 '어느 문서를 열지' 판단할 때 보고 있는 재료
- 내일부터 쓸 수 있는 사내 문서 작성 7가지 규칙과 템플릿
1. 검증 방법
가상 회사의 사내 규정 문서 12개(인사 5, 경비 4, IT 3)를 다음 두 가지 패턴으로 준비했습니다.
| 작성법이 나쁜 세트 | 작성법이 좋은 세트 | |
|---|---|---|
| 서두 | "평소 노고에 감사드립니다" 같은 인사와 배경 설명 | 이 문서가 무엇인지, 대상, 답할 수 있는 것 |
| 구성 | 소제목이 적은 긴 산문 | 소제목으로 구분하고 끝에 Q&A |
| 숫자 | 한자 숫자(三万円, 十万円) | 아라비아 숫자(30,000엔) |
| 표현 | "본 제도", "해당 수당", "별지 참조" | 고유명사를 그대로 표기 |
| 파일명 | 20260401_통지_최종본_v3 |
재택근무 규정 |
| 총 글자 수 | 7,427자 | 8,231자 |
중요한 것은 양쪽에 같은 사실과 같은 수치가 적혀 있다는 점입니다. 정보량으로 차이가 나지 않도록 한 뒤, 작성법만 바꿨습니다.
여기에 사실 확인, 부정 조건, 복합 조건, 절차, 그리고 '애초에 적혀 있지 않은 것'을 포함한 10문항을 던져 답변을 비교했습니다.
2. 결과: "나쁜 문장으로도 8~9할은 답했다"
먼저 많은 분들이 의외라고 느낄 결과부터 말씀드립니다.
10문항 중 9문항은 작성법이 나쁜 세트에서도 정확히 답변했습니다.
서두가 길어도, 지시어투성이여도, 소제목이 없어도, 정보가 문서에 적혀 있으면 답변이 나왔습니다. Monoshiri AI는 문서 전문을 읽고 나서 답하는 skill 모드(Corpus2Skill) 방식이라, 문서를 잘게 쪼개 일부만 전달하는 방식보다 나쁜 문장에 강한 특성이 있습니다.
즉, "AI를 도입하기 전에 모든 문서를 깔끔하게 다시 쓸" 필요는 없습니다. 이것이 첫 번째 결론이며, 도입을 망설이는 가장 흔한 이유를 없애줍니다.
다만 차이가 난 1문항이 업무적으로는 치명적이었습니다.
3. 유일하고도 치명적인 오답: 한자 숫자
차이가 난 것은 이 질문입니다.
"5만 엔짜리 모니터를 구매하고 싶은데, 누구의 승인이 필요한가요?"
규정상 정답은 '부문장'입니다(3만 엔 이상 10만 엔 미만은 부문장, 10만 엔 이상 50만 엔 미만은 본부장).
작성법이 나쁜 세트의 답변은 이랬습니다.
5만 엔 모니터 구매에는 본부장의 승인이 필요합니다. 금액이 十万円 이상 五十万円 미만에 해당하기 때문입니다.
오답입니다. 게다가 승인자를 한 단계 위로 잘못 짚는, 실무에서 곤란한 종류의 실수입니다.
원인 분리하기
원인이 '나쁜 문장'인지 '한자 숫자'인지 확인하기 위해, 나쁜 문장은 그대로 두고 금액의 한자 숫자만 아라비아 숫자로 고친 세트를 추가로 준비해 같은 질문을 각각 3회씩 던졌습니다.
| 문서 속 금액 표기 | AI의 답변 | 결과 |
|---|---|---|
| 三万円 / 十万円 / 五十万円 | "본부장의 승인이 필요" | 3회 모두 오답 |
| 3만 엔 / 10만 엔 / 50만 엔 | "부문장의 승인이 필요" | 3회 모두 정답 |
| 30,000엔 / 100,000엔 / 500,000엔 | "부문장의 승인이 필요" | 3회 모두 정답 |
문체도 구성도 지시어도 나쁜 그대로 두고, 금액 표기만 고쳤더니 오답이 사라졌습니다.
3회 모두 동일한 오답 문장이었으므로 우연이 아닙니다. "5만 엔"이라는 질문에 대해 한자 숫자의 "十万円 이상 五十万円 미만"을 해당 구간으로 잘못 적용하고 있었습니다.
왜 무서운가
이 실패는 논리는 맞는데 구간 적용만 틀리는 형태로 나타납니다. 답변 문장은 앞뒤가 맞고 확신에 차 있어서, 읽는 사람이 오류를 알아챌 수 없습니다. "AI가 거짓말을 한다"보다 실무에서는 더 성가신 실패입니다.
참고로 "만 엔" 같은 만 단위 표기 자체는 문제가 없었습니다. 모든 금액을 100,000엔으로 통일할 필요는 없고, 한자 숫자만 쓰지 않으면 충분합니다.
바로 할 수 있는 대책
사내 규정, 통지, 회의록은 일본어에서 관습적으로 한자 숫자로 작성되는 경우가 많습니다. 다음 치환을 한 번 돌리는 것만으로 효과가 있습니다.
- 三万円 → 3만 엔
- 六か月 → 6개월
- 九十三日 → 93일
- 二社以上 → 2개사 이상
한국어 문서도 마찬가지로, "삼만 원"이 아니라 "30,000원"처럼 숫자로 표기하세요.
4. AI는 '첫 줄'만 보고 문서를 고른다
실무에 직결되는 발견이 하나 더 있었습니다.
작성법이 나쁜 세트가 놓친 질문이 하나 더 있습니다.
"아이가 태어나면 회사에서 얼마를 받나요?"
답변은 "기재되어 있지 않습니다"였습니다. 그러나 이 정보는 적혀 있습니다(경조사 문서에 "출산의 경우 一万円"이라고 기재). 적혀 있는데도 도달하지 못한 것입니다.
이유는 AI가 문서를 고를 때 보는 정보에 있습니다.
Monoshiri AI는 질문을 받으면 '목차'에서 관련 문서를 골라 엽니다. 이때 목차에 나열되는 것은 각 문서의 첫 줄입니다.
| 작성법이 나쁜 세트의 목차 | 작성법이 좋은 세트의 목차 |
|---|---|
| 경조사 취급에 관하여 | 경조 휴가·경조금 규정 |
| 휴가 취득에 관한 자료 | 연차 유급휴가 규정 |
| 육아 및 간병에 관한 안내 | 육아·간병 휴직 규정 |
"경조사 취급에 관하여"만으로는 거기에 출산 축하금이 적혀 있다고 판단할 수 없습니다. 반면 "경조 휴가·경조금 규정"이라면 '경조금'이라는 단어로 도달할 수 있습니다.
파일명을 정리해도 효과는 없다
여기가 놓치기 쉬운 부분입니다. 파일명은 이 판단에 사용되지 않습니다.
20260401_통지_최종본_v3.docx를 재택근무 규정.docx로 정리하는 것은 사람의 관리 측면에서는 옳지만, AI의 답변 정확도는 달라지지 않습니다. 효과가 있는 것은 본문의 첫 줄입니다.
파일 정리에 시간을 쓰기보다, 각 문서 맨 앞에 제목 한 줄을 넣는 편이 훨씬 효과적입니다.
5. 표기 흔들림에는 예민할 필요 없다
일반적으로 "AI에 읽히려면 사내 용어를 통일해야 한다"고들 하지만, 이번 검증에서는 다른 표현에 대한 내성이 높다는 결과가 나왔습니다.
| 질문에 쓴 단어 | 문서에 쓰인 단어 | 결과 |
|---|---|---|
| 텔레워크 | 재택근무 | 정확히 답변 |
| 리모트워크 수당 | 재택근무 수당 | 정확히 답변 |
| 폰(구어) | 스마트폰·단말 | 정확히 답변 |
직원이 어떻게 질문할지 예측해 용어를 통일하는 작업은 우선순위를 낮춰도 됩니다. 그보다 먼저 해야 할 것이 다음 7가지입니다.
6. 사내 문서 작성 7가지 규칙(효과 순)
1. 한자 숫자를 쓰지 않는다
최우선입니다. 금액, 일수, 인원수, 시간 모두 아라비아 숫자로 씁니다. 이것만으로 승인 구간이나 일수의 오답이 줄어듭니다.
2. 본문 첫 줄에 '무엇을 답할 수 있는지' 알 수 있는 제목을 쓴다
# 경조 휴가·경조금 규정처럼, 그 문서가 무엇에 답할 수 있는지 알 수 있는 단어를 첫 줄에 넣습니다. 파일명이 아니라 본문 첫 줄입니다.
3. 한 파일에 한 주제만 담는다
AI는 문서 단위로 '열지 말지'를 판단합니다. 하나의 문서에 재택근무, 출장, 경비 정산이 함께 있으면, 도달한 문서 바깥에 있는 정보를 놓칩니다.
4. 서두에 '대상'과 '이 문서로 알 수 있는 것'을 쓴다
인사, 배경, 제도의 취지부터 쓰기 시작하지 마세요. AI는 문서의 서두를 단서로 분류하기 때문에, 그 자리가 서두 인사로 채워지면 내용이 제대로 인식되지 않습니다.
5. 안 되는 것과 금지 사항을 명시한다
"수습 기간 중에는 이용할 수 없습니다", "개인 PC로 업무하는 것은 금지입니다"라고 적혀 있으면 AI는 "할 수 없습니다"라고 답할 수 있습니다. 적지 않으면 '할 수 있는 조건'만 보고 잘못 긍정할 가능성이 있습니다.
규정을 쓰는 사람은 '할 수 있는 조건'을 쓰기 쉽지만, 직원이 묻는 것은 '나는 할 수 있는가'입니다.
6. 예상 질문을 Q&A로 끝에 넣는다
실제 질문 방식에 가까운 문장이 본문에 있으면 도달하기 쉬워집니다. 3~5문항이면 충분합니다.
7. 지시어를 피한다
"본 제도", "해당 수당", "별지 참조"는 그 문서만 읽는 AI에게는 무엇을 가리키는지 알 수 없습니다. 다만 이번 검증에서는 지시어만으로 오답의 원인이 되지는 않았습니다. 우선순위는 낮은 편입니다.
7. 그대로 쓸 수 있는 템플릿
기존 문서의 맨 앞에 이 4줄을 추가하는 것만으로도 효과가 있습니다. 전문을 다시 쓸 필요는 없습니다.
# 재택근무 규정
이 문서는 재택근무의 대상자·이용 가능 일수·신청 방법·수당을 정한 규정입니다. 2026년 4월 1일 개정.
대상: 입사 6개월 이상의 정규직 및 계약직 사원
이 문서로 알 수 있는 것: 재택근무를 쓸 수 있는 사람과 쓸 수 없는 사람, 주 며칠까지 가능한지,
신청 절차와 마감, 재택근무 수당의 금액과 조건, 대여되는 기기, 금지 사항
본문에서는 다음과 같이 '되는 것/안 되는 것'을 나란히 씁니다.
## 대상자
이용할 수 있는 사람: 입사 6개월 이상 경과한 정규직 및 계약직 사원
이용할 수 없는 사람: 수습 기간 중인 사원, 입사 6개월 미만 사원, 파트타이머
## 재택근무 수당
금액: 월 3,000엔
지급 조건: 월 재택근무 일수가 3일 이상일 것. 3일 미만인 달은 지급하지 않습니다.
통신비와 광열비는 재택근무 수당에 포함됩니다. 개별 정산은 불가합니다.
8. 어디부터 손댈 것인가
모든 문서를 고칠 필요는 없습니다. 자주 질문받는 문서부터 다음 3가지만 실행하세요.
- 한자 숫자를 아라비아 숫자로 치환(일괄 치환으로 몇 분)
- 첫 줄에 제목 추가(문서당 1분)
- 서두에 '대상', '이 문서로 알 수 있는 것' 추가(문서당 3분)
10개 문서라면 1시간도 걸리지 않습니다. 그러면서도 이번 검증에서 차이가 난 오답과 누락은 이 3가지로 거의 해소됩니다.
도입 직후에 해야 할 일은 AI 지식베이스 도입 후 첫 30일에 해야 할 5가지에도 정리되어 있습니다.
자주 묻는 질문
Q. 문서를 깔끔하게 다시 쓰지 않으면 AI를 쓸 수 없나요?
아닙니다. 이번 검증에서는 작성법이 나쁜 상태에서도 10문항 중 9문항을 정확히 답했습니다. 우선 넣어보고, 답하지 못한 문서부터 고치는 편이 효율적입니다.
Q. PDF나 Word, Excel 그대로도 괜찮나요?
읽을 수 있습니다. 다만 스캔한 이미지만 있는 PDF나 이미지로 붙여넣은 표는 정보가 빠지기 쉽습니다. 표는 텍스트로 작성된 형식이 확실합니다.
Q. 용어를 사내에서 통일할 필요가 있나요?
우선순위는 낮은 편입니다. "텔레워크", "리모트워크" 같은 다른 표현은 자동으로 해결되었습니다. 그보다 한자 숫자와 첫 줄 제목을 우선하세요.
Q. 문서가 너무 길면 어떻게 하나요?
주제 단위로 분할하세요. 방대한 규정집을 한 파일에 모으기보다, 규정별로 나누는 편이 AI가 목적한 문서에 도달하기 쉽습니다.
Monoshiri AI로 시험해보기
Monoshiri AI는 사내 문서를 업로드하기만 하면 AI가 사내 지식을 횡단해 답변하는 서비스입니다.
- 업로드만으로 시작: PDF·Word·Excel·PowerPoint를 그대로 읽어들입니다. 다시 쓸 필요가 없습니다
- 전문을 읽고 답변: 문서를 잘게 쪼개지 않고 목차에서 관련 문서를 따라가 답하기 때문에, 나쁜 문장에도 비교적 강한 구조입니다(skill 모드 해설)
- 적혀 있지 않은 것은 "기재 없음"이라고 답변: 이번 검증에서도 존재하지 않는 규정에 대해 추측으로 답하지 않았습니다
- 질문 창구가 여러 개: 채팅 위젯이나 LINE 연동으로 평소 동선 그대로 질문할 수 있습니다
- 사용자 수 무제한: 무료 플랜부터 시작 가능, 유료는 월 2,980엔부터(요금)
정리
같은 내용의 사내 문서라도 작성법에 따라 AI의 답변은 달라집니다. 이번 검증으로 알게 된 것을 정리합니다.
- 나쁜 문장으로도 8~9할은 답한다. 도입 전에 모든 문서를 정비할 필요는 없다
- 한자 숫자는 오답의 원인이 된다. 금액 표기만 고쳤더니 승인자 오답이 3회 모두 사라졌다
- AI는 본문 첫 줄을 보고 문서를 고른다. 파일명을 정리해도 정확도는 달라지지 않는다
- 적혀 있는데도 "기재 없음"이라고 답하는 누락이 가장 발견하기 어려운 문제
- 표기 흔들림 대책의 우선순위는 낮다. 다른 표현은 자동으로 해결된다
우선 자주 질문받는 문서의 한자 숫자를 치환하고, 첫 줄에 제목을 넣는 것부터 시작해보세요.
사내 문서가 '있는데 쓸 수 없는' 상태는 매뉴얼이 읽히지 않는 문제와 같은 구조를 가집니다. 문서를 늘리는 것이 아니라, 도달할 수 있는 형태로 만드는 것이 해결책입니다.
관련 글
이 아티클 공유
관련 아티클
"매뉴얼은 있는데 아무도 안 읽는" 문제를 AI로 해결하는 방법
사내 매뉴얼이 활용되지 않는 3가지 이유와, AI 지식 베이스로 '읽기'에서 '질문하기'로 전환하는 구체적인 방법을 소개합니다.
'그건 그 사람한테 물어봐'를 끝내자 -- 사내 지식 속인화의 5가지 위험 신호
사내 정보가 특정 인물에게 집중되는 '속인화'의 위험 신호와 AI 지식 베이스를 활용한 구체적인 해결책을 소개합니다.
키워드 검색으로 사내 문서를 활용할 수 없는 한계 -- 검색 실패 7가지 패턴 진단
키워드 검색이나 전문 검색으로 사내 문서를 다 활용하지 못하는 한계를, 검색이 실패하는 7가지 구체적 패턴으로 진단합니다. 전문 검색 AI를 도입해도 해결되지 않는 이유와 생성 AI로 사내 문서 검색을 바꾸는 다음 한 수를 해설합니다.
