AI 마에스트로 자율스터디 · 1회차 결과물 (마감 8. 28.)

내 업무용 Skill 개선
— 규정 Q&A 봇 최신화

부산대학교 연구진흥과 · 2026. 8. 24.

한 줄 요약: 부서에서 운영 중인 규정 Q&A 봇(Google Gemini Notebook 기반, 무료·브라우저)을 8월에 전면 최신화했습니다 — 지속가능한 계정 체계로 재구축하고, 학습 소스를 현행 규정 27종으로 교체했으며, FAQ 스트레스 테스트 10문항 전원 통과로 검증하고, 오답 신고 체계까지 갖췄습니다.

1이 봇이 하는 일

연구비 집행·출장·회의비 등 규정이 궁금할 때 채팅으로 물어보면, 근거 규정(출처)까지 달아서 답하는 봇입니다. 부서 규정·지침·사례집 PDF를 학습시켜 만들었고, 별도 설치 없이 브라우저에서 씁니다.

규정 안내라는 반복 업무를 AI에게 맡기되, 근거(출처)를 반드시 함께 제시하게 해서 사람이 검증할 수 있게 한 것이 핵심입니다.

2이번에 개선한 4가지

① 지속가능 재구축 · 8/10

개인 의존 → 부서 공용 체계

개인 계정에 있던 노트북을 부서 공용 계정 기반으로 재구축. "진짜 자산은 자료 마스터 폴더, 노트북은 언제든 재구축 가능" 전략을 실증 — 담당자가 바뀌어도 봇이 유지됩니다.

② 학습 소스 현행화 · 8/13

옛 규정 격리, 현행본 27종으로

2016~2019년판 구본 3종을 격리하고 최신 개정판 4종을 추가해 소스 27종으로 확충. 금액 기준이 바뀐 규정(청탁금지법 가액 등)은 '현행 요약' 소스로 못박아 옛 수치 인용을 차단했습니다.

③ 품질 검증 · 8/10

FAQ 스트레스 테스트 10/10 통과

식사 한도·경조사비·출장 여비·학생인건비 등 금액·한도 중심 10문항을 그대로 입력해 ①옛 수치 인용 ②환각(소스에 없는 답) ③규정 간 맥락 혼동을 점검 — 전 문항 통과.

④ 오답 대비 체계 · 8/11

"봇도 실수한다" 전제의 안전장치

답이 애매하면 담당자에게 확인하도록 안내하고, 문의·오답 신고 폼 + 자동 알림을 연결. 규정 개정 시 반영 절차는 자료 최신화 체크리스트로 문서화했습니다.

3실측 검증 기록 — FAQ 스트레스 테스트 10문항 (2026. 8. 10.)

금액·한도처럼 틀리면 위험한 질문 10개를 그대로 입력해, 답변의 수치·인용 소스·연도를 하나씩 확인했습니다. 판정 기준: ①현행 수치인가 ②소스에 없는 내용을 지어내지 않는가 ③서로 다른 규정(청탁금지 vs 연구비 집행기준 vs 사업별 기준)을 섞지 않는가.

#	질문	봇 답변 요지 (실측)	판정
1	직무관련자와 식사 한도는?	5만원 — 종전 3만원에서 2024년 개정으로 상향된 이력까지 명시, 연구비 회의비 3만원과 별도 구분	✅
2	연구과제 회의 식비는 1인당 얼마까지?	3만원 — 사전 내부결재 필수, 심야(23시~6시) 금지 등 부대조건까지 제시	✅
3	경조사비·화환은 각각 얼마까지?	경조사비 5만원 / 화환·조화 10만원 — 두 수치를 정확히 구분	✅
4	국내출장 일비·식비는 하루 얼마?	현행(2026 개정) 일비 2.5만/식비 2.5만을 앞세우고, 옛 2만원은 "종전 기준"으로 명확히 구분	✅
5	국내출장 숙박비 지역별 상한은?	서울 10만/광역시 8만/기타 7만 — 옛 기준(7/6/5만)은 "종전"으로 구분	✅
6	석사과정 학생연구자 인건비 월 계상 기준은?	현행 월 220만원 — 옛 180만원은 "과거 지침"으로 이력 표시	✅
7	연구비카드로 주유비 결제 가능? 금지 항목은?	직접결제 불가, 사후정산 절차 안내 — 유흥·주류·심야 등 금지 항목 정확	✅
8	일상감사 대상 지출·계약 금액 기준은?	물품·용역 2천만 초과 / 시설공사 5천만 초과 등 — 현행(2023 개정) 지침 기준	✅
9	3천만원 이상 연구장비 구입 절차는?	금액 구간별 심의 절차(과제평가단·국가연구시설장비심의위 등)를 재원별로 구분해 안내	✅
10	BK21 회의비 기준은 일반 연구비와 다른가?	사업별 기준 우선 원칙으로 구분 — BK21의 더 엄격한 기준(시간 제한 등)과 일반 지침을 병기	✅

결과: 10문항 전원 통과 (옛 수치 인용·환각·맥락 혼동 0건). 과거 위험 요인이던 옛 자료 수치 인용이 "최신 기준 우선 + 옛 수치는 '종전'으로 라벨링" 형태로 처리됨을 확인 — 구본 교체(8/10)와 현행 요약 소스가 주효했습니다.

※ 질문 원문·답변 전문과 인용 소스 번호는 부서 노트북 채팅 이력 및 내부 기록표에 보존되어 있습니다. 위 수치는 모두 공개 법령·규정의 현행 기준입니다.

규정 Q&A 봇 답변 화면 — 출처 각주가 달린 답변 예시 — 봇 답변 화면 예시 — 모든 답변에 근거 소스 각주가 달립니다 (구축 초기 테스트, 2026. 6.)

4Before / After

구분	Before	After
운영 체계	개인 계정 의존 — 담당자 부재 시 중단 위험	부서 공용 체계 + 재구축 절차 문서화
학습 자료	2016~2019년판 혼재 — 옛 금액 인용 위험	현행본 27종 + 현행 수치 요약 소스
신뢰성	검증 없이 사용 — 답을 그대로 믿어야 함	10문항 스트레스 테스트 통과 + 출처 확인 습관화
오답 대응	없음	신고 폼 → 담당자 자동 알림 → 소스 교정

5왜 이것이 'Skill 개선'인가

AI 봇의 답 품질은 결국 어떤 자료를 학습시키고, 어떻게 검증하고, 틀렸을 때 어떻게 고치느냐로 결정됩니다. 이번 최신화는 봇 자체를 새로 만든 것이 아니라, 그 운영 매뉴얼(Skill)을 업그레이드한 것입니다 — 소스 관리 규칙, 검증 문항, 오답 처리 절차가 모두 문서로 남아 누구든 이어받을 수 있습니다.

다음 계획: 주제별(연구비·여비·BK21) 노트북 분리 검토, 규정 개정 모니터링과 연계한 정기 최신화.