
지식·챗봇
고객사 시험운영문서 기반 AI 챗봇 V3 — PDF 질의응답 챗봇
관리자가 올린 PDF를 근거로 답하는 챗봇. 기본 질의응답 경로를 로컬 LLM 구조로 바꿔 고객사 시험운영까지 진행
65.2/100 → 82.9/100 · 코드 리뷰 평균 점수 — 같은 4개 항목·검증 모델 GPT-5-mini, 1차 → 3차, 2026-03-25
기획·PM › 기획·분석
외부 LLM을 쓸 때 개인정보·기밀을 치환해 보내고 응답을 내부에서 복원하는 보안 게이트웨이 구조와 사업화 방안을 정리한 기획안
집계
14절
기획안 구성(문서 목적 ~ 결론), HTML 문서·Mermaid 도식, 구현 없음
집계
8건
기획안이 정리한 주요 위험과 대응 방안
집계
11건
기획안에 남긴 검토·의사결정 과제
기업이나 교육기관이 GPT·Claude·Gemini 같은 외부 LLM을 쓸 때 생기는 개인정보·내부 기밀 유출 위험을 줄이려고, 외부 호출 전에 민감정보를 탐지·치환하고 응답을 받은 뒤 내부에서 원래 값으로 복원하는 보안 게이트웨이 구조를 정의한 기획안이다.
문서 단계에 머문 기획으로, 구현물이나 데모는 없다.
[COMPANY_001] 같은 임시 식별자로 바꿔 보내고, 외부 응답 속 식별자를 내부에서 원래 값으로 되돌리는 과정을 단계별로 보여 준다.
지식·챗봇
고객사 시험운영관리자가 올린 PDF를 근거로 답하는 챗봇. 기본 질의응답 경로를 로컬 LLM 구조로 바꿔 고객사 시험운영까지 진행
65.2/100 → 82.9/100 · 코드 리뷰 평균 점수 — 같은 4개 항목·검증 모델 GPT-5-mini, 1차 → 3차, 2026-03-25
인프라
운영 중인터넷이 없는 GPU 서버에 드라이버부터 추론 서버까지 반입 파일로 세우고, 사용률 관리와 런타임 패치까지 운영했다
85.9 tok/s · Gemma 4 26B q4_0, V100 32GB 2장 layer split(llama.cpp CUDA), 2026.08 설치 검증