본문으로 건너뛰기

AI 개발 방식 › 운영 자동화

운영 데이터 일괄 재처리 자동화

데이터 이관 뒤 검색에서 빠진 콘텐츠를 사람과 같은 경로로 일괄 재저장하고, 항목별로 검증한 작업 — 채널 일부는 서버 반영 대기

작업 완료
기간
2026.04 ~ 2026.09 (작업 기록 기준(구조 분석 2026-04 · 자동화 2026-07 ~ 09))
상태
구성요소별로 다름 — 채널은 요청 등록까지 마쳤고 92건은 서버 쪽 색인 반영 대기
맥락
현 직장(유비온) · 대기업 고객사 사내 교육 플랫폼 운영
역할
처리 경로 원칙 결정, 실행계획·방식의 codex 4~7회 검증 지시와 범위 결정, 서버 측 확인 요청, 플랫폼 구조 분석과 로컬 구동 환경 구성
구현
실행계획·방식 검증 codex(4~7회) · 스크립트 작성 주체는 기록에 없음
기술
교육 플랫폼 솔루션(PHP·MySQL), gstack 브라우저 자동화(5탭 병렬), Python·curl HTTP 직접 호출, 로컬 Apache·PHP·Docker MySQL

핵심 수치.

실측

약 99.9%

숏폼 영상 재등록 저장률, 브라우저 5탭 병렬, 서버 전량 재조회 대조, 2026-07

집계

약 1만 건·실패 0

교육과정 색인 요청 재발신 — 검색 반영은 표본으로 확인, 2026-07

실측

데이터 소실 0

숏폼 재등록 범위 — 이상 변경 시 즉시 중단하는 안전망이 1건 작동

개요

고객사 사내 교육 플랫폼에서 데이터 이관 뒤 통합검색 색인이 갱신되지 않아, 숏폼 영상·교육과정·채널·재생목록 콘텐츠가 검색에서 빠졌다. 콘텐츠를 다시 저장하면 색인이 함께 갱신되므로 대량 재저장을 자동화했고, 대량 변경의 데이터 정합성을 지키려고 저장 전후 대조와 이상 변경 시 중단 절차를 적용했다.

본인 역할

화면 경로를 API 직접 호출보다 우선하는 처리 원칙을 정했고, 자동화 4건의 실행계획·방식을 codex 로 4~7회 검증하도록 지시하며 범위를 정했다(이미 끝난 재색인 범위 제외 등). 서버 측 색인 배치 상태 확인을 요청했고, 플랫폼 기술 문서 12종·테이블 분석과 로컬 구동 환경 구성을 했다. 스크립트 작성 주체와 참여 인원은 기록에 없다.

핵심 판단

  • 느려도 데이터를 지키는 경로. 숏폼 영상은 관리자 화면을 그대로 밟는 브라우저 5탭 병렬로 처리하고, 저장 전후 필드 해시를 대조해 허용 목록 밖 변경이 나오면 배치를 멈췄다. 안전망은 실제로 한 번 작동했다.
  • 로컬 추정 대신 실측. 교육과정 계획 v1 은 로컬 DB 추정치라 수량·시간이 무효였고, 실측으로 대상을 다시 잡아 v3 에서 HTTP 직접 호출로 바꿨다. 재생목록도 로컬 스냅샷의 결론이 실측에서 틀려, 소속 영상 전체를 다시 색인하는 안을 버리고 재생목록 자체 문서만 처리했다.
  • 효과는 대조 실험으로. 자막 요약은 화면 팝업 방식의 효과를 A/B/C 3군 대조로 확인해 버리고 API 호출로 바꿨다.

결과

  • 숏폼 영상 재등록은 운영·개발 서버 모두 마쳤고(약 99.9% 저장), 서버 전량 재조회로 대조했다. 이 범위에서 데이터 소실은 0 이다.
  • 교육과정은 약 1만 건의 색인 요청을 실패 없이 재발신하고 표본 검색으로 반영을 확인했다. 재생목록은 재발신 뒤 전수 검색으로 확인했고, 자막 요약은 대부분 반영했다.
  • 반영 여부는 API 응답이 아니라 실제 검색 노출로 판정했다.

구성요소별 상태

구성요소상태검증 종료 근거남은 일
숏폼 영상 재등록작업 완료 — 운영·개발 서버(2026-07), 약 99.9% 저장서버 전량 재조회 대조미저장 소수 건은 화면 검증에 걸린 데이터 문제 — 값 결정은 사람 몫
교육과정 재저장작업 완료 — 약 1만 건 재발신·실패 0(2026-07)표본 검색(재발신 뒤 표본의 9할 이상 검색됨)표본의 미노출분 — 검색엔진 쪽 확인 요청
재생목록 색인작업 완료 — 재발신 실패 0(2026-08)전수 검색일부 건은 검색어 쪽 문제로 별도 확인
채널 요청 등록작업 완료 — 대상 전체 요청 등록(2026-08)작업 전후 전수 재대조, 변경 0—
채널 색인 반영일부 반영 · 92건 서버 반영 대기 — 상태별 집계 추가 확인 중전수 검색 추적서버 색인 배치 재가동(서버 담당에 확인 요청)
자막 요약 반영작업 완료 — 대부분 반영A/B/C 3군 대조 · 처리 원장미처리 소수 건

한계와 다음 단계

  • 채널 92건은 서버 쪽 색인 배치 처리를 기다리고 있고, 상태별 집계는 추가 확인 중이다.
  • 처음부터 실측으로 계획하고 서버 배치 상태를 먼저 확인했어야 했다. 대량 작업의 실행 자격증명 관리 절차는 개선 과제로 남겼다. 검색 누락 복구의 사용자 효과는 정량 근거가 없다.

기술

교육 플랫폼 솔루션(PHP·MySQL) · gstack 브라우저 자동화(5탭 병렬 + 컨트롤러) · Python·curl HTTP 직접 호출 · 저장 전후 필드 해시 대조·허용 목록·감사 원장 · 로컬 Apache·PHP·Docker MySQL

관련 사례.

인증 심사 포털 기획 구성도

기획·분석

기획

인증 심사 포털 기획

이메일·수기로 돌던 사내 인증 심사를 단일 포털로 옮기는 기획 — 진행 중(화면 설계 단계), 업무 보조 도구는 별도로 동작

2026.08 ~ 진행 중요약 사례