큐
pending, processing, done, failed 상태와 재시도 횟수, 오류 메시지를 저장합니다.
Automation
탐사차 서버에서 파일이 생길 때마다 사람이 직접 옮기면 운영이 무너집니다. 파일이 들어오면 큐에 등록되고, 워커가 메타데이터 추출, 변환, 썸네일, OCR, 색인, 민감도 분류, 성인 전용 여부 확인, 1차 이주권 개인 데이터센터 전송, 백업을 순차 실행해야 합니다. 지금의 CODEX로도 이 흐름에 필요한 PHP·Python·Shell 스크립트 초안 작성, 오류 로그 분석, 처리 상태 점검표 생성, 반복 작업 자동화가 가능합니다.
pending, processing, done, failed 상태와 재시도 횟수, 오류 메시지를 저장합니다.
cron 또는 supervisor로 작업자를 돌리고 탐사차 서버 부하에 맞게 처리량을 제한합니다.
현재 CODEX로 큐 처리 코드, 파일명 정규화, 중복 검사, 백업 검증, 실패 로그 요약을 단계적으로 작성할 수 있습니다.
자동화가 처리한 결과를 확인하고, 실패한 임무를 다시 배정하며, 생활 일정 안에서 운영 일을 끝냅니다.
처리 완료 파일은 1차 이주권 개인 데이터센터의 원본 저장소나 공개본 저장소로 자동 전송합니다.
전송이 끝난 임시파일과 오래된 실패 파일을 자동 정리합니다.