← 포트폴리오 목록
AI 콘텐츠 생성 파이프라인 운영 콘솔
MVP 이후 운영 단계에서 필요한 AI 프롬프트 버전 관리, A/B 재생성 비교, 파이프라인 단계별 소요시간 모니터링, 배치 생성 큐/재시도, 유해 콘텐츠 감사 로그를 통합한 운영 콘솔을 구현합니다.
프롬프트 버전 관리 및 비교 시스템 설계프롬프트 버전 이력 관리와 A/B 병렬 재생성 비교 실행기를 설계해 튜닝 결과를 정량적으로 비교합니다
배치 생성 큐 및 재시도 아키텍처 구축Bull Queue와 Redis 기반 배치 생성 큐를 구축해 실패 작업만 선택적으로 재시도하는 구조를 구현합니다
파이프라인 단계별 소요시간 계측 로직 구현각 생성 단계 호출 전후 타임스탬프를 기록해 단계별 소요시간을 스탯 카드로 시각화하는 로직을 구현합니다
Overview
프로젝트 개요
MVP 이후 운영 단계에서 필요한 AI 프롬프트 버전 관리, A/B 재생성 비교, 파이프라인 단계별 소요시간 모니터링, 배치 생성 큐/재시도, 유해 콘텐츠 감사 로그를 통합한 운영 콘솔을 구현합니다. 동일한 백엔드 스택 위에 Redis·Bull Queue 기반 운영 인프라를 확장하는 구조로 설계합니다.
요구사항 정의
프로젝트 핵심 과제
프로젝트 진행 시 해결한 핵심 기술 과제입니다.
동일 프롬프트의 A/B 재생성 결과를 정량적으로 비교하는 평가 기준 설계가 필요합니다
배치 생성 실패 시 부분 재시도와 전체 롤백을 구분하는 큐 아키텍처 설계가 필요합니다
AI 파이프라인 단계별(텍스트/이미지/필터링) 소요시간 편차를 정확히 계측하는 로깅 구조 설계가 필요합니다
유해 콘텐츠 감사 로그의 오탐 케이스를 재검증하는 휴먼-인-더-루프 검토 흐름 설계가 필요합니다
핵심 기능 1
배치 생성 큐 및 재시도 관리
다수의 동화 생성 요청을 배치로 처리하고, 실패한 작업만 선택적으로 재시도할 수 있는 큐 관리 화면을 제공합니다
핵심 기능 2
파이프라인 단계별 소요시간 모니터링
AI 생성 파이프라인의 각 단계(텍스트·이미지·필터링)별 처리 시간을 실시간으로 집계해 병목 구간을 파악할 수 있는 모니터링 대시보드를 제공합니다
핵심 기능 3
AI 프롬프트 버전 관리 및 A/B 재생성 비교
프롬프트를 버전별로 관리하고, 동일 입력에 대해 두 버전을 동시에 재생성해 결과를 나란히 비교할 수 있는 콘솔을 제공합니다
핵심 기능 4
유해 콘텐츠 감사 로그 및 재검증
필터링 가드레일이 차단하거나 재생성한 이력을 감사 로그로 축적하고, 운영자가 오탐 여부를 재검증할 수 있는 화면을 제공합니다
구현 과정
프로젝트 진행 단계
STEP 1
프롬프트 버전 관리 스키마 설계
프롬프트 버전·실행이력 테이블 설계, PostgreSQL 마이그레이션을 정의합니다
STEP 2
A/B 재생성 비교 API 개발
Express 기반 프롬프트 A/B 실행·비교 엔드포인트 구현, diff 결과 저장 로직을 설계합니다
STEP 3
배치 큐 및 재시도 인프라 구축
Bull Queue 기반 배치 생성 작업 큐 구현, Redis 재시도 정책 및 실패 로그를 설계합니다
STEP 4
단계별 소요시간 모니터링 대시보드 개발
파이프라인 단계별 처리 시간 계측 로직 구현, React 기반 모니터링 위젯을 구현합니다
STEP 5
감사 로그 콘솔 및 통합 테스트
유해 콘텐츠 감사 로그 조회 화면 구현, 전체 콘솔 통합 테스트를 진행합니다
프로젝트 성과
프롬프트 버전 관리 및 비교 시스템 설계프롬프트 버전 이력 관리와 A/B 병렬 재생성 비교 실행기를 설계해 튜닝 결과를 정량적으로 비교합니다
배치 생성 큐 및 재시도 아키텍처 구축Bull Queue와 Redis 기반 배치 생성 큐를 구축해 실패 작업만 선택적으로 재시도하는 구조를 구현합니다
파이프라인 단계별 소요시간 계측 로직 구현각 생성 단계 호출 전후 타임스탬프를 기록해 단계별 소요시간을 스탯 카드로 시각화하는 로직을 구현합니다
유해 콘텐츠 감사 로그 콘솔 구현Moderation 검증 이력을 감사 로그로 적재하고 운영자 재검증 승인 흐름을 붙이는 콘솔을 구현합니다
Review
기술적 주안점
- Bull Queue와 Redis를 조합한 배치 생성 큐를 구현하여, 대량 요청 처리와 실패 작업 선택적 재시도를 안정적으로 지원하는 구조를 설계합니다
- 생성 파이프라인 각 단계에 계측 미들웨어를 삽입하고, 단계별 소요시간을 스탯 카드+스파크라인으로 시각화하는 운영 대시보드를 구현합니다
- 프롬프트 버전 이력 관리와 A/B 병렬 재생성 실행기를 구현하여, 프롬프트 튜닝 결과를 정량적으로 비교할 수 있는 구조를 설계합니다
