FOCUS는 스트리머와 주변 인물을 실시간으로 구분해 비대상 인물의 얼굴을 보호하고, 방송 종료 후에는 AI 회고 리포트까지 제공하는 스트리머 친화형 스트리밍 지원 서비스입니다.
기존 라이브 방송은 초상권 보호와 방송 품질 사이에서 타협해야 했습니다. FOCUS는 이 문제를 실시간 보호, 추적 안정성, 방송 종료 후 회고까지 연결해 해결합니다.
야외 방송이나 합방 상황에서는 제3자의 얼굴이 의도치 않게 화면에 노출될 수 있고, 송출 이후에는 되돌리기 어렵습니다.
화면 전체를 일괄 블러 처리하면 보호는 가능하지만, 현장감과 전달력, 스트리머 중심의 콘텐츠 몰입도가 함께 떨어집니다.
방송이 끝난 뒤 어떤 장면이 좋았는지, 어디서 보호 부담이 높았는지, 다음 방송을 어떻게 개선할지 바로 알기 어렵습니다.
지금까지의 FOCUS는 실시간 스트리밍 보호 기능과 방송 종료 후 AI 회고 경험을 하나의 흐름으로 연결하는 방향까지 구현이 진행된 상태입니다.
프리뷰 터치 기반으로 스트리머를 Owner로 등록하고, 햄버거 메뉴에서 등록된 프로필을 빠르게 확인하고 제거할 수 있습니다.
YuNet 기반 Bounding Box 탐지와 ArcFace 임베딩 기반 분류를 결합해 Owner와 Other를 실시간으로 구분합니다.
스트리머는 유지하고 비대상 인물만 선택적으로 보호하는 방식으로, 방송 품질을 해치지 않는 프라이버시 보호를 제공합니다.
재진입 추적, ID 유지, 3DMM 계수 및 타임스탬프 추출을 통해 단순 탐지를 넘어 방송 전반의 추적 안정성을 관리합니다.
방송이 끝나면 요약 시트를 통해 방송 길이, 분석 상태, 잘한 점, 아쉬운 점, 다음 방송 팁, 핵심 지표를 즉시 확인할 수 있습니다.
자세히 보기 화면과 날짜별 회고록 리스트를 통해 방송별 리포트를 다시 보고, 하이라이트와 콘텐츠 비율까지 이어서 확인할 수 있습니다.
보안 이슈나 방송 방해 상황에 대응할 수 있도록, 최근 1분 구간을 무모자이크 원본 클립으로 저장해 사후 확인이 가능하도록 지원합니다.
향후에는 SOOPLIVE 방송 연동을 확장하고, 모션캡처 기반 이벤트 감지를 통해 사용자가 직접 버튼을 누르지 않아도 원본 클립이 자동 저장되도록 고도화할 계획입니다.
실시간 보호 단계와 방송 종료 후 회고 단계를 한 흐름으로 연결하는 것이 현재 FOCUS 구조의 핵심입니다.
카메라 프레임에서 얼굴을 탐지하고 Bounding Box, 3DMM 관련 정보를 추출해 스트리머와 주변 인물 상태를 파악합니다.
ArcFace 임베딩 기반으로 Owner / Other를 분류하고, 같은 인물의 트랙을 가능한 한 안정적으로 유지합니다.
Owner는 유지하고 Other만 보호 처리하여, 방송 품질을 해치지 않으면서 실시간 프라이버시를 보장합니다.
방송 종료 후 AI 리포트, 하이라이트 포인트, 회고록 아카이브를 통해 다음 방송을 위한 개선 포인트까지 제공합니다.
FOCUS는 방송 중 보호에서 끝나지 않고, 방송 종료 후 즉시 확인 가능한 요약 리포트와 상세 회고 화면까지 이어집니다.
“스트리머 중심 구도가 잘 유지되었고, 사람 유입 구간에서도 보호 처리가 비교적 안정적으로 동작했습니다.”
최고 시청자 수가 나온 시점과 당시 장면 설명을 함께 제공해, 무엇이 반응을 이끌었는지 회고할 수 있습니다.
00:08:12 첫 유입 구간
00:18:42 시청자 반응 피크
00:31:05 혼잡 구간 안정화
날짜별 카드 리스트로 저장된 방송 리포트를 다시 열어보고, 필요한 리포트를 상세 화면으로 이어서 볼 수 있습니다.
FOCUS는 보호 기능을 위해 모든 원본 데이터를 무조건 서버로 보내는 방향이 아니라, 스트리머 친화성과 프라이버시 보장을 함께 고려한 구조를 지향합니다.
방송 중에는 안전하게 보호하고, 방송 후에는 더 나은 다음 방송을 위한 AI 회고를 제공합니다.
FOCUS는 실시간 보호 기술과 방송 종료 후 AI 회고 경험을 함께 설계하기 위해, 모바일·백엔드·비전 파이프라인 역량을 가진 팀원들이 함께 개발하고 있습니다.
Android 클라이언트 구조와 전체 프로젝트 진행 방향을 중심으로 개발을 리드합니다.
iOS 앱 구현과 실시간 보호 UI, 방송 종료 후 회고 경험을 포함한 클라이언트 기능을 개발합니다.
AI 분석 흐름과 API 연동, 방송 종료 후 생성되는 리포트 파이프라인을 담당합니다.
서버 로직과 상태 관리, 외부 연동을 포함한 백엔드 전반의 안정적인 흐름을 구축합니다.
얼굴 탐지, 추적, 전처리와 관련된 비전 파이프라인과 OpenCV 기반 기능을 담당합니다.