macOS 기반 사진 및 영상 전체를 검색하는 로컬 AI 시스템
Show HN: AI search for every photo and every frame of video on macOS
macOS 기반으로 작동하며, 사용자 기기의 모든 사진과 영상을 분석해 자연어 설명만으로 원하는 장면이나 내용을 찾아주는 로컬 AI 검색 시스템입니다.
개인의 민감한 사진과 영상 데이터를 외부로 전송할 필요 없이, 맥 기기 내부에서 자연어 검색을 통해 원하는 내용을 찾을 수 있다는 점이 중요해요.
- 단순 키워드 검색을 넘어, 영상은 장면별로 분할하여 정확한 시간대를 찾고, 대화 내용이나 이미지 속 텍스트를 분석해 깊이 있는 검색 결과를 제공합니다.
- 모든 데이터 처리와 AI 추론이 사용자의 Mac 내부에서만 이루어지기 때문에, 민감한 개인 미디어를 외부 클라우드에 업로드할 필요가 없어 최고 수준의 프라이버시를 보장합니다.
- 오프라인으로 작동하지만, 초기 사용 시에는 검색 엔진이 필요로 하는 AI 모델 가중치 파일을 기기에 다운로드해야 하며, 현재는 macOS 전용 애플리케이션입니다.
이 시스템은 macOS 환경에서 사용자의 기기에 저장된 모든 사진과 비디오 파일을 분석하여, 자연어 설명만으로 원하는 장면이나 내용을 찾아주는 로컬 AI 검색 도구입니다. 클라우드 업로드나 계정 연결 없이 오직 Mac 내부에서 추론을 실행하며, 파일 전체의 의미를 파악하는 '파일' 모드는 물론, 영상 속 특정 순간을 찾거나(Scenes), 화면에 보이는 텍스트(OCR) 및 정확한 대화 내용(Dialogue) 검색 기능을 제공합니다.
검색 기능은 사용자가 생각하는 방식으로 작동하도록 설계되었으며, 특히 비디오의 경우 장면 단위로 분할하여 해당 시간 코드로 바로 이동할 수 있습니다. 또한, 영상 속 음성 내용은 Whisper를 통해 정확하게 전사하고 이를 기반으로 '정확한 대화 내용' 검색을 지원합니다. 옵트인 방식으로 채팅 기능을 활용하면, 이미 추출된 대화 기록, OCR 텍스트, 파일명 키워드를 근거로 인용된 답변을 얻을 수 있습니다.
개인 정보 보호를 최우선으로 하여 모든 미디어 데이터는 기기를 벗어나지 않으며, 검색 엔진의 파일은 최초 사용 시에만 다운로드됩니다. 이 시스템은 환경에서 작동하며, 비전 모델(CLIP 등)과 OCR 언어 팩 등의 핵심 구성 요소가 모두 로컬로 관리되어 외부 전송이나 계정 기반 서비스 없이 오프라인으로도 검색이 가능합니다.
용어 풀이
- LLM
- 방대한 글을 학습해 문장을 이해하고 만들어 내는 AI 모델. ChatGPT, Claude, Gemini가 여기에 속해요.
- 가중치
- 학습으로 정해진 모델 내부의 숫자 값. 내려받는 모델 파일의 본체예요.
- 샌드박스
- 프로그램을 바깥과 분리된 안전한 공간에서 실행하게 하는 환경.
이 시스템은 어떤 방식으로 사진과 영상을 검색할 수 있나요?
자연어 설명만으로 원하는 장면이나 내용을 찾아주어요. 영상의 경우, 장면 단위로 분할하여 특정 시간 코드로 바로 이동하거나, 화면에 보이는 텍스트나 대화 내용까지 깊이 있게 검색할 수 있어요.
개인 정보 보호는 어떻게 보장되나요?
모든 미디어 데이터와 AI 추론 과정이 사용자의 Mac 내부에서만 이루어지기 때문에, 민감한 데이터를 외부 클라우드에 업로드할 필요가 없어요. 핵심 구성 요소들이 로컬로 관리되어 오프라인 검색도 가능합니다.
인터넷 연결 없이도 사용이 가능한가요?
네, 모든 데이터 처리와 AI 추론이 기기 내부에서만 이루어지므로 오프라인 검색이 가능해요. 다만, 처음 사용할 때는 검색 엔진에 필요한 모델 가중치 파일을 다운로드해야 합니다.
