플러그인

저비용 영상 이해 도구. video_understand 도구가 Bilibili 링크 / BV / 로컬 영상을 AVIS 정보 계층(ASR + 장면 구조 + 객체 추적 + YOLO 라벨)으로 변환하고 요약 + Q&A를 반환한다. 질문 주도형 계층 간 동적 라우팅(L0 ASR / L1 객체 추적 / L2 키프레임 VLM), 반복 질문용 의미 계층 재사용, 질문별 예산 상한을 갖춘다. Python 엔진: 코어 계층에는 faster-whisper / opencv / yt-dlp가 필요하며(~200-300MB), 선택적 의미 계층을 추가하면 torch / transformers / ultralytics가 약 2GB 더 든다. 번들된 doctor --fix가 venv를 설정하고 둘 다 설치한다.

플로팅 사이드바 창의 TikTok 스타일 비디오 피드: 로컬 또는 SMB-NAS 폴더를 넘겨 보거나 온라인 비디오 URL(yt-dlp, bilibili/YouTube, cookies.txt 로그인 상태)을 붙여넣을 수 있습니다. 창은 비디오 화면비에 맞게 자동 조정되며 전체 화면, 드래그 크기 조절, Range 스트리밍 및 에이전트 비디오 대기열 엔드포인트를 제공합니다.

Downloads a Bilibili video with yt-dlp, samples key frames, and transcribes it — from the site subtitles, or from a local faster-whisper install when there are none. Registers the skill the agent uses to write the summary; activates when a user message contains only a video link. Requires yt-dlp and ffmpeg on PATH; transcription needs faster-whisper.