Jweb-forager
jiamingshi-jsphys/web-forager
robots 대응 정보 수집. 360/Bing/Sogou/WeChat 검색, HTML/PDF/Office/EPUB/RSS→Markdown, Bilibili/Zhihu/Xiaohongshu/WeChat 전용 처리, sitemap·재개 가능 링크 탐색. 실제 브라우저 읽기 전용8개 절차로 렌더·로그인 사이트를 읽는다. 텍스트를 비신뢰로 표시·명령형 내용 탐지, 기본 robots.txt·출처당 초1회 준수. CLI·MCP 서버2개·Claude Code 스킬.