Open Source
GitHub, HuggingFace의 최신 AI 오픈소스 프로젝트를 탐색하세요.

적응형 웹 스크래핑 프레임워크로, 단일 요청부터 대규모 크롤링까지 처리합니다. 핵심 기능은 adaptive parsing으로, 웹사이트 구조가 변경되어도 유사도 알고리즘으로 대상 요소를 자동 재탐색합니다. v0.4에서는 완전 비동기 스파이더/크롤링 프레임워크, 지능형 프록시 관리, MCP 서버 통합이 추가되었습니다. TLS 핑거프린트 위장으로 스텔스 요청을 보내고, Cloudflare Turnstile 등 안티봇 시스템을 기본 우회합니다. BeautifulSoup 대비 774배 빠른 성능과 92% 테스트 커버리지를 갖추고 있으며, AI 에이전트용 MCP 서버로 Claude/Cursor 등과 직접 연동하여 토큰 사용량을 줄이면서 웹 데이터를 추출할 수 있습니다.
n8n-io
AI 네이티브 워크플로우 자동화 플랫폼 (181K stars)

Shubhamsaboo
LLM 앱 예제 및 튜토리얼 컬렉션

microsoft
다양한 파일을 마크다운으로 변환하는 Microsoft 도구

mendableai
웹을 LLM-ready 데이터로 변환하는 AI용 웹 API