matsuu
.
@matsuu,
WebサイトをクロールしてMarkdownや構造化データに変換する実装。構造化データとして取得できるのでLLMの学習目的に使われているとか。オープンソース実装と機能追加されたクラウド版がある。
---
GitHub - mendableai/firecrawl: 🔥 Turn entire websites into LLM-ready markdown or structured data. Scrape, crawl and extract with a single API.
https://github.com/mendableai/firecrawl
#bookmarks