Fircrawl

Fircrawl是一个强大的网络爬虫工具，旨在将网站转换为LLM（大型语言模型）就绪的数据，它允许用户从任何网站抓取干净的数据。