【LLM Data Scrapers:为LLM训练和推理提供开源数据抓取工具的宝藏清单。亮点:1. 汇集了9种开源工具,覆盖代码、网页、PDF等多种数据源;2. 简化数据收集流程,助力高效训练;3. 提供从网页到结构化数据的直接转换】
'A list of useful Open Source tools and scrapers to gather data for LLMs'
GitHub: github.com/patrickloeber/llm-data-scrapers
#LLM数据抓取# #开源工具# #AI训练# #AI创造营#
发布于 北京
