专栏名称: 爱可可-爱生活
知名互联网资讯博主 北邮PRIS模式识别实验室陈老师
目录
相关文章推荐
爱可可-爱生活  ·  【Iffy:智能内容审核的高效解决方案。亮点 ... ·  12 小时前  
量子位  ·  不用跟着挤DeepSeek官方了!这个神器让 ... ·  15 小时前  
宝玉xp  ·  OpenAI 发的视频:What do ... ·  昨天  
宝玉xp  ·  视频来自 Stability AI 的 ... ·  3 天前  
51好读  ›  专栏  ›  爱可可-爱生活

【[690星]sitefetch:一键抓取整个网站并保存为文本文-20250211200423

爱可可-爱生活  · 微博  · AI  · 2025-02-11 20:04

正文

2025-02-11 20:04

【[690星]sitefetch:一键抓取整个网站并保存为文本文件,专为AI模型打造的数据收集利器。亮点:1. 支持并发抓取,效率提升高达10倍;2. 自定义页面匹配规则,精准抓取目标内容;3. 提供内容选择器,精准提取页面核心内容】
'Sitefetch: Fetch an entire site and save it as a text file (to be used with AI models).'
GitHub: github.com/egoist/sitefetch
#网站抓取# #AI数据收集# #文本处理# #AI创造营#






请到「今天看啥」查看全文