技术栈

火车采集器

oh,huoyuyan
19 天前
人工智能·爬虫·火车采集器
网页公开数据采集工具推荐🖥️火车采集器(LocoySpider,俗称火车头) 国内老牌桌面端采集软件,本地运行,偏专业向,站长、内容从业者使用非常多。 核心能力 1、支持 XPath、正则、前后截取提取网页内容;内置浏览器渲染,可处理 JS 动态加载页面、模拟登录保留 Cookie。 2、多线程采集、定时任务、无限级列表‑详情页抓取;支持 C# 脚本扩展,自定义数据清洗逻辑。 3、导出:Excel/CSV,支持直连 MySQL 等数据库,可直接把采集数据发布到 CMS 网站,实现采集‑入库‑发布全流程。 4、免费版永久可用,适
oh,huoyuyan
1 个月前
爬虫·火车采集器
火车采集器同时运行超多任务运行优化方案当同一个采集器同时运行非常多的任务时会对于界面UI以及电脑性能都有很高要求,为了缓解这一情况,当同时运行多个任务(大概超过100),在您这边确定任务运行正常的时候,可以按下图设置这三个选项:
我是有底线的