一米URL外链资源批量抓取工具

朵sunday · 发表于 2017-02-16 11:24:51

谷歌百度等绝大多数搜索引擎脚本(footprint)抓取URL；
支持手工浏览器获取url，自动过滤重复url或域名；
全网段蜘蛛爬取分析过滤URL，全球海量url资源爬取；
同IP段网站批量扫描（C段扫描）；
多种方式外链资源整理(去重/识别/过滤)；
咨询QQ:2049372380

45_wn · 发表于 2017-02-16 11:25:10

沙发！沙发！沙发！

朵sunday · 发表于 2017-02-17 11:46:07

:D:D:D:D:D:D:D:D:D:D:D

wang_wei · 发表于 2025-11-17 20:11:56

分析得很透彻，很多细节都说到点子上了～

·_小妖 · 发表于 2025-11-23 00:27:28

说得很实在，没有夸大其词，这种真实分享太难得了

西万路小混混 · 发表于 2025-11-25 03:53:47

这个思路很新颖，打开了新世界的大门，谢谢分享

西万路小混混 · 发表于 2025-11-25 12:37:43

蹲了这么久，终于看到有价值的讨论，支持一下！

小时啊 · 发表于 2026-01-12 03:18:19

楼主太厉害了，整理得这么详细，必须支持

feda77 · 发表于 2026-01-12 03:22:32

学习到了，之前一直没注意过这个点，受教了

leonseo444 · 发表于 2026-01-12 08:27:45

刚好遇到类似问题，看完这个帖子心里有底了

站长小二 · 发表于 2026-01-20 08:58:13

内容很干货，没有多余的废话，值得反复看

说不出的是-- · 发表于 2026-04-17 02:09:38

这个分享太实用了，刚好能用到，感谢楼主！

≮_龍/kuk域_≯ · 发表于 2026-04-17 05:05:46

说的对，好好拜读下

		自动登录	找回密码
密码			加入怎通