为什么网站不被抓取，网站优化这个提交各大搜索引擎 huohu.so 百度搜狗搜搜都不收

阅读模式 · 发表于 2013-04-03 13:38:24

为什么网站不被抓取，网站优化这个提交各大搜索引擎 huohu.so 百度搜狗搜搜都不收录谷歌 360 有道等收录了，却从来没有再抓取过其他信息了，，robots.txt 设置地址栏输入：

西万路小混混 · 发表于 2025-11-21 10:20:50

内容很干货，没有多余的废话，值得反复看

公关 · 发表于 2025-12-12 11:10:51

楼主辛苦了，整理这么多内容，必须点赞收藏

情何以堪 · 发表于 2026-01-13 01:54:43

说的对，好好拜读下

cz1440213707 · 发表于 2026-01-16 22:55:13

学习到了，之前一直没注意过这个点，受教了

2865084310 · 发表于 2026-01-28 12:05:16

说得很实在，没有夸大其词，这种真实分享太难得了

≮_龍/kuk域_≯ · 发表于 2026-01-31 17:22:54

楼主太厉害了，整理得这么详细，必须支持

		自动登录	找回密码
密码			加入怎通

为什么网站不被抓取，网站优化 这个提交各大搜索引擎 huohu.so 百度 搜狗 搜搜 都不收