- 淘宝九月八号宣布屏蔽百度。同时在Robot.txt中加入屏蔽代码。
- 而现在百度中访问淘宝,最后更新时间为九月十号。
- 只有两个可能:
淘宝的技术太烂了,竟然不能在Robot.txt中写入全部的百度爬虫的名字。
百度是一个不遵守Robot.txt的流氓。
订阅:
博文评论 (Atom)
Mastodon Daily 2026-07-17
时间范围: 7/17/2026, 12:00:00 AM - 7/17/2026, 11:59:59 PM (Asia/Shanghai) 共 0 条帖子
-
https://t.co/uNZYlXmkBs 纪录片《老摇滚》,不到1分钟就爆燃,25分钟的时候泪目…… 2017年就要过去了,我很怀念她,也怀念曾经还热爱摇滚乐的日子。 推荐大家看看这部纪录片,在这个辞旧迎新的时刻。 — 零零发 (@linglingfa) Dec...
-
使用 Cloudflare Tunnel 的 TryCloudflare 取代 ngrok ...
-
Kubernetes 应用之 JupyterHub 搭建和运维 ...
没有评论:
发表评论