标签:小红书

小红书屏蔽了所有搜索引擎,蜘蛛遵守robots协议?

笔者之前没有留意到小红书屏蔽了搜索引擎,前个月才发现,我们先看下小红书的 robots.txt 文件,明确指定要屏蔽 Google、百n度、Bing(必应)、搜狗、一搜、...