在你告诉我“你都尝试过什么”和“请自己测试”的之前,我想指出来的是,对于搜索引擎上的任何网站而言,
例如,是否可能允许以下内容:
我不是很确定。 需要帮忙吗?
robots.txt
更新得非常慢,所以如果您可以提供理论经验,那将不胜感激。例如,是否可能允许以下内容:
http://www.example.com
并且区块:
http://www.example.com/?foo=foo
我不是很确定。 需要帮忙吗?