为啥有的网站同时设置 cloudflare 的 IUAM 跟 robots.txt，这两者不冲突吗？cherbim3年前发布710在我看来 的 是对 client 做一些技术上的门槛限制以减轻 ddos, 我更觉得是其 webmaster 期望访问者必须是使用一般意义上的 browser 。我的疑问是开启了 iuam 的网站期望被搜索引擎收录吗？搜索引擎在未拿到 robots.txt 之前怎样对待开启了 iuam 的网站？
没有回复内容