hesenwei 发表于 2019-11-17 13:41:07

关于url区分大小写问题导致robots.txt无法被抓取到正确信息，有大佬知道怎么修改吗

百度上看到的URL_CASE_INSENSITIVE' => true,属性为true就行了。但是小白不知道这段代码在哪改，求大神指点


之前没有伪静态的时候不太清楚有没有这个问题，应用了官方给的4.0伪静态规则，今天去提交收录才发现robots. txt抓取的信息不对，显示无法加载模块，但是测试抓取Robots. txt就能抓取到正确信息，在其他站长工具强测试robots也是显示文件不存在或文件错误。
求大神指点感激不尽！:handshake

hesenwei 发表于 2019-11-17 13:45:35

具体情况，大神可以看图片地址后边加上大小写robots   
感谢

yangyu6298086 发表于 2020-1-9 14:19:55

php版本高了
页: [1]
查看完整版本: 关于url区分大小写问题导致robots.txt无法被抓取到正确信息，有大佬知道怎么修改吗