网友您好, 请在下方输入框内输入要搜索的题目:
题目内容
(请给出正确答案)
robots.txt的作用是()。
- A、禁止搜索引擎蜘蛛抓取特定URL
- B、给搜索引擎蜘蛛提供网站地图文件
- C、以上都对
参考答案
更多 “robots.txt的作用是()。A、禁止搜索引擎蜘蛛抓取特定URLB、给搜索引擎蜘蛛提供网站地图文件C、以上都对” 相关考题
考题
在robots.txt文件中设置了禁止所有搜索抓取,下列正确选项是?()A、"User-agent·Allow:/"B、"User-agent·Disallow:/"C、"User-agent:BaiduspiderDisallow:/"D、"User-agent:GooglebotAllow:/"
考题
某网站禁止百度蜘蛛索引所有网页,以下robots.txt文件正确的是:()A、{User-agent:BaiduspiderDisallow:}B、{User-agent:BaiduspiderAllow:*}C、{User-agent:BaiduspiderAllow:/}D、{User-agent:BaiduspiderDisallow:/}
考题
下列选项中,关于robots.txt文件的说法正确的是()A、robots.txt文件存放于空间根目录下B、robots.txt是搜索引擎蜘蛛访问网站的时候要查看的第一个文件C、如果robots.txt不存在,搜索引擎蜘蛛将能够访问网站上所有未被口令保护的页面D、robots.txt文件只需要存放在空间任意位置就行
考题
填空题柴油机连杆的作用是作复杂的()运动。
热门标签
最新试卷