题目内容（请给出正确答案）

[单选题]

某网页不允许搜索引擎抓取，以下代码正确的是（）

A.  <meta name=robots content=nosnippet/&gt

B.<meta name=robots content=noarchive/&gt

C.<meta name=robots content=nofollow/>&nbsp

D.<meta name=robots content=noindex/&gt

答案

D、<meta name=robots content=noindex/&gt

如搜索结果不匹配，请联系老师获取答案

您可能会需要：

重置密码查看订单联系客服

安装赏学吧APP，拍照搜题省时又省心！

更多“某网页不允许搜索引擎抓取，以下代码正确的是（）”相关的问题

第1题

合理的网页布局中，希望搜索引擎抓取的网页摘要信息出现在（)位置。（根据网页HTML代码顺序)

A.固定

B.最底部

C.最高

D.随机

点击查看答案

第2题

关于搜索引擎工作原理的逻辑描述正确的是∶（）

A.处理网页→提供检索服务→抓取网页

B.抓取网页→处理网页→提供检索服务

C.处理网页→抓取网页→提供检索服务

D.抓取网页→提供检索服务→处理网页

点击查看答案

第3题

理论上搜索引擎能爬行并抓取所有的网页（）

点击查看答案

第4题

搜索引擎蜘蛛从数据库中已知的网页开始出发，向用户用浏览器一样访问网页并抓取文件（）

点击查看答案

第5题

每个独立的搜索引擎都有自己的网页抓取程序（spider)。spider顺着网页中的超链接，连续地抓取网页，被抓取的网页被称之为（)

A.网页截图

B.网页索引

C.网页快照

D.网页标记

点击查看答案

第6题

一个网页如搜索引擎爬行抓取并存储到数据库中了，就不会再来爬行了（）

点击查看答案

第7题

搜索引擎对网页的抓取实际上就是在互联网上进行()。

搜索引擎对网页的抓取实际上就是在互联网上进行（)。

A.数据回收

B.数据采集

C.数据编辑

D.数据共享

点击查看答案

第8题

以下关于网络爬虫的描述中，错误的一项是（)。

A.在爬虫开始的时候，需要给爬虫输送一个URL列表，作为爬虫的起始位置

B.爬虫程序会抓取所有网页，以保证搜索正确性

C.根据某种抓取策略爬行新发现的URL，如此重复下去

D.对于商业搜索引擎来说，分布式爬虫是必须采用的技术

点击查看答案

第9题

对于ROBOTS文件作用，哪些描述是正确（）

A.防止非公开部份的网页被抓取

B.制止搜索引擎访问某些文件

C.提升排名

D.防止收录重复内容

点击查看答案

第10题

搜索引擎的工作原理主要包括（）

A．蜘蛛爬行

B．抓取建库

C．网页处理

D．检索服务

E．结果展现

点击查看答案

第11题

搜索引擎的工作原理是（)。①建立索引数据库②在索引数据库中搜索排序③从互联网上抓取网页

A.①③②

B.①②③

C.③①②

D.③②①

点击查看答案

警告：系统检测到您的账号存在安全风险

为了保护您的账号安全，请在“赏学吧”公众号进行验证，点击“官网服务”-“账号验证”后输入验证码“”完成验证，验证成功后方可继续查看答案！

微信搜一搜

赏学吧

点击打开微信

警告：系统检测到您的账号存在安全风险

抱歉，您的账号因涉嫌违反赏学吧购买须知被冻结。您可在“赏学吧”微信公众号中的“官网服务”-“账号解封申请”申请解封，或联系客服。

微信搜一搜

赏学吧

点击打开微信