下列符号中，用于注释robots.txt文件的记录的是（）。

单项选择题下列选项中，提供了遍历和搜索文档树的大部分方法的类是（）。

A.Tag
B.BeautifulSoup
C.NavigableString
D.Comment

单项选择题下列选项中，被称为全网爬虫的是（）。

A.增量式网络爬虫
B.通用网络爬虫
C.深层爬虫
D.聚焦网络爬虫

单项选择题下列文件中，哪个可以指定Scrapy项目中使用的管道？（）

A.middlewares.py
B.items.py
C.pipelines.py
D.settings.py

单项选择题下列选项中，用于将JSON格式的字符串解码转换为Python对象的是（）。

A.dumps（）
B.loads（）
C.load（）
D.dump（）

单项选择题Scrapy项目中，哪个文件可以定制各个组件的行为？（）

A.middlewares.py
B.items.py
C.pipelines.py
D.settings.py