1、Requests框架：自动爬取HTML页面与自动网絡请求提交

2、")#抓取百度页面

【奥鹏】-[南开大学]《网络爬虫与信息提取》19秋期末考核
第1题,如果很多爬虫同时对一个网站全速爬取,那么其实就是对网站进行了()攻击

第2题,以下哪个HTML标签表示分区或节()

第3题,使用UI Automator获取屏幕上顯示的文本内容的操作是得到相应控件后使用命令()

第4题,Python操作CSV文件可通过()容器的方式操作单元格

第6题,HTTP常用状态码表明服务器正忙的是()

第7题,使鼡UI Automator打开微信的操作是获取相应图标后使用命令()

第9题,采用以下()技术可以实现异步加载

第10题,网站根目录中哪个文件里面的内容会告诉爬虫哪些數据是可以爬取的,哪些数据是不可以爬取的()

第11题,Chrome的开发者工具中哪个选项可以查找到cookies

第12题,以下哪个命令是linux下解压缩命令()

第13题,MongoDB中数据存储嘚形式类似于()

第14题,以下哪个HTML标签表示定义列表项目()

第15题,python中可以用来将图片中的文字转换为文本的第三方类库是

第16题,下列哪项不是HTTP的请求类型()

第17题,以下哪个HTML标签表示定义 HTML 表格中的标准单元格()

第18题,当爬虫创建好了之后,可以使用"scrapy()" 命令运行爬虫。

第19题,参数headers=(),把请求头添加到Scrapy请求中,使爬蟲的请求看起来像是从浏览器发起的

第20题,以下哪个命令是利用URL语法在命令行下工作的文件传输工具()

第22题,以下哪些方法属于Python写CSV文件的方法()

苐23题,下载器中间件的作用有哪些?

第24题,如果爬虫爬取的是商业网站,并且目标网站使用了反爬虫机制,那么强行突破反爬虫机制可能构成()

第26题,通用网络爬虫通常采用串行工作方式

第27题,需要登录的网站一般通过GET请求就可以实现登录。

第28题,代理中间件的可用代理列表一定要写在settings.py里面

第30题,所有的异步加载都会向后台发送请求

第31题,在MacOS下若要運行Redis可以运行解压以后的文件夹下面的src文件夹中的redis-server文件启动redis服务

第32题,爬虫文件无法从Pycharm运行和调试,只能通过命令行的方式运行

第33题,爬虫中間件的激活需要另外写一个文件来进行

第34题,已经创建好的Scrapy爬虫*.py文件可以直接通过Python来运行

第39题,MongoDB如果需要从外网访问数据库，那么需要修改安裝MongoDB时用到的配置文件##

第41题,请描述爬虫中的深度优先搜索过程