23春學(xué)期（高起本：1709-2103、專升本/高起專：1909-2103）《網(wǎng)絡(luò)爬蟲與信息提取》在線作業(yè)-00003
試卷總分:100 得分:100
一、單選題 (共 20 道試題,共 40 分)
1.在Scrapy的目錄下,哪個文件負(fù)責(zé)存放爬蟲的各種配置信息?()
A.spiders文件夾
B.item.py
C.pipeline.py
D.settings.py
2.參數(shù)headers=(),把請求頭添加到Scrapy請求中,使爬蟲的請求看起來像是從瀏覽器發(fā)起的。
A.HEADER
B.HEADERS
C.HEAD
D.BODY
3.可以通過()繞過網(wǎng)站登錄。
A.session
B.cookies
C.moonpies
D.localstorage
4.下面代碼一共執(zhí)行循環(huán)多少次(): i=0 while i<10: i+=1
A.9
B.10
C.11#0
5.Python并導(dǎo)入uiautomator來操作設(shè)備的語句是from uiautomator import ()
A.Device
B.Devices
C.Jobs
D.Job
6.Python中的()庫用于發(fā)送網(wǎng)絡(luò)請求
A.web
B.request
C.requests
D.javascript
7.Scrapy中使用Xpath獲得的結(jié)果調(diào)用了.extract方法,結(jié)果以()形式生成
A.列表
B.元組
C.字典
D.集合
8.HTTP常用狀態(tài)碼表明服務(wù)器上沒有請求的資源的是()
A.500
B.503
C.403
D.404
9.通常使用()工具來模擬瀏覽器進(jìn)行爬蟲請求
A.Selenium
B.Chrome
C.ChromeDriver
D.WebDriver
10.PyMongo中查詢所有age > 29的記錄是()
A.collection.find({'age': {'$gt': 29}})
B.collection.find({'age'>29})
C.collection.find_all({'age': {'$gt': 29}})
D.collection.find_all({'age'>29})
11.使用UI Automator獲取屏幕上顯示的文本內(nèi)容的操作是得到相應(yīng)控件后使用命令()
A.content
B.text
C.title
D.body
12.如果使用Python的數(shù)據(jù)結(jié)構(gòu)來做類比的話,MongoDB中庫相當(dāng)于一個大字典,大字典里面的每一個鍵值對都對應(yīng)了一個集合,Key為(),Value就是一個集合。
A.字典
B.集合的名字
C.集合
D.文檔
13.使用UI Automator打開微信的操作是獲取相應(yīng)圖標(biāo)后使用命令()
A.touch
B.click
C.push
D.hover
14.Scrapy自帶的待爬隊列是()
A.deque
B.queue
C.list
D.lqueue
15.啟動MongoDB使用命令mongod --() usr/local/etc/mongod.conf
A.config
B.install
C.start
D.begin
16.在Scrapy的目錄下,哪個文件負(fù)責(zé)定義需要爬取的數(shù)據(jù)?()
A.spiders文件夾
B.item.py
C.pipeline.py
D.settings.py
17.如果使用Python的數(shù)據(jù)結(jié)構(gòu)來做類比的話,MongoDB中庫相當(dāng)于一個大字典,大字典里面的每一個鍵值對都對應(yīng)了一個集合,Key為集合的名字,Value就是一個()。
A.字典
B.集合的名字
C.集合
D.文檔
18.Python中哪種容器一旦生成就不能修改
A.列表
B.元組
C.字典
D.集合
19.使用xpath方法的返回類型是()
A.列表
B.元組
C.字典
D.集合
20.python中可以用來將圖片中的文字轉(zhuǎn)換為文本的第三方類庫是
A.lxml
B.requests
C.beautifulsoup
D.pytesseract
二、多選題 (共 10 道試題,共 20 分)
21.requests中post請求方法的第二個參數(shù)可以為()
A.字典
B.列表
C.json數(shù)據(jù)
D.字符串
22.Redis中的值可以支持()
A.列表
B.哈希
C.集合
D.有序集合
23.HTTP常用狀態(tài)碼表明表明客戶端是發(fā)生錯誤的原因所在的有()
A.403
B.404
C.500
D.503
24.下載器中間件的作用有哪些?
A.更換代理IP
B.更換Cookies
C.更換User-Agent
D.自動重試
25.最常見的HTTP請求類型有()
A.GET
B.POST
C.SEND
D.RECEIVE
26.Python中的容器有()
A.列表
B.元組
C.字典
D.集合
27.如果爬蟲爬取的是商業(yè)網(wǎng)站,并且目標(biāo)網(wǎng)站使用了反爬蟲機(jī)制,那么強(qiáng)行突破反爬蟲機(jī)制可能構(gòu)成()
A.非法侵入計算機(jī)系統(tǒng)罪
B.非法獲取計算機(jī)信息系統(tǒng)數(shù)據(jù)罪
C.非法獲取計算機(jī)數(shù)據(jù)罪
D.非法獲取系統(tǒng)罪
28.要使用tesseract來進(jìn)行圖像識別,需要安裝兩個第三方庫
A.requests
B.beautifulsoup
C.Pillow
D.pytesseract
29.Python中有哪些實(shí)現(xiàn)多線程方法()
A.multiprocess.dummy
B.threading.Thread
C.process
D.PyMongoDB
30.在配置ios使用Charles的操作中,正確的有()
A.對于蘋果設(shè)備，首先要保證計算機(jī)和蘋果設(shè)備聯(lián)在同一個Wi-Fi上。
B.選擇“HTTP代理”下面的“手動”選項卡，在“服務(wù)器”處輸入計算機(jī)的IP地址，在“端口”處輸入8888
C.輸入完成代理以后按下蘋果設(shè)備的Home鍵，設(shè)置就會自動保存。
D.安裝完成證書以后，在設(shè)置中打開“關(guān)于本機(jī)”，找到最下面的“證書信任設(shè)置”，并在里面啟動對Charles證書的完全信任
三、判斷題 (共 20 道試題,共 40 分)
31.所有的異步加載都會向后臺發(fā)送請求
32.當(dāng)運(yùn)行爬蟲代碼后,出現(xiàn)"Forbidden by robots.txt"提示后,說明當(dāng)前時間段被爬取的網(wǎng)站無法訪問。
33.Python中元組生成以后還可以往里面繼續(xù)添加數(shù)據(jù),也可以從里面刪除數(shù)據(jù);
34.PyMongoDB中排序方法sort第二個參數(shù)-1表示升序
35.通用網(wǎng)絡(luò)爬蟲通常采用串行工作方式
36.Python中寫CSV文件的writerows方法參數(shù)為字典類型
37.在對XPath返回的對象再次執(zhí)行XPath的時候,子XPath開頭需要添加斜線
38.MongoDB URI的格式為: mongodb://服務(wù)器IP或域名:端口@用戶名:密碼
39.操作文本難以實(shí)現(xiàn)自動化,而操作圖形界面可以容易的實(shí)現(xiàn)自動化。
40.如果MongoDB運(yùn)行在所在的計算機(jī)上,MONGODB_HOST應(yīng)該寫成"192.168.0.1"
41.在Ubuntu下若要運(yùn)行Redis可以使用CMD進(jìn)入解壓以后的文件夾并運(yùn)行命令redis-server.exe redis.windows.conf啟動Redis
42.在發(fā)送請求時需要注意requests提交的請求頭不能與瀏覽器的請求頭一致,因為這樣才能隱藏好自己達(dá)到獲取數(shù)據(jù)的目的
43.Redis是遵守BSD協(xié)議、支持網(wǎng)絡(luò)、可基于內(nèi)存亦可持久化的日志型、Key-Value數(shù)據(jù)庫
44.HTTP只能通過POST請求才能發(fā)送數(shù)據(jù)
45.如果目標(biāo)網(wǎng)站本身就是提供公眾查詢服務(wù)的網(wǎng)站,那么使用爬蟲是合法合規(guī)的。
46.使用AJAX技術(shù),可以在不刷新網(wǎng)頁的情況下更新網(wǎng)頁數(shù)據(jù)
47.”curl http://爬蟲服務(wù)器IP地址:6800/cancel.json -d project=工程名 -d job=爬蟲JOBID“該命令的作用是啟動爬蟲
48.如果通過爬蟲抓取某公司網(wǎng)站的公開數(shù)據(jù),分析以后發(fā)現(xiàn)這個公司業(yè)績非常好,于是首先把數(shù)據(jù)或者分析結(jié)果出售給某基金公司,然后自己再買被爬公司的股票。此時,涉嫌內(nèi)幕交易,屬于嚴(yán)重違法行為。
49.Redis中查詢列表長度命令llen中l(wèi)代表left,即從左側(cè)開始數(shù)
50.爬蟲中間件的作用對象是請求request和返回response
