22春学期（高起本1709、全层次1803-2103）《网络爬虫与信息提取》在线作业答卷

admin

22春学期（高起本1709-1803、全层次1809-2103）《网络爬虫与信息提取》在线作业-00001
5 x- j) y3 Z2 |, B- E- ?% c试卷总分:100  得分:100
一、单选题 (共 20 道试题,共 40 分)
1.如果使用Python的数据结构来做类比的话,MongoDB中库相当于一个大字典,大字典里面的每一个键值对都对应了一个集合,Key为(),Value就是一个集合。
5 a, B, ]' M) [" X7 O6 bA.字典
4 Y4 Y5 ^% k  T( [, Z( bB.集合的名字
C.集合
D.文档
7 [% a: x5 E( @$ u4 \, {3 T% f- T资料:

, V- w/ V7 t2 G5 r% h! d2.Redis若要进入交互环境,需要打开终端输入()
A.redis-cli
# e! H2 A6 S) XB.redis
C.redis-cmd
) W4 J2 m  B- W  T' `5 T3 H1 m2 bD.redis-start
资料:

3.xpath中extract方法返回值类型是()
- l% W4 y) ?: HA.列表
8 n# @, M7 f! }7 q" X! p9 tB.元组
( H$ v. @  I7 O  r  C& n; kC.字典
D.集合
资料:
  d1 C: |( x! |, P# u
4.Scrapy自带的待爬队列是()
: M6 v: n( C3 F3 nA.deque
3 ~8 s; {! C) ?; Z( T) t: @4 c8 \B.queue
4 B' w! S2 n5 }9 gC.list
1 L) u' `; T6 y* x8 C0 I# uD.lqueue
* u: p4 B! I. Y资料:

& S" }, H; e- U2 Y* [. W5.请问按哪个键可以打开Chrome自带的开发者工具()
A.F10
B.F1
C.F11
9 ?6 W9 {; Y0 {$ `! |; s; XD.F12
资料:

6.服务器端记录信息确定用户身份的数据是
A.session
- c5 X5 \2 o3 M: i* p- u) @B.cookies
C.moonpies
D.localstorage
' e) i# Z1 r7 A7 _1 J资料:

7.以下关于Charles的说法正确的是( )
0 ?3 o' Y7 r" P& f: `; y8 {2 n: CA.Charles是一个跨平台的HTTP抓包工具，可以截取HTTP或者HTTPS请求的数据包
B.Charles有Windows 32/64版和Linux 64 版，但是目前还没有对Mac OS进行有效的支持。
C.Charles上面滚动的数据就是目前计算机发起的数据包。单击工具栏上面的黄色笤帚图标，可以清停止抓包。
) h0 Y: t# X2 ^6 DD.在Charles启动时，系统自带浏览器的部分HTTP流量不会经过Charles。
8 ?+ ~, l& e" G资料:

8.MongoDB中数据存储的形式类似于()
A.列表
B.元组
& Q- n! E- u6 @5 u, ^C.字典
D.集合
$ P' C3 i  k$ H2 O; b8 _资料:
) s" z2 G- Q, y# k+ o# ?
9.一般来说在页面传输登录信息都用HTTP()请求类型
5 R' I' I% @6 EA.GET
, w/ g, ~/ C4 M8 L$ w$ \9 uB.POST
6 @9 [$ P( T5 h; i1 f8 JC.PUT
D.SEND
6 Z) a! e# |1 ]. O2 W8 s资料:
3 m. s- ]. M! _3 N2 ^) a
7 A5 J! R1 E8 y10.使用了RedisSpider作为爬虫的父类以后,爬虫会直接监控()中的数据,并不读取start_urls中的数据。
A.Redis
' W1 i$ A% `: L  v/ eB.RedisSpider
C.Spider
9 f2 R- `, w+ Y9 z5 v/ bD.MongoDB
2 O1 [6 }. ?" H8 K; Z! g资料:
. F+ i9 f3 C" Q7 J% P
/ D2 \# g, v* V: I4 A$ Y- r11.当需要把Python里面的数据发送给网页时,需要先转换成()字符串
A.Python
B.Json
' J6 F7 t" K; E- \1 {C.正则表达式
$ d& K3 M, K; iD.Ajax
- r( y) C2 n. b3 P资料:
% d; _- {( i: F6 {" B% ]' y, t
" G8 s/ |5 k8 \8 a) n0 w12.lxml库中etree模块的()方法把Selector对象转换为bytes型的源代码数据
A.etree.tostring
2 g% o5 C" c0 dB.etree.convertBytes
9 g1 }7 o1 |2 J6 m6 BC.etree.toBytes
! f6 }! n+ F( `! [& e) U: |D.etree.convertstring
  v0 _* p, o% B% _6 Z' v! H资料:

# f. `( t# y5 B/ \0 r, k13.Python中以下哪个容器里的元素不能重复()
A.列表
B.元组
' p$ V& C. j$ J: R5 nC.字典
! ^4 P  r$ W2 k  M& G! r" C/ L" q/ XD.集合
; R# Z0 s7 t) \  A" k$ `$ f4 U资料:
# ^5 e( ~+ y! ^* i/ s0 `
' m1 s: a, r0 }) z14.通常使用()工具来模拟浏览器进行爬虫请求
$ @4 D4 O# L3 DA.Selenium
B.Chrome
% s) x0 B/ J  K* W( b9 AC.ChromeDriver
# p( o" p+ B0 @9 h) i% Z; UD.WebDriver
  }, ?1 n7 [; @& [2 x% e$ k7 _资料:

# p! O, R/ w5 r+ a15.下面Python代码输出为(): def default_para_trap(para=[], value=0): para.append(value) return para print('第一步:{}'.format(default_para_trap(value=100))) print('第二步:{}'.format(default_para_trap(value=50)))
+ M' ^" p& h* M1 gA.第一步:[100] 第二步:[100,50]
B.第一步:[100] 第二步:[50]
C.第一步:[100] 第二步:[]
( B3 Y+ G, Z$ a* \D.第一步:[100] 第二步:[100]
资料:

16.Python中若定义object=[1, 2, 3, 4, 5],则print(object[:3])输出()
A.12
. y9 h  L1 A- V( Q2 U  Y% vB.123
C.23
D.234
资料:

" F6 [& m1 Q/ T3 ]: \+ Z! c17.使用Xpath构造属性值包含相同字符串的路径采用()方法
3 I( A$ \8 U* y% bA.contain
B.contains
C.include
, |" }) |( k5 J! pD.includes
资料:

# T# g2 l* x1 e* P% y, d18.使用UI Automatorr长按点击的操作是得到相应控件后使用命令()
/ d& G: g+ g3 j. S2 c2 N$ oA.longclick
B.long_click
C.clicklong
D.click_long
资料:

$ N3 R0 V5 @$ r1 [. b1 b3 ?19.HTTP常用状态码表明服务器上没有请求的资源的是()
3 M5 U% P: n9 XA.500
B.503
C.403
' ~. s8 ]& Q8 J9 c; PD.404
7 ?2 s$ ?  x5 V3 n资料:

' B, k) K) S8 j$ ~20.Scrapy_redis是Scrapy的"()",它已经封装了使用Scrapy操作Redis的各个方法
A.组件
B.模块
C.控件
D.单元
! O; X$ s4 a5 I' q, F3 M资料:

+ r- e& V. y+ w* c3 A二、多选题 (共 10 道试题,共 20 分)
21.Python中有哪些实现多线程方法()
A.multiprocess.dummy
B.threading.Thread
0 @' _; N; n* S- M- d& c  iC.process
D.PyMongoDB
资料:B

! ~* b4 _' o) S% J; r22.最常见的HTTP请求类型有()
A.GET
B.POST
C.SEND
; q9 M0 F, [# w4 SD.RECEIVE
/ e' z  P; T/ s" N/ n资料:B

23.Redis中的值可以支持()
! A) r  ?. ?0 N4 U, ~$ x; h6 FA.列表
B.哈希
, ^  G+ B' L1 Y$ M3 kC.集合
1 W% N1 _8 X# J3 c+ tD.有序集合
' N6 {8 L" w1 }; o资料:BCD

24.常用的会话跟踪技术是
, J: u3 X6 z( \7 _  d/ x. m' ^A.session
. o4 v/ X/ Z: H, v1 f" cB.cookies
C.moonpies
D.localstorage
3 Q! W" j+ q, K5 z9 A. n资料:B

3 H7 R# ^8 J! G! e25.以下哪种方法是MongoDB的查找方法()
A.find
B.find_one
6 t8 E9 a* _6 G( z4 FC.finds
D.find_all
$ i! f: d0 L6 `; V资料:B
' Q( H- W& J: I3 e! Y
8 r$ J4 B( f8 \$ l  ~2 F% f' }0 R% P4 o26.针对解析源代码的BeautifulSoup对象,构造时BeautifulSoup(网页源代码, '解析器')中的解析器可以为()
A.html
B.html.parser
" k  H  c8 h$ l; K! }C.lxml
D.xml
; Y& E# Y! b4 E6 Q  I! B8 }/ I资料:

- w3 Q5 Z" s( V* K6 u27.Python中一个函数可以有()个return语句
; r7 Q, x# _3 P/ y4 a7 z! E& ]A.0
6 @: O) q6 }6 e! X" sB.1
5 P1 s- c2 a/ ^# U; \& sC.多个
8 k0 z1 @3 m' W5 C' N/ YD.2
资料:BCD

' g8 b0 I+ x! b( A$ i6 B28.Python中的容器有()
8 @+ l4 T" q/ eA.列表
( p" t7 u9 G- L! uB.元组
! K" P( R2 B+ C/ L* DC.字典
& e* _6 G' ~2 T. MD.集合
资料:BCD
' I5 B! e- L% F4 a+ ^# u
* L  {0 V; v% }% E$ K  }  L. ^  K* B29.Python中一个函数没有返回值则可以写()
) k: ]" f7 g" N2 W  k6 @4 g( JA.没有return
8 A' D% F) f" C2 X+ F4 ^B.return
; P8 j1 V* q4 P" `$ HC.return None
D.return NULL
资料:BC
+ \! P  V  D* W( N' d4 T5 h4 p) O# ^
30.下列关于在IOS上配置charles的说法正确的是()
A.不同ios设备之间会有比较大的差别，所以配置的时候需要找到对应的安装证书的入口。
2 h! [3 J4 U& uB.手机和电脑需要在同一个局域网下。
C.HTTP代理可以使用"自动"选项。
D.安装好证书以后，打开iOS设备上的任何一个App，可以看到Charles中有数据包在流动
& r% r" d5 z3 a( d8 v资料:
* Q7 Y# X0 C! k8 e' e9 R
三、资料来源：谋学网（www.mouxue.com） (共 20 道试题,共 40 分)
31.Python中使用下面代码打开文件也需要对文件进行close关闭操作 with open('文件路径', '文件操作方式', encoding='utf-8') as f
) R# `/ o) {0 l5 B- t; U* U6 Z6 X* ~资料:错误
% {0 B  f7 \2 ]* {0 t+ N2 A
32.在charles中使用CTRL+F搜索,JSON里面的中文是可以直接搜索到的。
资料:错误

( \  h  T6 Q9 p3 a! _/ U6 V. U33.Scrapy每一次发起请求之前都会在这里检查网址是否重复。因此如果确实需要再一次爬取数据,在Redis中把这个Key删除即可。
资料:正确

) j4 l% \6 U8 f( b34.插入数据时,MongoDB会自动添加一列"_id",也就是自增ID,每次自动加1
6 E: `2 Z. l1 ]' z' {* ?资料:错误
3 e$ H, ]: ^; W8 S& v- Q
35.Python正则表达式中".*"是贪婪模式,获取最长的满足条件的字符串。
/ H! q& I5 @$ l9 M资料:正确
9 P2 m9 T2 k1 @0 `( A% n
9 g3 a9 G: J% m) \+ a# }: F) k. J36.使用Scrapyd,可以实现一键部署Scrapy爬虫,访问一个网址就启动/停止爬虫
2 Z" ?3 I0 W" g' ?0 l资料:正确

# @  d! l  o* W" H2 }9 Q) i37.Python中元组生成以后还可以往里面继续添加数据,也可以从里面删除数据;
资料:错误

38.如果目标网站本身就是提供公众查询服务的网站,那么使用爬虫是合法合规的。
资料:正确
  I& p3 K# f) T! a' L* H& V7 i
. m) b+ J) A* L! I39.HTTP状态码302与307完全同义。
资料:正确
: W) K% k5 Y; w/ A" @
4 a: s) |6 u4 g, J% o! C40.如果元组里面只有整数、浮点数、字符串、一个列表,就既不能添加数据,也不能删除数据,还不能修改里面数据的值。
资料:错误
2 M( p& D- r4 q& ^* \, O7 J* G1 a
4 |/ D3 I# q/ w7 n41.HTTP状态码302表示资源永久重定向。
0 i. c/ ]' Z: q  ]; h  X- ~资料:错误
" f1 g: r. c" A9 j4 d
3 X4 j, l  b9 D2 Q42.使用异步加载技术的网站,被加载的内容可以在源代码中找到
7 n9 }& k1 A, q资料:错误

43.Python中条件语句在使用and连接的多个表达式中,只要有一个表达式不为真,那么后面的表达式就不会执行。
/ g# C0 j% o! B9 \资料:正确
* g) I3 P; B0 I1 @: ~$ x9 s
44.当运行爬虫代码后,出现"Forbidden by robots.txt"提示后,说明当前时间段被爬取的网站无法访问。
资料:错误

45.在请求头中设置User-Agent即可正常请求网站
资料:错误

5 W5 E. }4 ?. F) Q* I: t46.爬虫中间件的激活需要另外写一个文件来进行
资料:错误
3 C. ?2 p; f1 @8 h+ _; v
47.在Ubuntu下若要运行Redis可以使用CMD进入解压以后的文件夹并运行命令redis-server.exe redis.windows.conf启动Redis
资料:错误
6 U+ m, Q2 j, ?/ S' E+ P8 L
48.当使用Charles监控iOS设备或者Android设备的数据包以后,打开微信小程序,小程序的数据包不能自动被Charles抓住,需要另作处理。
+ ^" [# L, ^% a% h( E/ S6 Q资料:错误

* K' y& k  z* a8 U49.charles配置中,安装完成证书以后,在设置中打开"关于本机",找到最下面的"证书信任设置",并在里面启动对Charles证书的完全信任。
资料:正确

50.Python中写CSV文件的writerows方法参数为字典类型
. A2 X  A% ^' \5 |- L' k* ?+ t资料:错误
/ E1 @9 j2 Q  h! F
; q; s2 W/ @; f' `3 m8 b+ e! n5 r

2 d5 N% Z( C+ H4 |7 y* c! e0 M
/ a1 G8 S( u; v% u5 Y" f
* p" f' `0 L3 O6 ]4 @


3 Q5 X  K7 z7 Q' s& O! o# b$ B



; K4 x* R6 i& d* N% g