《网络爬虫与信息提取》20春期末考核（参考资料）南开大学 资料

admin

《网络爬虫与信息提取》20春期末考核-00001
) i; C. d2 G0 y1 J试卷总分:100  得分:70
4 a$ Q, t9 B" o一、单选题 (共 20 道试题,共 40 分)
1.如果使用Python的数据结构来做类比的话,MongoDB中文档相当于一个()
2 j; j& V8 a  B) m# D8 D, IA.列表
5 j$ L) K% y; i; Y7 m4 OB.元组
- W3 P# h9 y6 A( ^7 t0 [C.字典
; h0 r, \4 i2 R# `" |5 h$ sD.集合
正确资料:

& S! Q0 \# l  Q- V' d2.使用UI Automatorr输入文字的操作是得到相应控件后使用命令()
A.settext
B.set
C.set_text
3 D( B3 z# ^8 U/ n3 ~D.text
) u& H% Q7 M% s! F9 a0 H) P正确资料:

3.在Scrapy的目录下,哪个文件负责存放爬虫文件?()
, S" ~' V- ?/ f6 `$ h  lA.spiders文件夹
1 B7 f* v! W! b" p: tB.item.py
C.pipeline.py
8 L+ _" f. t$ s5 _0 gD.settings.py
正确资料:

4.HTTP常用状态码表明服务器正忙的是()
% i% H& w) v0 W1 ^A.500
B.503
+ r& ^0 z5 K4 U( I& E0 _3 CC.403
  p% M" F1 s( H+ G7 GD.404
正确资料:
3 _9 |8 a6 U/ I- P" V) F  L3 Y
' C" n4 R! J9 N0 z5.如果很多爬虫同时对一个网站全速爬取,那么其实就是对网站进行了()攻击
! b' l7 p% q6 v3 u8 b, r( vA.XSS
B.DOS
C.DDOS
D.跨域
* T& H7 h4 k/ F& S6 B3 z- ?正确资料:
+ U1 h: @8 r5 u. b- C2 g' z2 m
6.使用UI Automatorr判断元素是否存在的操作是得到相应控件后使用命令()
A.exist
B.exists
) h( {  x0 p6 H  RC.isnull
D.contains
- c: M; K% D$ c正确资料:
9 t  W3 P4 l0 }9 c7 p
7.带上通过Chrome浏览器从评论页面复制而来的()再发起请求,可以减少爬虫被网站封锁的概率
  G9 G, Y1 N' wA.Cookie
5 ~" p$ x: [& B; A9 v; {* rB.Html
6 J( c/ e0 ^% @! y3 p+ UC.Headers
, K( H: W! c0 A! t( a. eD.CSS
正确资料:

8.Redis中查看一个列表长度,使用关键字()
A.len
B.length
4 d& N6 [% D, A% LC.llen
/ u, F: n- I' u3 i" @" \D.count
正确资料:
5 E& b; o9 T4 P' ?+ c! p; t) b
9.使用Xpath获取文本使用()
A.text
2 R5 h" a" x; K, {$ u$ {# UB.text()
" h5 G3 X# A% l8 WC.content
3 b7 g1 I9 k0 d6 E0 L. ]D.content()
' X: [! ^" Q6 I5 j/ t7 |正确资料:
9 L# ?9 w0 d+ x  z9 K$ {4 h
, v% c9 V' c5 b: f10.使用python定制mitmproxy,下面的语句请求的是()。{req.headers["User-Agent"]}
A.headers
/ k6 ~+ v* o% L1 Q  j! _* R  ZB.文本内容
C.目标网站
: F2 K: D  _! I1 j. [, _D.user-agent
6 P. D! n+ \0 g- i正确资料:

! O( R4 r" s- q  @( V& N. \1 a11.Python中Object={1, 2, 3, 4, 5},则Objcet是()
A.列表
B.元组
! \7 f7 \. i3 J# n4 tC.字典
D.集合
正确资料:
! p. h6 i) Y) t+ _5 l" R. {
12.在Scrapy的目录下,哪个文件负责存放爬虫的各种配置信息?()
A.spiders文件夹
B.item.py
$ u7 y& z, y, n" EC.pipeline.py
D.settings.py
8 k4 `8 x2 r, K" J正确资料:
( K! l& V& f  K! n- S9 D1 ]. l5 N
) I4 r; ]# j( F1 e7 f8 S% N; v13.Redis是一个开源的使用()语言编写
- S& |5 `; Z  c& Y7 RA.ANSI C
B.C++
- m( f4 J% T' JC.JAVA
6 h  N0 g3 K0 Y0 B8 x% Y: ~D.Python
正确资料:
1 V$ }, r9 {  ~' i3 g
14.某些网站在发起Ajax请求时会携带()字符串用于身份验证
A.Token
) m5 n$ b& a$ M9 s# kB.Cookie
C.ReqTime
3 N$ @  I" h+ ]8 WD.sum
正确资料:

15.使用UI Automatorr点亮屏幕的操作是得到相应控件后使用命令()
2 I1 p' t6 F2 G8 [& L1 S: k, K! J& [A.wakeup
% z' U/ ~+ d; o0 C! R5 \B.light
C.bright
D.sleep
: a: r1 ?3 G& x6 x, f1 J  I正确资料:
* y- d$ f9 a$ [' E
16.Chrome的开发者工具中哪个选项可以查找到cookies
1 v8 ~1 N+ Y4 s9 w: iA.Elements
B.Sources
0 O( C* \) q* D( H6 |C.Network
D.Peformance
; q& ?. a$ C/ s6 \% D$ Y正确资料:
" n: c9 n, ~% j0 N- [6 R6 @
1 J" @: S+ d- q9 h; S5 p5 t4 ^17.Scrapy中使用Xpath获得的结果调用了.extract方法,结果以()形式生成
7 t- E2 l" _$ y5 g2 k5 I: dA.列表
4 k. a6 b4 v( U. M3 c9 eB.元组
% V+ F4 T0 _4 \, ?C.字典
D.集合
正确资料:

7 X6 a$ ^8 d- L$ f/ T18.以下哪个命令是创建文件夹命令()
  H# h$ d6 r. sA.curl
" H' }( s5 x, h1 S8 TB.tar -zxvf
. y& Q0 y9 t* {& XC.mkdir
* d/ Y" d% W2 m* x9 ED.cp
正确资料:

2 `% I) |$ }! _5 u5 e' L: U19.可以通过()绕过网站登录。
A.session
0 A( }: v: i; P% IB.cookies
C.moonpies
* m  n$ r. j/ l4 h% b9 ED.localstorage
/ v; t: `5 C  b4 \( c7 c9 t1 Q正确资料:
9 X) G8 F9 h* I( x% u6 Q. t9 b
20.Python中把列表转换为集合需要使用##函数
7 V; E  {% k2 g5 n8 D& ]9 nA.set
, \5 l5 m6 y7 W; v1 XB.list
C.convert
D.change
正确资料:

二、多选题 (共 5 道试题,共 10 分)
0 ^& [# n& }; f! |2 z6 }# y6 E21.Python中的容器有()
0 {% R0 Q& h- `) lA.列表
B.元组
, N5 r" v: b) [8 ^: w+ A5 AC.字典
D.集合
7 K. ~0 K& n3 W/ {* f% `3 y正确资料:BCD

22.HTTP常用状态码表明表明服务器本身发生错误的有()
  ^0 b- Z' N( z3 I4 hA.403
B.404
C.500
D.503
正确正确资料:
+ S* V' c' Z% y  K
23.Python中哪种容器生成后可以修改内容
2 n  s( P5 z, A* UA.列表
B.元组
C.字典
' C+ Q5 Z1 U* q8 @5 |4 hD.集合
2 H! @+ R! ^0 V1 o正确正确正确资料:
3 ~7 b8 f& n# S" o* T0 f# H
& z5 u4 O* z( I" t+ b2 [, s24.最常见的HTTP请求类型有()
A.GET
: H/ v# [' _. g( Y; z7 \B.POST
C.SEND
5 R, c* ?. }7 q7 D, AD.RECEIVE
正确资料:B
4 V. c4 V# s/ b8 E) L2 B5 B
25.BS4可以用来从()中提取数据
9 J+ I( f$ m' K, p$ L& c) \A.HTML
B.XML
C.数据库
D.JSON
3 `& [* }' `+ Y正确资料:B
/ b" m5 Z% ?1 G1 a" l4 s
6 C* [2 |$ q$ _6 _0 |三、资料来源：谋学网（www.mouxue.com） (共 10 道试题,共 20 分)
9 f/ b; X$ N$ h* e& w$ c26.在Linux的终端使用apt-get命令安装一系列依赖库时,其中如果存在有已经安装的库,会覆盖掉之前的库重新安装
* x; ~. D. E, K) s/ v2 I$ j资料:错误
9 O! H" g  V5 m8 E
27.使用Nginx反向代理到Scrapyd以后,Scrapyd本身只需要开通内网访问即可,不许经过输入密码
资料:正确
# v) x( n0 e! z" |) G3 Q
28.process_spider_output(response, result, output)是在下载器中间件处理完成后,马上要进入某个回调函数parse_xxx()前调用
资料:错误

+ j4 T& z6 r. |29.Robo 3T与RoboMongo是完全不一样的软件
6 C( d8 C6 C& ]: O* l资料:错误

6 `8 L* s; E2 {5 K# V% v7 p# ?/ `30.Python正则表达式中".*?"是非贪婪模式,获取最短的能满足条件的字符串。
资料:正确
9 ^- l5 n& b% P* D% c; M* Q
) s9 r: Z; ?% W* m/ p: Q( K; F31.Redis插入数据都是插入到列表右侧,因此读取数据也是从右侧读取
. \; N: I. }- s' [资料:错误

' L) |9 g. G9 p* H. ~32.爬虫登录需要识别验证码可以先把程序关闭,肉眼识别以后再重新运行
资料:错误
# W; c. z6 A- i* w6 m) [
33.在Ubuntu下若要运行Redis可以使用CMD进入解压以后的文件夹并运行命令redis-server.exe redis.windows.conf启动Redis
* ]. U/ V: h  D8 E资料:错误

34.middlewares.py是下载器中间件
资料:错误

0 j; ~7 e) ?4 h35.在charles中使用CTRL+F搜索,JSON里面的中文是可以直接搜索到的。
; D7 ?& x) u) s9 ~1 q资料:错误
) C  K: D8 W/ y7 W* g; Z/ }
四、主观填空题 (共 4 道试题,共 8 分)
36.使用了RedisSpider作为爬虫的父类以后，爬虫会直接监控##中的数据，并不读取start_urls中的数据。
' h1 ~& N! [, i" ^资料:Redis
. @" A9 |: v/ O4 j- |. a  a
37.一般通过##表达式来解析网页数据
$ J- F5 O6 g) A6 _& ~0 G* C资料:正则
1 v9 ^% e# F4 R' h
5 n4 D- F% e3 B& f  C; J2 Y38.实现异步加载需要利用##技术
正确资料:jax
2 v6 \- M" ~: u* |3 ]
7 \. K2 ?8 H9 d) p) @+ q* N39.Python中定义函数关键字为##
4 m  ]. K! ~5 m5 g* h  H% O正确资料:ef
- x" Q5 _% A' R& \
五、更多资料下载：谋学网（www.mouxue.com） (共 2 道试题,共 10 分)
$ W, e& K: s7 v7 ^40.Python正则表达式中search和findall方法比较
' e: _6 O2 H- U2 X" x资料:search()的用法和findall()的用法一样，但是search()只会返回第1个满足要求的字符串。一旦找到符合要求的内容，它就会停止查找。<br><br>
$ u! {0 D7 s5 j9 q
41.在MacOS下安装Scrapy，当pip的网络受到干扰导致安装的速度很慢时，应该如何应对？
资料:可以使用一些代理工具来让网络变得稳定，例如ProxyChains。

六、更多资料下载：谋学网（www.mouxue.com） (共 4 道试题,共 12 分)
& Q* i) n! a! e9 V  F- t42.multiprocessing
资料:multiprocessing本身是Python的多进程库，用来处理与多进程相关的操作

43.URI
资料:Uniform Resource Identifier，统一资源标志符<br><br>

6 O" @1 j1 L# u44.CSS
5 ]) Y" z! Z, F, I# s  `正确资料:ascading Style Sheets，层叠样式表<br><br>
' C. p+ d6 A8 j' i/ i0 T
45.HTML
! M) Q) t% T7 G% P' h, B( p$ H资料:HTML是一种结构化的标记语言，可以描述一个网页的结构信息<br><br>
- J" g, x) i+ V/ v( n
6 D- A8 p; F5 S


& g% R3 L  h  e5 K$ K


0 Z4 l# V+ r/ u# `3 z  k5 I
( m; r, ~5 a' M2 z& E# l. `/ l  k

% k. p- }/ N( b3 g9 Y3 A

艺术家

不错，谋学网很信誉

sam8050

不错，谋学网很信誉

简单

下次优惠点