|
|
了解基本前端技术HTML、CSS、JavaScript,了解Linux、MySQL,Redis。课程主要学习Python网络编程详解、、Python网络爬虫的环境集成、Python网络爬虫的工作原理剖析、自动化爬中技术、异步网络爬虫框架Scrapy、数据爬取项目实战、分布式多线程爬虫实战、 反扒机制攻略。
6 ^" Q4 ^' H8 h8 W. i! Z5 O课程内容:
5 M+ g7 A! W0 o. q2 T) J 课时1 爬虫实战_课程介绍% I, l2 @9 a7 o0 @6 z/ z; E
课时2 爬虫实战_ 认识爬虫
. R9 K% p. W Q7 M6 h p% h9 ~ 课时3 requests库的安装与基本使用2/ K% I2 m$ @3 `9 }) _# W
课时4 requests库中的User-Agent请求头
; B0 h }) z! |& X6 f: S 课时5 requests中的post请求! s! W4 u4 `5 V$ ~+ {
课时6 了解cookie和session
, K8 v7 C0 R# g) O 课时7 requests中携带cookie信息/ w* T/ ^/ T) ?7 L1 T C9 r
课时8 requests库中的session方法
' m# Y/ P ]: F. N 课时9 Xpath安装及基本操作$ E7 \; w% S6 f
课时10 Xpath数据解析方法
8 c: z# a/ B* }8 A3 _% [5 V 课时11 Xpath实战学习猿地登录2 p Q' |* @+ v# K& J' [; y/ ]
课时12 爬虫实战Xpath抓取猿著文章3
! _) \! ^9 [( W( v# p/ O! m, {; R, J 课时13 bs4的安装与三种使用方式' Q& t8 g8 x+ d/ I
课时14 bs4实战-学习猿地-猿圈: X& b1 w' \$ ?2 e
课时15 bs4-实战猿圈-代码优化 z( r. N# {$ Z. w/ z% j0 q$ ^
课时16 re正则模块-介绍
6 P! ?1 b' Z4 _% |* W 课时17 re模块相关函数-match与search1 K3 y) b" b7 w5 B% c1 F# u" K
课时18 re模块相关函数-其它函数
3 G, j9 Y6 D! \' { 课时19 re模块-正则表达式的定义和规则-重点3) D# t& f$ v, R. V
课时20 re模块-正则实战-猿来如此! q+ n. x$ e: n
+ {0 v. J/ [( ^. G5 Y5 w) Z
|
|