|
|
了解基本前端技术HTML、CSS、JavaScript,了解Linux、MySQL,Redis。课程主要学习Python网络编程详解、、Python网络爬虫的环境集成、Python网络爬虫的工作原理剖析、自动化爬中技术、异步网络爬虫框架Scrapy、数据爬取项目实战、分布式多线程爬虫实战、 反扒机制攻略。
. {3 c! }" ~0 R- F, F, _4 H课程内容:
% g; Y$ w7 v9 j/ I' |5 A 课时1 爬虫实战_课程介绍
0 a5 e1 f7 m- v* q2 q) ~ 课时2 爬虫实战_ 认识爬虫7 {, g2 _$ |) a2 W! o
课时3 requests库的安装与基本使用2* }6 ?. ~4 k0 {9 T8 t
课时4 requests库中的User-Agent请求头( [: y R6 h" `" G! }! _2 K6 `" P# D
课时5 requests中的post请求
( m! x' i3 F" \/ t( B( T; K* { 课时6 了解cookie和session' w$ R$ v2 o( o' {+ W
课时7 requests中携带cookie信息0 N, n0 O/ m! ^/ D' l: H" q
课时8 requests库中的session方法0 Z, J# h" J$ _% X. P% m+ }; _
课时9 Xpath安装及基本操作; e! @. C( B/ c0 w
课时10 Xpath数据解析方法! @* r. ]' p; Y+ X1 H$ ]& a. O N
课时11 Xpath实战学习猿地登录2# F# ?$ G% d* C2 G3 u) h
课时12 爬虫实战Xpath抓取猿著文章3- [7 x1 t+ `) Y% c2 w) ?, b9 N8 o$ ~0 r
课时13 bs4的安装与三种使用方式
+ ]$ ^: _! L0 A/ x$ g 课时14 bs4实战-学习猿地-猿圈
2 j5 R) _4 @2 x ^/ q g- m3 ? 课时15 bs4-实战猿圈-代码优化
- g, K( N5 z. @ 课时16 re正则模块-介绍: `) m- i& S1 D: D
课时17 re模块相关函数-match与search
/ q7 n9 k. t8 O3 x 课时18 re模块相关函数-其它函数
7 _2 g, a8 V- R 课时19 re模块-正则表达式的定义和规则-重点3! [; T9 P: T+ D1 t
课时20 re模块-正则实战-猿来如此
$ _' m) i/ M4 k S( K
" w- ^2 T4 X- K2 }& y6 v
|
|