|
|
了解基本前端技术HTML、CSS、JavaScript,了解Linux、MySQL,Redis。课程主要学习Python网络编程详解、、Python网络爬虫的环境集成、Python网络爬虫的工作原理剖析、自动化爬中技术、异步网络爬虫框架Scrapy、数据爬取项目实战、分布式多线程爬虫实战、 反扒机制攻略。- |, z: o) v; B$ }
课程内容:
, E: |" h$ J8 z2 M$ Z+ I 课时1 爬虫实战_课程介绍
G: ]3 v2 C7 a" M+ y 课时2 爬虫实战_ 认识爬虫: f4 s9 f' S8 o
课时3 requests库的安装与基本使用2/ R8 C# s) D' r1 W
课时4 requests库中的User-Agent请求头4 S9 R. Y( \8 }: e
课时5 requests中的post请求, x0 e8 J2 V0 o9 I. a5 p) S- z: w
课时6 了解cookie和session
- Z7 ~! f9 M7 ?! F* u a1 r# V 课时7 requests中携带cookie信息
3 U) ?" t( D0 s; K; { 课时8 requests库中的session方法7 D. _; ?2 g$ s1 n3 \* ^( }
课时9 Xpath安装及基本操作, F6 l2 u9 `! r8 x4 `$ k
课时10 Xpath数据解析方法
" ^5 ]" f6 m1 c# A; w2 P3 o 课时11 Xpath实战学习猿地登录25 @7 y7 K- d; I- n, @/ i5 r
课时12 爬虫实战Xpath抓取猿著文章36 G. I2 _8 r& V# |3 u. ?
课时13 bs4的安装与三种使用方式
& ?( m E, }* H 课时14 bs4实战-学习猿地-猿圈3 q \$ L0 X4 s1 W, ^7 w+ i
课时15 bs4-实战猿圈-代码优化
: j- o- L- O+ C 课时16 re正则模块-介绍3 P3 G2 {* Y" m' b& g; ]
课时17 re模块相关函数-match与search) A; y, G5 A8 i9 ^5 L$ X3 } e& U- d
课时18 re模块相关函数-其它函数% Y" b4 }& h) _, W( h1 n L' W0 \% L
课时19 re模块-正则表达式的定义和规则-重点3
; K0 f2 Q- ?; I! J( @( ^ 课时20 re模块-正则实战-猿来如此
- y! Q% q: m6 \- m7 @4 E/ M% k( P R 9 E# [5 i. p8 _4 G6 m" |
|
|