python网络爬虫应用实战

Python这门编程语言包罗万象，可以说掌握了python，除了一些特殊环境和高度的性能要求，你可以用它做任何事。

Python作为一门脚本语言，它灵活、易用、易学、适用场景多，实现程序快捷便利，早已经成为程序员们的一门编程利器。从小到服务器运维的脚本，到大型软件开发，使用python都能够很灵活的快速实现。python不但可以快速实现大型的web应用程序，在网络层的开发，以及工程计算、数学计算上都有方便的开发手段。Map&Reduce思想在python里面也有着非常方便的实现。甚至在一些嵌入式设备上，你也可以实现自己的python应用。诸如著名的云计算框架openstack之类很多编程应用，都能见到python的身影。

随着互联网的发展，网络信息呈现指数式增长，要在短时间内获取大量信息，网络爬虫无疑是一种最适合的方法。通过爬虫获取的海量信息，我们可以对其进行进一步的分析：市场预测、文本分析、机器学习方法等。

本课程讲会从爬虫的基本知识入手，使用Python 3.6作为实现工具，一步步地讲述网络爬虫的实现。

课程大纲：

第1课 网络爬虫理论基础：网络通信基础，HTTP协议，爬虫工作原理

第2课  Python基础： 开发环境安装与使用，基本语法，文件I/O操作

第3课  网络爬虫基本工具库：urllib与Beautiful

第4课  Python的正则表达式与爬虫

第5课 抓包工具与伪装浏览器

第6课  静态网页爬取案例实战：百度词条爬取

第7课  Selenium与模拟浏览器-PhantomJS

第8课 动态网页爬取案例实战：京东商品评论抓取

第9课  利用API进行数据采集

第10课  Scrapy爬虫框架入门介绍

第11课 Scrapy爬虫实战：当当商品列表爬取

第12课 PySpider爬虫框架与实战

第13课  高级数据采集：OCR技术实现验证码自动识别，cookies与模拟登陆实战

开课时间：

本期课程将于5月26日开课，预计课程持续时间为15周

目标人群：

对网络爬虫感兴趣的学员；

课程环境：

Python2.7或以上

收获预期：