专栏名称: 大数据挖掘DT数据分析

实战数据资源提供。数据实力派社区，手把手带你玩各种数据分析，涵盖数据分析工具使用，数据挖掘算法原理与案例，机器学习，R语言，Python编程，爬虫。如需发布广告请联系： hai299014

推荐：网络爬虫与文本挖掘核心技术案例实战高级研修班--上海

大数据挖掘DT数据分析 · 公众号 · 大数据 · 2017-03-27 10:17

正文

附件：

一、培训对象

对网络爬虫、文本挖掘技术研究和应用感兴趣的个人及从业者。各地方政府信息中心负责人、技术骨干；大数据产业投资团队，大数据应用开发商，大数据服务提供商等；

二、培训目标

掌握网络信息获取及文本挖掘的基本知识及深度应用，熟练运用使用Python获取网络数据并独立开发常见的爬虫项目，熟练的进行文本分析处理。

三、培训特点

1，课程体系完整科学，可以系统化学习;

2，培训采用理论知识+案例示范+练习的全案例驱动教学模式，

通过典型应用案例入手讲解知识点，不仅仅适合零基础的初学者，同时也适合经验较为丰富的操作者；

3，注重实践实战，每个模块均设置动手实践环节以协助学员解决操作中的实际问题；

4，提供全部教学课件、源代码、编程操作步骤，后期将通过学员交流群建立与授课专家的长期的答疑联系，提供长期的在线技术咨询服务;

四、时间及地点

2017年4月21日～24日上海

五、课程大纲

第一天	第1讲：网络爬虫技术基础	1.网络通信基础 2.HTTP协议简介 3.Web开发知识介绍 4.网站分析知识介绍
	第2讲：开发环境与Python基础	1.开发环境安装与使用（Anaconda套件与PyCharm） 2.Python基础数据结构（元组/列表/字符串/字典） 3.Python基础语法（条件/循环/函数/类/模块） 4.常用Python库使用案例分享 5.Python技巧与实践分享
	第3讲：网络爬虫工具库	1.认识正则表达式 2.基础Python爬虫库（urllib/Requests） 3.“漂亮”的爬虫库-Beautiful Soup 4.静态网页爬取案例分享 5.Selenium与“幻影”浏览器-PhantomJS 6.Ajax和DHTML网站爬取 7.动态网页爬取案例分享 8.利用API进行数据采集
第二天	第4讲：网络爬虫框架	1.Python网络爬虫框架介绍 2.Scrapy基本使用 3.Scrapy进阶使用 4.爬虫框架使用案例分享
	第5讲：分布式爬虫	1.爬虫队列设计 2.多线程爬虫 3.多进程爬虫 4.集群化爬取
	第6讲：网络爬虫存储	1.文件读取与保存 2.关系数据库存储-MySQL 3.分布式存储-NoSQL数据库 4.HDFS简介 5.分布式存储案例分享
第三天	第7讲：网络爬虫常用技巧	1.表单处理 2.模拟登录 3.常见验证码突破 4.爬虫代理池 5.各类网页内容处理 6.设计隐蔽的网络爬虫 7.设计容错的网络爬虫
	第8讲：文本挖掘技术基础