专栏名称: 大数据文摘
普及数据思维,传播数据文化
目录
相关文章推荐
艺恩数据  ·  2024年8月文娱行业市场观察 ·  3 天前  
软件定义世界(SDX)  ·  中小企业数字化建设的路径与方法 ·  1 周前  
数据派THU  ·  科普之旅 | 漫话智能体-当机器学会思考 ·  1 周前  
数据派THU  ·  多模态复合编辑与检索综述 ·  1 周前  
51好读  ›  专栏  ›  大数据文摘

可视化工程师修炼手册:跟着我爬虫+数据库+可视化八个快动作

大数据文摘  · 公众号  · 大数据  · 2017-06-04 17:48

正文



好奇过《人民的名义》里

吸睛大屏是如何实现的吗?

▲《人民的名义》中的BI Dashboard


想知道炫酷的地图背后,

数据从哪里来?

使用到哪些工具?

怎样的分析角度最能支持决策?

▲ 共享单车位置可视化


大数据文摘 x 稀牛学院特别邀请到

闻    啸“最可怕的数据可视化神器”DataV负责人

周宁奕多篇爆款文章作者、资深数据可视化工程师

单    艺:「猎聘网」首席数据官


隆  重  推  出

「数据可视化工程师」课程


6月24日

在线开讲


8带你搞定爬虫+数据库+可视化!


讲师天团


闻啸

数据可视化社区(http://datavlab.org/ ) 发起人之一,共同开发了开源组件datav.js。个人擅长技术数据可视化信息梳理及设计、数据产品图表设计开发、数据可视化大屏幕搭建开发。在公司内部推进了可视化落地,并成为独立业务发展。


周宁奕

毕业于上海交大。小站“数学的美学世界”站长(https://site.douban.com/179880/),新闻晚报专栏作者,微信应用“糊涂”(hutuco)独立作者。多次辞职,7入藏区, 骑行中国20余省。前设计师、前阿里云DataV团队,在阿里云主攻webgl、地理可视化。目前负责众安科技数据科学可视化与前端团队。


单艺

目前担任猎聘网首席数据官,负责机器学习技术和产品研发、商业数据分析以及大数据基础设施建设。具有17年的数据挖掘和系统研发经验,曾经入选“影响中国大数据产业进程100人”。之前,担任Omni-Dimension Inc(毕肯互动)和WPP Group/奥美ITOP 24/7 Networks的CTO职务,负责数据驱动的互联网广告优化技术和精准广告网络的研发;还曾经担任空中网悟空搜索副总裁和美国Yahoo!网页搜索资深工程师,从事大规模搜索技术和文本挖掘技术的研发。毕业于清华大学和美国University of Arizona,获得了管理信息系统专业的学士和硕士学位。


▲运用DataV的天猫双11动态交易额展示


你将收获

9次优质直播+就业推荐

  8次技术分享:DataV的缔造者之一闻啸现身讲课、实力与经历均酷炫到爆的周宁奕亲授课程。

周宁奕讲师作品:《爬下27万共享单车数据聊聊单车上的魔都》戳标题阅读原文

 1次就业指导猎聘CDO单艺携顶级数据团队分享大数据行业的从业现状与就业建议。

 就业推荐:稀牛学院携手猎聘网,为学员提供就业岗位信息推荐与简历推送福利。

超强辅导阵容

 16次助教答疑+小组讨论

 每周2次的助教线上答疑、讨论和优秀作业分享,帮你解决学习中遇到的问题

数据工程师核心技能

 较为全面的前后端web技术栈和对前端的理解

 对爬虫、数据库、数据清洗、可视化、部署上线等技术链路的技能学习

 对地理可视化、graph可视化等专类可视化有实操经验

在项目中学习

 你将在课程案例中,进行学习与体验;在随堂作业与结业项目中,实际进行网站数据爬取、存储、可视化,全面复习并实践教授的技能

证书

 顺利完成学业,你将获得大数据文摘x稀牛学院“数据可视化工程师”毕业证书

奖学金

■  大数据文摘 x 稀牛学院 荣誉奖学金

表现优异者,可获学费全额退返,以及荣誉纪念证书。

课程结束后开放申请,由讲师和助教对申请学员进行综合评价。

课程大纲

第0节 预习阶段

报名后加入课程专属QQ群,获取预习材料,参与群内讨论与互动。

 助教协助安装本地环境。

 讲解课程学习方式与学习的注意事项。

第1节 可视化的纵与横

 预备知识:Nodejs & 爬虫、HTML5基础、SQL

 案例:基于地图的房价分析系统,mapbox

 案例:基于图与文本搜索的邮件门分析工具,palantir与本拉登

第2节 服务器与web基础

 Express、HTML5、CSS、Javascript、Jquery 初步

第3节 如何获取数据(Node.js爬虫技术)

 案例:房价数据爬取

 作业:wikileak竞选数据爬取

第4节 数据处理(Postgres SQL)

 数据库与查询语句

 基于Postgres + Valentina Studio + Keynote/ Office和Echart的可视化

 案例: 上海房价分析

 案例: 上海轨道交通分析

▲ 上海房价分析

第5节 D3.js图表基础

 使用D3.js开发3种基础图表

 开发实时更新的动态基础图表

 作业:自身图表库的构建

第6节 D3.js图表进阶

 色彩和交互的优化

 Chrome组件的开发

▲ 实时交易的动态展示

第7节 地理可视化

 基于D3.js和leaflet的地理可视化

 用dat.gui实现参数控制

 地理投影、色彩搭配

 案例:莆田黑医院可视化

 案例:房价项目可视化


▲ 上海房价可视化

第8节 图可视化(graph layout)

 写一个最简单的乒乓球游戏(JS/CSS动画)

 物理系统的横向扩展:canvas、konva.js、盗梦空间、爱舍尔的画与脑洞打开的游戏扩展(双曲面空间与投影)

 物理引擎与图布局计算:泡泡图circle packing问题、用Gephi优化图可视化算法

 基于D3.js实现力引导图可视化

 案例:希拉里邮件门分析

 案例:社交网络分析插件

▲ 希拉里邮件门分析

结业项目

开放化的题目设定,全面覆盖课程内容,让你在感兴趣的领域自主完成数据爬取、存储、开发可视化的dashboard并上线展示的全流程。

学以致用,展示结果成为求职面试加分项!

特邀嘉宾分享

猎聘首席数据官专业解读数据行业和就业


注:

后台回复“可视化”3个字,查看更细致的课程大纲



适用人群

有志于加强专业技能的从业者

 具有全栈数据工程师的发展需求,对技能提升有相当强的紧迫感,需要系统学习掌握数据可视化的全栈技能。

准备转行至可视化岗位/领域的人员

 认识到数据可视化的价值,希望利用本次课程加强理论和实战经验,进而转向数据可视化领域。

在校生

 有一定的数据分析或者编程经历,对数据可视化感兴趣,考虑从事数据相关职业。

加入本门课程,你需要:

1、了解一些html /css /javascript 基础,对编程、数据和可视化充满兴趣;

2、强大的自主学习能力、相对充裕的学习时间(4倍于上课时间)、面对挑战的积极心态。


注:如果是零基础,建议尽早报名,参与课程的预习阶段。


课程时间


每周六晚19:30-21:30直播上课

周日和周三助教辅导

错过直播可收看回放

有效期一年

注:

课程时间暂定如上图,如有调整,请以班主任通知为准。猎聘CDO单艺的行业分析与就业分享,具体时间后续公布。敬请期待。


▲ 北京房价地图 作者:周宁奕


“如果我们画地图,一座房子在城市的尺度上只是一个点;而当全球数千个城市所有房子的价格跃然图上,你会发现许多趋势。有时并不是点本身让你发现了惊喜,而是这些点所代表的整个社会的有机生长,让你产生了新的思考和认识。”

——周宁奕

本次课程讲师

众安科技数据科学

可视化与前端团队负责人

心动不如行动!

课程价格2499元

现在报名可享受1999元早鸟价,并加入预习群提早准备!

#学生福利# 学生早鸟价1799元


 6月18日课程将恢复原价2499元。

 认真学习并完成作业,表现优异者,可获学费全额退返,以及荣誉纪念证书

(以上价格均不含税)


课程咨询报名


扫码添加客服牛妞微信,立刻报名! 

或搜索微信ID:shujupeixun

牛妞其他联系方式:

QQ:3530548572

手机:15510583388

邮箱:[email protected]


加入大数据文摘 x 稀牛学院,在这里你将与一群数据学习伙伴合作和共同成长。


(本文除《人民的名义》中的BI Dashboard图片来自网络外,其他图片均为均为本课程讲师及其团队作品,未经授权不得转载)


点击「阅读原文」,直达课程页面

↓↓↓