封装、继承、多态
J面向对象思想程序设计
接口、异常、正则表达式
Maven、Git、IDEA
MySQL数据库、Java Web、MyBatis
Spring、SpringMVC、Linux、ELK
搭建Java开发环境
Java变量
数据类型与运算符
循环结构与选择结构
Java反射机制
多线程编程、网络编程
XML、JSON解析方法
循环结构与选择结构
Hadoop、Spark、Spark SQL、Spark Streaming
Python、Sqoop、Redis、Tableau、Hive
Mapreduce、Flink、HDFS、Tez、YARN、Scrap
Zeppelin、Hbase、ELK、数据可视化、数据挖掘
机器学习、企业数据监管
学习目标:
1.掌握JavaEE核心技术
2.能够使用MySQL操作和管理数据
3.掌握Java SSM框架的使用
4.能够完成Java Web项目
5.熟悉Linux编程的基本使用
6.通过ELK了解数据处理的整个过程
市场价值
可胜任初级Java工程师的工作需求
月薪:8000-10000元
学习目标:
1.掌握Hadoop平台核心技术
2.掌握Hive开发
3.掌握HBase开发
4.掌握离线项目开发所需技能
市场价值
可胜任初级大数据离线处理工作,如ETL工程师,Hive工程师,数据仓库工程师,HBase工程师等
月薪:10000-13000元
学习目标:
1..掌握Scala基本编程
2.掌握Spark架构基本内容及原理
3.掌握Spark开发及使用
4.了解Spark机器学习
市场价值
可胜任Spark开发工作,如Spark开发工程师,大数据实时处理工程师等
月薪:14000-16000元
学习目标:
1.掌握Python基本使用
2.掌握Python核心库的使用
3.掌握Python爬虫
4.掌握Python简单数据分析
5.理解Python机器学习
市场价值
可胜任Python爬虫工程师,初级机器学习工程师工作
月薪:16000-20000元
学习目标:
1.掌握大数据企业级项目开发的基本流程
2.掌握项目开发的具体实现方法
3.掌握大数据高可用集群管理
4.理解并掌握系统的安全性、授权及审计、数据保护等技能
5.可独立完成学业中匹配的真实一线项目
市场价值
可胜任中级大数据开发工程师,Spark工程师,可视化工程师,ETL工程师相关工作。
月薪:18000-26000元
项目介绍
根据用户在电商网站的消费行为日志数据以及数据库数据等,分析用户的消费习惯以及消费偏好,进行构建用户画像,并对用户消费行为进行分析。
主要业务:
对电商网站日志进行收集,清洗;
对用户构建用户画像;
通过Hive对用户消费行为分析;
通过Oozie进行ETL任务调度;
通过Zeppelin进行数据可视化展示;
项目收获:
完成该项目可胜任企业离线大数据开发工作
项目介绍
根据用户访问网站的浏览信息,以及点赞关注等行为,根据日志数据,来分析判断用户的兴趣取向。
主要业务:
获取用户访问网站的日志数据,并对其进行清洗,ETL变换;
通过PySpark建立日志推荐模型;
使用Spark Streaming及ML进行用户兴趣取向实时预测;
通过Python将日志推荐数据进行存储;
建立Tableau与MySQL的链接,进行数据可视化及报表展示;
项目收获:
大型企业级项目,架构级项目讲解,让你拥有高层次的项目开发经验。
项目介绍
通过实时收集并分析股票数据信息,并对数据进行过滤,清洗,挖掘,计算,然后通过可视化框架进行展示。
主要业务:
项目数据格式定义;
基于Confluent的股票元数据管理及应用;
Flink流数据处理及实时分析;
Flink实时股票的实时分析;
Grafana/Zeppelin数据可视化;
项目收获:
掌握实时大数据分析经验
北京大学数学科学博士,主导国内顶尖研发工作
在北美IT行业拥有15年工作经验, 参与过金融、保险、医疗、零售等行业的众多大型项目开发和企业数据集成,曾任软件架构师、高级咨询顾问、大数据方案架构师等,负责大数据应用的方案设计。
大数据领域实践者、作家、培训师,专注企业大数据解决方案的咨询、设计和实施
2010年曾就职于国内知名高校和创业公司CTO,2015年就职于北美各大银行、信用局、交通和零售企业、咨询公司担任首席数据科学家和商业咨询顾问。高等教育及北美互联网专业课堂讲师。15年机器学习和数量经济模型研发经验,、20年软件开发和带领团队经验。