课程内容

Centos操作系统安装、网络IP地址配置、VI/VIM编缉器、系统管理操作、自定义变量与特殊变量、if语句、case语句、while语句、数据库概念及其功能介绍、数据库的安装与配置等

培养方向

1. 深入理解Java面向对象编程思想，掌握开发中常用的API，熟练使用集合框架、IO流、异常处理，能够基于JDK8开发
2. 掌握数据库的基本概念，能够熟练应用SQL语句操作数据，掌握常用的开窗函数，能够深入了解数据库的存储机制，能够达到数据库管理岗的基本要求

课程内容

认识大数据、Hadoop生态圈介绍、HA新特性、HDFS+HA集群配置、Flume架构、Agent内部原理、Hbase原理及架构、数据读写流程原理等

培养方向

1. 了解分布式技术及主要应用场景、Hadoop组成、安装、架构和源码深度解析以及API的应用、能够实际搭建hadoop计算框架和数据存储，并且能够根据需求进行对数据的维护，能够掌握Zookeeper内部原理、选举机制以及大数据生态环境下的应用
2. 能够部署及维护Hive数据仓库、熟练使用API、能够自定义UDF函数和UDAF函数
3. 掌握使用Flume进行数据采集工作的步骤，了解Flume在大数据框架中使用场景并在实际项目中处理数据相关的问题
4. 能够部署及维护Hbase非关系数据库，熟悉Hbase的工作原理并且根据需求设计表模式以及数据库维护。

课程内容

Scala基础、SparkCoreSparkSQL、Spark Streaming、Spark Graphx、Spark Mlib、Kafka、分布式文件搜索、ElasticSearch等

培养方向

1. 能够熟练掌握Scala基础语法，了解Scala编程语言特性，培养面向对象编程思维，逐步建立起解决问题能力，为后续学习Spark计算引擎打下坚实的基础
2. 熟练掌握SparkCore常用的API，理解Spark计算引擎技术核心原理，能够根据需求使用SparkSQL完成海量数据自动化分析处理和统计，能够根据需求使用SparkStreaming完成数据的实时计算，掌握机器学习基本思想、流程及常用算法，熟练使用Spark MLib解决实际项目中机器学习的问题，了解图计算的相关理论知识，能使用对应的理论及算法解决图计算相关问题
3. 理解kafka消息系统工作原理，能够部署kafka及维护了解kafka在大数据架构中的应用场景
4. 能够根据业务独立完成架构设计方案，完成ElasticSearch集群的搭建工作，了解ElasticSearch相关组件及使用方法，理解分布式检索及中文分词等相关技术

课程内容

Flink核心概念与应用场景、Flink集群部署及监控、容错机制、运行时架构、数据源Source，Flink Souce、Flink Sink、WindowAPI、Water Mark、状态编程、FlinkSQL、TableAPI、Flink DataStream API和DataSet API、Flink源码解析、Flink优化

培养方向

1. 熟练掌握Flink的基本架构以及流式数据处理思想
2. 熟练使用Flink多种Source、Sink处理数据
3. 熟练使用基本API、Window API、状态函数、Flink SQL、FlinkCEP复杂事件处理、使用Flink搭建实时数仓项目、熟练使用Flink框架分析计算各种指标

课程内容

P2P信用贷款风险预测
法律服务网站数据探索分析
反欺诈检测系统
.....

培养方向

1. 用户逾期预测的步骤与流程、清洗数据类别型特征、字符串字段编码处理、哑变理处理、缺失值的处理、模型的建立、模型的评估
2. 网页类型的统计与分析、网页中带特殊符号的统计与分析、统计“瞎逛用户”点击的网页类型、点击次数分析、浏览一次用户行为分析、网页排名分析、统计翻页的网页