大数据Spark分析班
班级详情
| 课程简介 |
|
其实很多人对于互联网大数据都非常的憧憬，但是又因为程序的复杂，导致学员在学习的路上没有很好的坚持下来。 上海容大教育大数据Spark分析课程为想要学习Spark分析以及Scala基础语法和函数式编程的学员提供专业的辅导，让学员从编程到开发运行方面能够得到非常专业的培训，从而针对数据的离线以及实时分析打好基础。 推荐课程：大数据经典课程 |
| 人才培养方向 |
|
最高层次是企业中大数据架构师或者深度学习学习/人工智能专家，这是金字塔的顶层，不过这类人才数量偏少。 培训真正的JAVA开发和大数据开发的高素质复合型人才 |
| 课程内容 |
|
1、SCALA 环境安装搭建和IDEA初步使用、变量、数据类型、流程控制语句、函数式编程：函数定义、匿名函数、高阶函数、可变参数函数等、Scala 集合：可变和不可变、列表List、元祖Tuple及Set和Map及常见高阶函数、Scala OOP、模式匹配、隐式转换。 2、Spark介绍、本地模式配置运行、弹性分布数据集RDD（特性及操作）、SparkStandalone集群及Application运行架构流程、HistoryServer配置及使用。 3、与Hive集成分析数据、Dataset/DataFrame是什么、外部数据源接口read和write。 4、Kafka 引入及特性、Kafka 架构、数据存储结构及新版本特性、Kafka 分布式安装部署、启动及测试、Kafka内部原理及高可用性。 5、NoSQL数据库介绍、Redis 环境搭建及基本使用、Redis数据结构（String、List、Hash、Set和Sorted Set） |
| 机构环境 |
|
|
