课程简介
-
JavaSE
掌握能力:掌握java基础编程能力、面向对象思想、集合操作、多线程操作和文件IO操作能力
胜任职位:具备Java基础编程能力,但几乎不能胜任相关开发岗
就业月薪范围:5000+ -
Hadoop生态
掌握能力:掌握实时数据流处理、构建实时数据仓库能力
胜任职位:实时数仓工程师、数仓工程师、Flink研发工程师、大数据架构师
就业月薪范围:15K-30K+ -
Spark生态
掌握能力:离线和实时数据的处理能力、Spark处理数据能力
胜任职位:Spark研发工程师、数据仓库工程师、ETL工程师、实时研发工程师
就业月薪范围:12K-22K -
Flink生态
掌握能力:掌握实时数据流处理、构建实时数据仓库能力
胜任职位:实时数仓工程师、数仓工程师、Flink研发工程师、大数据架构师
就业月薪范围:15K-30K+
1. 学习yarn框架下的MapReduce,掌握MapReduce研发,了解Hadoop集群规划,应用案例解析,掌握Hadoop的原理,Hadoop生态系统;
2. 掌握HDFS开发,学习列式数据库HBase的基本原理,应用场景,掌握基本的编程技巧,学习掌握Hive工具,分布式协调系统Zookeeper的基本原理,应用场景,掌握基本的编程技术。
机构优势
Course objectives-
01
处理海量数据
采用分布式架构处理海量数据,更大集群规模达到20台
-
02
任务详情
详细清楚的监控各项任务的进展情况
-
03
硬件监控
监控ECS、RDS和SLB等各种云服务资源,通过HTTP , ICMP等通用网络协议监控互联网应用的可用性
-
04
负载均衡
多台云主机间实现应用程序流量的自动分配。可实现故障自动切换,提高业务可用性,并提高资源利用率
-
05
大数据云主机
达内提供大数据云主机试验环境的机构
-
06
24h学习
随时随地的练习,便于师生交流
-
07
积累经验
提前体验云环境,为云越来越普遍的趋势提前积累经验
-
08
避免事故
云平台可以有效地避免项目,数据等的丢失
1.大数据的采集:大数据时代数据的采集也不再是技术问题,数据计量单位已从从Byte、KB、MB、GB、TB发展到PB、EB、ZB、YB甚至BB、NB、DB来衡量,我们怎样才能找到其内在规律;
2.大数据的挖掘和处理:大数据必然无法用人脑来推算、估测,或者用单台的计算机进行处理,必须采用分布式计算架构,依托云计算的分布式处理、分布式数据库、云存储和虚拟化技术。