大三学习规划路线图

路线图介绍:

本课程对大数据生态系统进行全方位讲解，有hadoop实操与底层原理应用，DFS与MapRedcue的全新解读，内含有全网独家发布的YARN调度框架的底层事件二次分发机制和Google源码级IPC和RPC的通信技术原理与报文字节码级别的协议分析，Scala语言的编程技巧与java语言的互操作性，Spark中数据处理如何弹性化、如何调优以及对Scala编程语言的典型应用。ZooKeeper作为分布式系统协同服务的原理实现与实战应用，zkCli下同zk的交互模式以及素有瑞士***之称的NC指令在zk中的运用，Hbase作为面向列族的数据库实现原理以及同ZooKeeper的整合技术，Hive数据仓库技术的使用技巧以及在传统RDBMS的交互与过渡。Mahout以R语言在机器学习领域的重要性和编程技能，Linux下虚拟化与云计算的技术讲解及实战应用。各种streaming数据处理以加压缩技术的性能对比和优化，独立搭建Hortonworks本地仓库，并利用Ambari技术在企业大规模构造大数据规模化集群时的实战过程，一站式安装、配置、调优、监控、运维大数据集群的解决方案。

本路线图针学习目标:

掌握大数据概念和核心应用场景，能够彻底认识到大数据的重要性，以及能够有效把握未来大数据的发展方向。能够掌握hadoop的技术架构和底层原理，对分布式架构能够做到更深入的认识和体会，尤其是yarn框架的底层事件分发机制、轮询机制、多线程以及nio的组合应用。还有更重要的基于google的IPC通信技术。能够独立搭建hadoop集群、配置以及管理。能够灵活应用hadoop生态系统的各种技术进行数据处理。其中对Linux的技术知识也不可小觑，能够搭建各种仓库本地，比如ubuntu软件源、ambari、maven等等一系列组件，都是在企业中极其适用的技术。掌握spark和核心技术尤其是RDD的原理与使用，还有scala语言的掌握。