关于举办“Hadoop大数据平台开发与案例分析 ”高级工程师 实战培训提供八达娱乐,dafa888产品设计,加工贸易等业务欢迎广大客商前来洽谈业务合作。
dafa888

关于举办“Hadoop大数据平台开发与案例分析 ”高级工程师 实战培训

来源:八达娱乐 | 时间:2018-11-29

  原标题:关于举办“Hadoop大数据平台开发与案例分析 ”高级工程师 实战培训

  Hadoop 设计之初的目标就定位于高可靠性、高可拓展性、高容错性和高效性,正是这些设计上与生俱来的优点,才使得Hadoop 一出现就受到众多大公司的青睐,同时也引起了研究界的普遍关注。

  对电信运营商而言,用户上网日志包含了大量用户个性化需求、喜好信息,对其进行分析和挖掘,能更好地了解客户需求。传统经营分析系统小型机加关系型数据库的架构无法满足对海量非结构化数据的处理需求,搭建基于X86的Hadoop 平台,引入大数据处理技术的方式,实现高效率、低成本、易扩展的经营分析系统混搭架构成为电信运营商最为倾向的选择。本课程将全面介绍Hadoop平台开发和运维的各项技术,对学员使用该项技术具有很高的应用价值。

  第一部分:重点讲述大数据技术在的应用,使学员对大数据技术的广泛应用有清晰的认识,在这环节当中会重点介绍Hadoop技术在整个大数据技术应用中的重要地位和应用情况。

  第二部分:具体对hadoop技术进行模块化分拆,从大数据文件存储系统技术和分布式文件系统平台及其应用谈起,介绍Hadoop技术各主要应用工具和方法,以及在运维维护当中的主流做法,使学员全面了解和掌握Hadoop技术的精华。

  第三部分:重点剖析大数据的应用案例,使学员在案例当中对该项技术有更深入的感观印象

  本课程采用模块化教学方法,以案例分析为主线,由浅入深、循序渐进、由理论到实践操作进行设计。

  本课程结合企业转型发展及大数据发展战略,围绕企业大数据业务及行业应用市场拓展发展目标,重点讲授Hadoop的应用技术,提升企业IT技术人员的开发和运维能力,有很强的贴合度。

  业务支撑建设维护室、业务维护室、经营分析室人员;网络部、网管中心、网优中心从事大数据相关工作的人员

  掌握大数据处理平台(Hadoop、Spark、Storm)技术架构、以及平台的安装部署、运维配置、应用开发;掌握主流大数据Hadoop平台和Spark实时处理平台的技术架构和实际应用;利用Hadoop+Spark对行业大数据进行存储管理和分析挖掘的技术应用;讲解Hadoop生态系统组件,包括Storm,HDFS,MapReduce,HIVE,HBase,Spark,GraphX,MLib,Shark, ElasticSearch等大数据存储管理、分布式数据库、大型数据仓库、大数据查询与搜索、大数据分析挖掘与分布式处理技术

  第四部分:Hadoop文件系统HDFS最佳实战 理论讲授+案例分析+小组讨论

  第六部分:NOSQL数据库Hbase与Redis 理论讲授+案例分析+实战演练

  第十部分:大数据典型应用与开发案例分析:互联网数据运营 理论讲授+案例分析

  下午 第十一部分:当前数据中心的改造和转换分析-以国内外运营商、互联网公司为例

  模块一 移动互联网、大数据、云计算相关技术介绍 1、 数据中心与云计算技术应用

  5、 大数据技术在运营商、金融业、银行业、电子商务行业、零售业、制造业、政务信息化、互联网、教育信息化等行业中的应用实践

  模块三 大数据文件存储系统技术和分布式文件系统平台及其应用 1、 Hadoop的发展历程

   基于Hadoop平台的PB级大数据存储管理与分析处理的工作原理与机制

   Hadoop 大数据运维监控管理系统 HUE 平台的安装部署与应用配置

   HBase的逻辑数据模型,HBase的表、行、列族、列、单元格、版本、row key排序

   HBase的物理模型,命名空间(表空间)、表模式(Schema)的设计法则

   HBase 从节点RegionServer(分区服务节点)的工作原理,表分区及存储I/O高并发配置,以及性能调优

   HBase的存储引擎工作原理,以及HBase表数据的键值存储结构,以及HFile存储结构剖析

  5、 HBase分布式数据库简介、发展历程、应用场景、工作原理、以及应用优势与不足之处

   HBase从节点RegionServer(分区服务节点)的工作原理,表分区及存储I/O高并发配置,以及性能调优

   HBase的存储引擎工作原理,以及HBase表数据的键值存储结构,以及HFile存储结构剖析

   ZooKeeper分布式协调服务系统的工作原理、平台架构、集群部署应用实战

  9、 Kafka分布式消息订阅系统的应用介绍、平台架构、集群部署与配置应用实战

  10、 Flume-NG数据采集系统的数据流模型、平台架构、集群部署与配置应用实战

  模块十 大数据典型应用与开发案例分析:互联网数据运营 1、 案例1:贵州数据交易中心

   交易所服务:大数据交易、大数据清洗建模分析、大数据定向采购、大数据平台技术开发

   UrbanInsights:为公交公司提供基于订阅访问的大数据工具以及大数据咨询服务

   Urban Insights数据源、数据收集、数据仓库、数据分析——设计运营线路

  模块十一 当前数据中心的改造和转换分析-以国内外运营商、互联网公司为例 1、 流商业大数据解决方案比较

  张老师:阿里大数据高级专家,国内资深的Spark、Hadoop技术专家、虚拟化专家,对HDFS、MapReduce、HBase、Hive、Mahout、Storm、spark和openTSDB等Hadoop生态系统中的技术进行了多年的深入的研究,更主要的是这些技术在大量的实际项目中得到广泛的应用,因此在Hadoop开发和运维方面积累了丰富的项目实施经验。近年主要典型的项目有:互联网公共数据大云(DAAS)和构建游戏云(Web Game Daas)平台项目等。

  工业和信息化部全国网络与信息技术项目管理中心颁发的-《大数据开发高级工程师证书》。该证书可作为专业技术人员职业能力考核的证明,以及专业技术人员岗位聘用、任职、定级和晋升职务的重要依据。注:请学员带一寸彩照2张(背面注明姓名)、身份证复印件一张。

  6800元/人(含教材、培训费、考证费以及学习用具等费用) 食宿统一安排,费用自理。返回搜狐,查看更多

相关www.9896.com

    无相关信息