Oracle高级编程 用户权限及安全管理;数据备份、恢复、移植;触发器;存储过程 可掌握的核心技能:
1、掌握Oracle、NoSQL数据库开发技术;
2、熟悉Linux系统,具备Shell、Python脚本开发能力;
3、熟悉hadoop工作原理,具备Mapreduce、Hive、Hbase开发能力,以及性能调优的能力;
可解决的现实问题:
1、能够完成Hadoop大数据生态系统下大数据搜集、处理、存储、分析、计算、应用开发。
2、具备良好的自我管理能力和团队协作能力。
可胜任的工作岗位:
● 高级Java开发工程师
● Hadoop开发工程师
GitHub 随着越来越多的应用程序转移到了云上,Github作为开源代码库以及版本控制系统,已经成为管理软件开发以及发现已有代码的首选方法。
Maven项目对象模型(POM) 可以通过一小段描述信息来管理项目的构建、报告和文档的软件项目管理工具
Linux开发环境 linux 系统安装,卸载;用户管理;文件管理;应用程序管理;
Hadoop 管理与开发 Hadoop集群搭建;
Hadoop HDFS分布式文件系统:HDFS的概念、HDFS的API的应用、数据块Block、NameNode的文档目录树、NameNode与dataNode的关联;
MapReducer 框架:Shuffle机制、FileOutPutFormat、FileInPutFormat、MapReducer的通信机制、利用Yarn的资源管理和资源调度机制;
Hive数据仓库开发 Hive基本SQL操作;Hive的导入导出;Hive中文件的存储类型;Hive的内嵌函数;Hive的权限管理;Hive集群配置与管理;
NoSQL数据库Hbase开发 搭建NoSQL数据库HBase的集群;Zookeeper的选举算法、同步机制、Zookeeper集群的搭建;Kafka高吞吐量的分布式发布订阅消息系统集群环境的搭建;
阿里云 Clouder大数据认证项目:共享单车骑行分析 本认证项目讲解了共享单车的相关知识、大数据应用场景,常用数据分析方法、算法、以及数据可视化,后通过一个实验带领学员使用数据分析方法,解决了共享单车调度场景及企业关注的核心指标的分析需求。学员可参考本实验,结合企业自身业务和需求,将所学应用到实践中去。
本项目由阿里云提供项目资源,思诚教研团队提供项目开发指导,学员通过学习与考试,可获得阿里云 Clouder大数据专项技能认证证书。
阿里云 Clouder大数据认证项目:电影评价数据的采集与分析 电影评价网站记录着观影者对电影的喜好程度和评价信息,通过对相关网站用户评价信息的收集,可以为电影相关的数据的分析和挖掘做支撑,常见的后期应用包括:对电影针对的用户群体做分析、获得大众娱乐/舆情热点、电影推荐(广告推送)等。该场景也可推广至其他行业评价数据的应用。
|