4年大数据从业经验,曾在上海锐赢信息技术有限公司,北京华城汇文化发展有限公司担任大数据工程师一职。熟读Spark核心源码,深入理解Spark工作机制,掌握Spark任务执行流程; 理解RDD属性,熟练使用RDD操作; 熟悉hive系统架构,能使用hive进行海量数据的查询分析; 具有一定的调优经验;熟练掌握基本语法,熟练使用scala面向对象编程,函数式编程; 掌握高阶函数、隐式转换、样例匹配、Actor等特性; 熟悉文件存储系统HDFS、资源管理yarn、离线计算Mapreduce工作机制;熟悉hadoop生态体系相关技术、能独立完成环境部署、以及mapreduce程序的编写与优化; 了解Kafka组件结构;掌握Kafka api使用并与Spark对接; 熟悉hbase数据库机器工作机制,能独立完成hbase集群搭建; 具有一定的hbase调优经验; 熟悉Zookeeper的架构、运行原理,并能应用为集群提供协同服务,如HA;熟悉linux常用的基本命令;技术娴熟,平易近人,讲课风格轻松愉快,条理清晰,层层剖析,结构严谨,善于用思维的逻辑来吸引学生注意力。
本页信息发布者ID为: 博雅环球学员(北京博雅环球教育), 如果有内容涉嫌虚假或违法,请通知IT教学平台,点击 我要举报
环境 4 师资 4 服务 4 效果 4