技能标签
专业技能
精通Java/Scala全栈开发,熟悉分布式计算框架(Hadoop/Spark/Flink)及实时数据处理(Kafka/Flink),擅长数据仓库建模与ETL开发,具备大数据平台架构设计能力,熟悉Elasticsearch全文检索技术,掌握MapReduce分布式计算模型,具备Java Web后台应用开发经验
工作履历(脱敏处理)
专注于大数据平台架构设计与系统优化,主导企业级用户画像系统开发,构建覆盖4亿级用户的标签体系。设计基于Hadoop生态的数据仓库解决方案,实现日均10PB级数据处理能力。主导分布式任务调度系统开发,采用YARN资源调度框架提升集群资源利用率30%。精通Spark Streaming实时计算框架,优化数据处理延迟至秒级。具备Java Web后台系统开发经验,设计高并发分布式服务架构,支持日均千万级请求量。
项目经验(脱敏处理)
【大型用户画像系统开发】基于Spark/Flink构建实时数据处理流水线,采用Kafka实现日志采集,通过Hive进行数据存储与分析,最终构建覆盖4亿用户的标签体系,支持推荐系统实时计算。【大数据平台架构优化】设计基于Hadoop的分布式计算框架,采用HBase存储结构化数据,通过MapReduce实现数据清洗,提升集群处理效率40%。【数据仓库建设】主导ETL开发流程,使用Hive进行数据建模,设计星型架构模型,实现数据仓库日均10TB数据处理能力。【实时计算平台搭建】基于Flink构建实时数据处理系统,采用Kafka作为消息队列,优化流处理性能,将数据延迟控制在毫秒级。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
5年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接