【基本信息】
籍贯:河南信阳 出生日期:1992.08.04
【教育经历】
2011.09~2015.06 海南大学 本科(生物科学专业)
【工作经历】
联通支付有限公司 大数据开发 2021.03 ~ 至今
北京中海通科技有限公司 高级开发工程师 2019.03 ~ 2021.02
北京航天智造科技发展有限公司 java开发(Daas组) 2017.11 ~ 2019.03
广东华盈医药科技有限公司 java开发 2015.09 ~ 2017.02
【技术】
擅长:Java后端、scala、python、shell等语言;
行业: 工业物联网行业大数据、互联网金融行业大数据、电商业务
技术栈:涉及大数据组件搭建运维,数据ETL,数仓sql查询分析,实时流式数据处理;调度任务。
数仓建设、维度建模;数据治理。数据爬虫;.
采集:flume、datax
存储:hadoop、hive、hbase;
中间件:kafka;
计算:spark、flink
调度:azkaban、dolphinscheduler
分析:clickhouse、starrocks
【说明】
记录部分学习过程!
从事开发以来,一直有边工作边学习的习惯,日积月累攒了很多份学习笔记,有些技术都不怎么流行了。又由于本人比较懒,随缘更新了!