Docker
Docker
Docker是一个开源的应用容器引擎,它允许开发者打包他们的应用以及应用的依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器或Windows服务器上。容器是完全使用沙箱机制(程序受控的环境),相互之间不会有任何接口(类似iPhone的app)而且更轻量级。
Docke...
Docker是一个开源的应用容器引擎,它允许开发者打包他们的应用以及应用的依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器或Windows服务器上。容器是完全使用沙箱机制(程序受控的环境),相互之间不会有任何接口(类似iPhone的app)而且更轻量级。
Docke...
项目地址:https://github.com/alibaba/DataX
官方文档:https://github.com/alibaba/DataX/blob/master/introduction.md
通过datax将业务数据库oracle、mysql里的数据,抽取到hive库SRC贴源层的临时分区里,再通过Python脚本调起impala sql,将数据加工到SRC层增量分区,以及数仓其他层。
各个环节通过DolphinScheduler调度,定时控制并监控任务状态。
CEO:首席执行官,是企业的法人代表。是在一个企业中负责日常事务的最高行改官员,主司企业行改事务,故又称作司政.行政总裁、总经理或最高执行长。
COO:首席运营官,主要负责公司的运作和...
create
Read More
docker入门
此类技术博客写作要素:
1、技术调研阶段: 技术调研,学习这个组件的动机、个人场景、需求是什么。为什么要学这个。(个人或公司的需求背景)
2、
Read More
互联网金融支付业务通识
2023-07-26
金融支付业务基础通识
一、名词概念
平台账号: 用户或者商户在平台注册的用户账号,作为其唯一识别编码,一般做登陆时使用,如支付宝账号。
账户:支付机构根据客户的真实意愿为其开立的,用于记录预付交易资金余额、客户...
Read More
hive sql常见优化手段
一、SQL运行慢的常见原因
1.资源紧张,任务优先级比较低
通过大数据管理平台界面,可以查看集群当前资源情况。
任务多,时间点密集、拥堵;单任务占用资源过大;等都有可能导致sql变慢。
Read More
技术类写作模板——XX从入门到高级
【技术类模板1】[xxx]技术组件从入门到高级
作者:stevetao 时间:2021.12.26
此类技术博客写作要素:
1、<...
Read More
技术类写作模板——问题复盘