Hive文件存储格式

2021-09-29

Hive的常见文件存储格式

在hive中，较常见的文件存储格式有：TextFile、SequenceFile、RcFile、ORC、Parquet、AVRO。默认的文件存储格式是TextFile。

RCFile、ORC、Parquet这三种格式，均为列式存储表。准确来说，应该是行、列存储相结合。

...

Hive数仓知识库系列（一）

2021-09-29

HIVE中数据值清洗和转换

一、基本数据类型

Hive常用操作命令

2021-09-28

查看数据库：

show databases

      Read More


      
        数据思维
      

      
        
          2021-09-22
        

        
          
          
            
              运营
            
          
          
          
            
              数据分析
            
          
          
          
            
              方法论
            
          
          
        
      

      
        一、数据决策的十三种思维方式

从系统架构来看,目前的商用服务器大体可以分为三类：

1.1 信度与效度思维



信度与效度的概念...
      

      Read More


      
        Debezium简介
      

      
        
          2021-08-11
        

        
          
          
            
              技术组件
            
          
          
          
            
              数据采集
            
          
          
          
            
              数仓建设
            
          
          
        
      

      
        Debezium是什么?

     Debezium是一个开源项目，为捕获数据更改(change data capture,CDC)提供了一个低延迟的流式处理平台。你可以安装并且配置Debezium去监控你的数据库，然后你的应用就可以消费对数据库的每一个行级别(r...
      

      Read More


      
        Debezium安装部署
      

      
        
          2021-08-11
        

        
          
          
            
              技术组件
            
          
          
          
            
              数据采集
            
          
          
          
            
              数仓建设
            
          
          
        
      

      
        实时同步MySQL到Kafka的环境搭建

Debezium是用于捕获变更数据的开源分布式平台。可以响应数据库的所有插入，更新和删除操作。

本文主要讲在kafka confluent的基础上如何使用debezium插件获取mysql binlog数据事件完成实时数据流，debezium是以插件的方式配...
      

      Read More


      
        MPP架构和Hadoop组件的关系
      

      
        
          2021-07-28
        

        
          
          
            
              架构
            
          
          
          
            
              MPP
            
          
          
          
            
              方法论
            
          
          
        
      

      
        1 系统架构分类

从系统架构来看,目前的商用服务器大体可以分为三类：

1.1 SMP

Symmetric Multi-Processor 对称多处理器结构

所谓对称多处理器结构,是指服务器中的多个CPU对称工作,无主次或从属关系。...
      

      Read More


      
        java知识体系结构
      

      
        
          2019-06-16
        

        
          
          
            
              java
            
          
          
          
            
              架构
            
          
          
          
            
              方法论
            
          
          
        
      

      
        身边不缺乏有恒心、有毅力的朋友，及时很用心努力地学习，技术水平始终有些瓶颈。
面对心仪的岗位始终可望而不可得，总觉得自己比互联网大厂员工差距甚大，总觉得投入产出不成比。努力而没有收获，难免会...
      


      Read More


      
        如何快速了解公司业务
      

      
        
          2018-05-16
        

        
          
          
            
              产品
            
          
          
          
            
              业务
            
          
          
        
      

      
        一、本职工作

梳理交接到手里的工作和内容，沟通熟悉。

1.1. 梳理公司现有的产品信息

1.1.1 熟悉产品框架

系统中的每块功能都有其独特的场景意义，代表业务对其依赖的轻重缓急。熟悉...
      

      Read More


    
      


  
  
  
  
  

  

  
  
  

  

  

  
  
  

  

  

  

  
  
  

  

  

  

  





Copyright (c) 2020 来自中国北京

Hive数据类型

Java数据类型

长度

例子

LOUJITAO

Hive文件存储格式

Hive的常见文件存储格式

Hive数仓知识库系列（一）

HIVE中数据值清洗和转换

一、基本数据类型

Hive常用操作命令

数据思维

一、数据决策的十三种思维方式

1.1 信度与效度思维

Debezium简介

Debezium是什么?

Debezium安装部署

实时同步MySQL到Kafka的环境搭建

MPP架构和Hadoop组件的关系

1 系统架构分类

1.1 SMP

数仓建设指南

1.1 数仓建设指南

java知识体系结构

如何快速了解公司业务

一、本职工作

1.1. 梳理公司现有的产品信息

1.1.1 熟悉产品框架