目录
百战程序员,全站22050+开发课程+文档 ,学习精选优质好课快人一步!观看视频 快捷键ALT+N

大数据全系列 教程

1869个小节阅读:467k

收藏
全部开发者教程

408考研

JAVA全系列 教程

面向对象的程序设计语言

Python全系列 教程

Python3.x版本,未来主流的版本

人工智能 教程

顺势而为,AI创新未来

大厂算法 教程

算法,程序员自我提升必经之路

C++ 教程

一门通用计算机编程语言

微服务 教程

目前业界流行的框架组合

web前端全系列 教程

通向WEB技术世界的钥匙

大数据全系列 教程

站在云端操控万千数据

AIGC全能工具班

A

A A

White Night

阅读(265)
赞(0)

3.9 表分区

###3.9.1 表分区概述

Hive 分区partition (订单介绍)

必须在表定义时指定对应的partition字段,分区的本质相当于在表的目录下在分目录进行数据的存储。

分区好处:

查询时可以通过过滤不需要的分区下的数据,减少查询时的磁盘IO操作。

  1. 单分区建表语句:

单分区表,按天分区,在表结构中存在id,content,dt三列。

以dt为文件夹区分

b、 双分区建表语句:

双分区表,按天和小时分区,在表结构中新增加了dt和hour两列。

先以dt为文件夹,再以hour子文件夹区分

理论上分区的个数可以任意多,但是常用的为单分区和双分区。

注意:定义分区和格式化语句的位置(在row format 上边)

分区的元数据保存到mysql的hive_remote数据库实例的表中:PARTITION_KEYS、PARTITION_KEY_VALS、PARTITIONS。

北京市昌平区回龙观镇南店村综合商业楼2楼226室

©2014-2023 百战卓越(北京)科技有限公司 All Rights Reserved.

京ICP备14032124号-2