hive中关于数据库与表等的基本操作

时间:2023-08-15 16:19:26

一:基本用法

1.新建数据库

  hive中关于数据库与表等的基本操作

2.删除数据库

  hive中关于数据库与表等的基本操作

3.删除非空的数据库

  hive中关于数据库与表等的基本操作

4.指定数据库的位置

  LOCATION:指定数据库的位置,不会在系统的默认文件下。

  hive中关于数据库与表等的基本操作

5.在指定数据库中新建表(验证在指定的数据库中可以建表)

  hive中关于数据库与表等的基本操作

6.在页面上观看表

  可以看到在指定的目录下有一张新建的表。

  但是,没有看到指定的数据库。

  hive中关于数据库与表等的基本操作

7.新建表

  hive中关于数据库与表等的基本操作

8.删除一张表

  drop  table if exists student;

  hive中关于数据库与表等的基本操作

9.清空一张表

  hive中关于数据库与表等的基本操作

10.加载数据

  1)从本地加载

  hive中关于数据库与表等的基本操作

  2)从HDFS上加载

  hive中关于数据库与表等的基本操作

  3)区别:

    移动。

    hive中关于数据库与表等的基本操作

11.查询

  hive中关于数据库与表等的基本操作

12.描述一张表

  一张表的一些信息。

  hive中关于数据库与表等的基本操作

13.查看方法

  hive中关于数据库与表等的基本操作

14.描述方法

  hive中关于数据库与表等的基本操作

二:hive的参数的用法

1.到指定的数据库

  hive中关于数据库与表等的基本操作

2.命令行执行SQL  

 hive中关于数据库与表等的基本操作

3.执行文件里的sql

  hive中关于数据库与表等的基本操作

4.启动时指定hive的陪置

  hive中关于数据库与表等的基本操作

5.查看当前的配置,更可以更改配置

  hive中关于数据库与表等的基本操作

三.hive shell中常用的操作

1.访问本地文件系统

  hive中关于数据库与表等的基本操作

2.访问hdfs

  hive中关于数据库与表等的基本操作

四.hive中表的使用

1.创建表的三种方式

  1)第一种方式:普通方式

  hive中关于数据库与表等的基本操作

  2)第二种方式:as select ,子查询方式

  特点:将子查询的数据和结构复制给新的表。

  hive中关于数据库与表等的基本操作

  3)第三种方式:like

  特点:复制表的结构。

  hive中关于数据库与表等的基本操作

2.表的类型

 1)新建员工表

  hive中关于数据库与表等的基本操作

  2)新建部门表

  hive中关于数据库与表等的基本操作

  3)默认表的类型:管理表

  4)问题:文件还有一份,多人使用时,可以通过location指定创建多张表

  hive中关于数据库与表等的基本操作

  看在HDFS中的效果

  hive中关于数据库与表等的基本操作

  没有加载数据,但是依旧可以使用emp的数据,因为使用的目录。

  hive中关于数据库与表等的基本操作

  如果这时候删除掉emp1:

  这时,会删除掉元数据的信息,同时删除在HDFS中表的两个文件夹emp与emp1,但是hive中还保留着emp。

  5)解决方案

  使用外部表。

3.创建外部表

  这时,在HDFS上依旧只有一张dept的元数据表。

  hive中关于数据库与表等的基本操作

4.EXCERANL新建的是外部表

  hive中关于数据库与表等的基本操作

5.外部表的好处

  这时,删掉dept_ext,dept表的元数据依然还在。

6.分区表

  当前的web服务器:    

    20161019.log
    20161020.log
    20161021.log
    20161022.log

 

  任务:分析前一天的数据
  第一种: /logs/20161019.log
         20161020.log
         20161021.log
         20161022.log
      select * from logs where date='20161022';
      先加载再过滤

  第二种: /logs/20161019/20161019.log
         /20161020/20161020.log
      select * from logs where date='20161022';
      直接加载

7.新建分区表

  hive中关于数据库与表等的基本操作

  这时,HDFS上出现字段

  hive中关于数据库与表等的基本操作

8.多级分区

  hive中关于数据库与表等的基本操作

9.多级分区的效果

  hive中关于数据库与表等的基本操作