Hive 创建表


本章介绍如何创建表以及如何向其中插入数据。在 HIVE 中创建表的约定与使用 SQL 创建表非常相似。

创建表语句


Create Table 是用于在 Hive 中创建表的语句。语法和示例如下:

语法

CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.] table_name

[(col_name data_type [COMMENT col_comment], ...)]
[COMMENT table_comment]
[ROW FORMAT row_format]
[STORED AS file_format]

例子

让我们假设你需要创建一个名为 employee using 创建表 陈述。下表列出了员工表中的字段及其数据类型:

序号 字段名称 数据类型
1 Eid int
2 Name String
3 Salary Float
4 指定 string

以下数据是 Comment、Row 格式的字段,例如字段终止符、行终止符和存储文件类型。

COMMENT ‘Employee details’
FIELDS TERMINATED BY ‘\t’
LINES TERMINATED BY ‘\n’
STORED IN TEXT FILE

以下查询创建一个名为 employee 使用上述数据。

hive> CREATE TABLE IF NOT EXISTS employee ( eid int, name String,
salary String, destination String)
COMMENT ‘Employee details’
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ‘\t’
LINES TERMINATED BY ‘\n’
STORED AS TEXTFILE;

如果添加选项 IF NOT EXISTS,Hive 将忽略该语句以防表已存在。

成功创建表后,你会看到以下响应:

OK
Time taken: 5.905 seconds
hive>

JDBC程序

给出了创建表的 JDBC 程序示例。

import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;

public class HiveCreateTable {
    private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
   
    public static void main(String[] args) throws SQLException {
   
        // 注册驱动并创建驱动实例
        Class.forName(driverName);
      
        // 获取连接
        Connection con = DriverManager.getConnection("jdbc:hive:// localhost:10000/userdb", "", "");
      
        // 创建语句
        Statement stmt = con.createStatement();
      
        // 执行语句
        stmt.executeQuery("CREATE TABLE IF NOT EXISTS "
            +" employee ( eid int, name String, "
            +" salary String, destignation String)"
            +" COMMENT ‘Employee details’"
            +" ROW FORMAT DELIMITED"
            +" FIELDS TERMINATED BY ‘\t’"
            +" LINES TERMINATED BY ‘\n’"
            +" STORED AS TEXTFILE;");
         
        System.out.println(“ Table employee created.”);
        con.close();
    }
}

将程序保存在名为 HiveCreateDb.java 的文件中。以下命令用于编译和执行该程序。

$ javac HiveCreateDb.java
$ java HiveCreateDb
Table employee created.

加载数据语句


一般在SQL中创建表后,我们可以使用Insert语句插入数据。但是在 Hive 中,我们可以使用 LOAD DATA 语句插入数据。

在向 Hive 插入数据时,最好使用 LOAD DATA 来存储批量记录。加载数据有两种方式:一是从本地文件系统加载,二是从Hadoop文件系统加载。

语法

加载数据的语法如下:

LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename 
[PARTITION (partcol1=val1, partcol2=val2 ...)]
  • LOCAL 是指定本地路径的标识符。它是可选的。
  • OVERWRITE 是可选的,用于覆盖表中的数据。
  • 分区是可选的。

例子

我们将以下数据插入到表中。它是一个名为的文本文件 样本.txt in /家/用户 目录。

1201  Gopal       45000    Technical manager
1202  Manisha     45000    Proof reader
1203  Masthanvali 40000    Technical writer
1204  Kiran       40000    Hr Admin
1205  Kranthi     30000    Op Admin

以下查询将给定文本加载到表中。

hive> LOAD DATA LOCAL INPATH '/home/user/sample.txt'
OVERWRITE INTO TABLE employee;

成功下载后,你会看到以下响应:

OK
Time taken: 15.905 seconds
hive>

JDBC程序

下面给出了将给定数据加载到表中的 JDBC 程序。

import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;

public class HiveLoadData {

    private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
   
    public static void main(String[] args) throws SQLException {
   
        // 注册驱动并创建驱动实例
        Class.forName(driverName);
      
        // 获取连接
        Connection con = DriverManager.getConnection("jdbc:hive:// localhost:10000/userdb", "", "");
      
        // 创建语句
        Statement stmt = con.createStatement();
      
        // 执行语句
        stmt.executeQuery("LOAD DATA LOCAL INPATH '/home/user/sample.txt'" + "OVERWRITE INTO TABLE employee;");
        System.out.println("Load Data into employee successful");
      
        con.close();
    }
}

将程序保存在名为 HiveLoadData.java 的文件中。使用以下命令编译并执行该程序。

$ javac HiveLoadData.java
$ java HiveLoadData

输出:

Load Data into employee successful