hive数据库怎样导入数据

在 Hive 中导入数据有多种方式，具体用哪种取决于你的数据来源（本地文件、HDFS、其他表等）。下面按常见场景给你总结一下。

一、从本地文件导入 Hive 表

1️⃣ 使用 LOAD DATA LOCAL INPATH

适用于：本地服务器上的文件（如 CSV、TXT）

LOAD DATA LOCAL INPATH '/home/user/data.txt'
INTO TABLE test_table;

覆盖已有数据：

LOAD DATA LOCAL INPATH '/home/user/data.txt'
OVERWRITE INTO TABLE test_table;

✅ 要求：

• 文件格式要和表结构匹配
• 表一般是 TEXTFILE

二、从 HDFS 导入 Hive 表

2️⃣ 使用 LOAD DATA INPATH

适用于：HDFS 上的文件

LOAD DATA INPATH '/user/hive/data/data.txt'
INTO TABLE test_table;

⚠️ 注意：
不加 LOCAL 表示从 HDFS 导入，文件会被移动到 Hive 表目录

三、从已有 Hive 表导入数据

3️⃣ INSERT INTO / INSERT OVERWRITE

INSERT INTO TABLE table_b
SELECT * FROM table_a;

覆盖写入：

INSERT OVERWRITE TABLE table_b
SELECT * FROM table_a;

也可以加条件：

INSERT INTO TABLE table_b
SELECT * FROM table_a
WHERE dt='2024-01-01';

四、创建表时直接指定数据位置

4️⃣ 外部表（External Table）

CREATE EXTERNAL TABLE ext_table (
  id INT,
  name STRING
)
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','
LOCATION '/user/hive/external_data';

✅ 数据已在 HDFS，不需要“导入”

五、使用 Hive 支持的文件格式

常见建表示例：

CREATE TABLE user_info (
  id INT,
  name STRING
)
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','
STORED AS TEXTFILE;

其他格式：

• STORED AS ORC
• STORED AS PARQUET
• STORED AS AVRO

六、其他方式（了解即可）

• Sqoop：从 MySQL 等关系型数据库导入 Hive
• Spark / Flink：写 Hive 表
• Hue / DataGrip：图形化导入

七、常见注意事项

1. 分隔符要一致
2. 字段顺序和类型要匹配
3. LOAD DATA 只是“移动/复制文件”，不做格式转换
4. ORC/Parquet 表不能直接 LOAD DATA

如果你愿意，可以告诉我：

• 数据来源（本地 / HDFS / MySQL）
• 表结构或文件格式（CSV / ORC 等）

我可以给你针对性的导入命令。