在把hdfs上数据迁移到hive中的表时,若出现数据位NULL,是因为没有指定列分隔符。

由于hive默认的分隔符是/u0001(Ctrl+A),为了平滑迁移,需要在创建表格时指定数据的分割符号,语法如下:

 

  1. hive (default)> create external table et (time BIGINT, userid string, content string, urlrank int, urlnum int, url string)  
  2.               > partitioned by (filenum int)   
  3.               > row format delimited fields terminated by '\t'; 

 

上面创建的是外部表,“导入”数据时可以用load,但若不想进行移动数据,就用命令alter来进行指向:

 

  1. alter table et add partition (filenum=1) location '/input/SogouQueryLog/file1';  

注意location后面跟的地址必须是个目录,若不是,可以用hdfs fs -mv src dest 进行移动数据:

 

 

  1. hadoop fs -mv /input/SogouQueryLog/querylog_1 /input/SogouQueryLog/file1

相关文章:

  • 2021-07-11
  • 2021-08-17
  • 2021-10-09
  • 2021-06-18
  • 2022-12-23
  • 2021-09-05
  • 2022-12-23
  • 2022-02-17
猜你喜欢
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-11-21
相关资源
相似解决方案