hive创建table时指定分隔符
2010-02-08 21:42
211 查看
由于很多数据在hadoop平台,当从hadoop平台的数据迁移到hive目录下时,由于hive默认的分隔符是/u0001,为了平滑迁移,需要在创建表格时指定数据的分割符号,语法如下:
create table test(uid string,name string)row format delimited fields terminated by '/t';
通过这种方式,完成分隔符的指定。
然后通过hadoop fs -cp或者hadoop distcp 进行文件夹复制。
由于数据复制的成本比较高,时间比较慢,当不需要复制数据的时候,可以直接采取移动的方式将hadoop数据转移到hive,hadoop fs -mv src dest。
一个比较简单的方法是直接创建 external table,语法如下:
create table test(uid string,name string)row format delimited fields terminated by '/t' location 'hdfs';
通过这种方式,避免数据的移动带来时间损耗,提高运行的效率。
create table test(uid string,name string)row format delimited fields terminated by '/t';
通过这种方式,完成分隔符的指定。
然后通过hadoop fs -cp或者hadoop distcp 进行文件夹复制。
由于数据复制的成本比较高,时间比较慢,当不需要复制数据的时候,可以直接采取移动的方式将hadoop数据转移到hive,hadoop fs -mv src dest。
一个比较简单的方法是直接创建 external table,语法如下:
create table test(uid string,name string)row format delimited fields terminated by '/t' location 'hdfs';
通过这种方式,避免数据的移动带来时间损耗,提高运行的效率。
相关文章推荐
- hive创建table时指定分隔符
- hive 创建表——指定分隔符
- hive之external table创建
- hive 使用load导入数据时是否可以指定分隔符
- 创建与删除hive的表分区并指定目录
- DB2学习--创建表空间 Wizard 就是用来指定Create ** Tablespace时的参数
- hive数据导出至本地文件,如何指定分隔符
- hive指定多个字符作为列分隔符
- 【javascript】table对象操作,动态创建,删除指定行列
- 【原】创建Hive表,分号分隔符“;”引起的异常
- Hive创建TABLE_PARAMS表失败
- Hive创建TABLE_PARAMS表失败
- hive指定多个字符作为列分隔符的问题说明
- Hive中将查询结果导出到指定分隔符的文件中
- hive指定多个字符作为列分隔符
- hive select语句输出指定分隔符
- Hive创建表时使用Unicode字符作为字段分隔符(hive unicode character as delimiter)
- Hive中将查询结果导出到指定分隔符的文件中
- [Hive]Hive指定查询输出分隔符
- Hive0.11查询结果保存到文件并指定列之间的分隔符