您的位置:首页 > 运维架构 > Shell

hive脚本+shell执行方式

2013-04-19 13:26 513 查看
2 目前采用的解决传递参数问题的方法:

  原来的将hive脚本单独写在一个文件中,在shell中定义参数,在hive文件中直接用参数,是无法将值传递过去的。

  现在在shell中,使用cat命令,把hive脚本输出在一个文件中,在这里直接给参数传值是能传进去的,再用hive -f调用生成的hive脚本文件。

  cat命令输出时,会把一个\当成转义字符,导致生成的文件中就只有一个\了。

4 改shell脚本文件格式,set ff=unix。

5 通过实验得出的结论,如果是load本地数据进hive表,数据是复制,原数据还在。

如果load目录是hdfs上的,则数据是移动,将那个目录下的数据迁移到hive目录下,原数据不在了,目录结构还在。load的路径必须指定到最底层目录。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  hive 日志分析