hive修改inputformat-程序员宅基地

技术标签: hive  hadoop hive  

 

 

ALTER TABLE table_name [PARTITION partitionSpec] SET FILEFORMAT file_format

分区和表都会存储了文件格式,都要改过来才正确。。

例子:

ALTER TABLE foo SET FILEFORMAT
INPUTFORMAT “com.hadoop.mapred.DeprecatedLzoTextInputFormat”
OUTPUTFORMAT “org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat”;

ALTER TABLE foo PARTITION (pt=’2013-06-04′) SET FILEFORMAT
INPUTFORMAT “com.hadoop.mapred.DeprecatedLzoTextInputFormat”
OUTPUTFORMAT “org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat”;

也可以直接改metastore数据库,但要注意hive服务端可能有cache(默认是开了level2 cache),不知道会不会影响。

更改SD表
UPDATE SDS SET INPUT_FORMAT=’com.hadoop.mapred.DeprecatedLzoTextInputFormat’;

 

 

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/blackproof/article/details/88302180

智能推荐

在 Xposed 模块下优雅的调用宿主——对象篇_xposed 宿主加载模块类-程序员宅基地

文章浏览阅读396次,点赞8次,收藏8次。通过之前中我们已经知道,Xposed 模块是无法直接在项目里添加Stub包,然后直接使用宿主的类对象。所以这篇文章的想法就是怎么在这环境下能直接使用Stub包下的类对象。_xposed 宿主加载模块类

java毕业设计基于SpringBoot + Vue 的超市商超进销存收银系统-程序员宅基地

文章浏览阅读480次,点赞9次,收藏8次。本基于SpringBoot和Vue 的超市进销存系统采用Java语言来进行开发,从角色上分为管理员和员工以及用户三个角色,管理员部分功能主要包括首页,个人中心,基础数据管理,供应商信息管理,商品管理,出入库管理,收银管理,用户管理等功能;本基于SpringBoot和Vue 的超市进销存系统是根据当前我国中小型超市环境相关的内容实际情况开发的,在系统语言选择上我们使用的Java语言,数据库是小巧灵活的MySQL数据库,本系统的开发可以极大的提高超市方面的管理。关键词:超市,管理,MySQL,Java。

AutoDl服务器模型训练方法_autodl实时查看sd模型训练步数-程序员宅基地

文章浏览阅读346次。4、pip requirements.txt 用pycharm或网站jyputer训练。开实例,打开AutoPanel的公共网盘进行授权->3、网盘下载到实例 (可以不用压缩包,直接传文件)1、数据文件先传到百度网盘/阿里云盘。5、训练完的数据上传到网盘。_autodl实时查看sd模型训练步数

新建vue2.0项目_新建vue2项目,定义data和methods,使页面输出-程序员宅基地

文章浏览阅读897次。vue入门下载安装node环境安装网址:https://nodejs.org/en/ 检查安装,输出版本号则安装成功为了提高效率,可以使用淘宝镜像npm install -g cnpm -registry=https://registry.npm.taobao.org,输入即可安装npm 镜像 ,以后用到npm的地方就可以用cnpm来代替,搭建vue项目环境全局安装vue-clinpm install @vue/cli -g 使用vue -V查看版本..._新建vue2项目,定义data和methods,使页面输出

vue iframe嵌套外部网页_vue嵌套iframe外部页面-程序员宅基地

文章浏览阅读3.6k次。<template> <div> <iframe src="外部网页url" id="mobsf" frameborder="0" style="position:absolute;"></iframe> </div></template><script> export default { data () { return { } }, mounte_vue嵌套iframe外部页面

电子邮件系统原理详解-程序员宅基地

文章浏览阅读393次。电子邮件系统中一般有邮件用户代理(MUA)、邮件传输代理(MTA)、邮件投递代理(MDA)电子邮件协议包括: 1、SMTP(简单邮件传输协议),监听在tcp25号端口,用于发送邮件 2、POP3(邮局协议),监听在tcp110端口,用于接收邮件 3、IMAP(互联网邮件访问协议),监听在tcp143端口,同样用于接收邮件,但还提供摘要浏览功..._电子邮件系统由以下四个部分组成:邮件用户代理mua、邮件传输代理mta、邮件递交代

随便推点

神木林服务器未能,梦幻西游:175神木林能打服战却酷爱单挑,堪称“单挑界霸主”!...-程序员宅基地

文章浏览阅读306次。Hello大家好,我是浩仔!关注浩仔,每天给你带来最新梦幻西游游戏资讯!说到梦幻西游中比较特别,沂水雪山绝对首当其冲,这个服务器聚集了大量175玩家,而且各个身怀绝技,甚至还形成了自己的擂台文化。各种擂台单挑王层出不穷,之前浩仔就给大家展示过单挑五庄观和单挑普陀山。而且沂水雪山的单挑非常精彩,每天都会有人打皇宫生死,随便去擂台下边逛逛,都会看到很多极品175玩家在展示装备。今天浩仔给大家带来的就是...

2011-02-27 CLRS Chapter24 Single-Source Shortest Paths 单源点最短路径_clrs 24-3-程序员宅基地

文章浏览阅读612次。2011-02-27 CLRS Chapter24 Single-Source Shortest Paths 单源点最短路径_clrs 24-3

docker将springboot生成的jar包构建成镜像并执行_dockerfile制作基于springboot jar镜像-程序员宅基地

文章浏览阅读618次。1、编写Dockerfile文件 FROM java:latest ADD alertmanager-0.0.1-SNAPSHOT.jar app.jarRUN bash -c 'touch /app.jar'ENTRYPOINT ["java","-jar","/app.jar"]FROM 跟的是已经有的java镜像和版本号 其中倾斜部分为..._dockerfile制作基于springboot jar镜像

Machine Learning 简介与学习路线-程序员宅基地

文章浏览阅读6.9k次,点赞2次,收藏16次。Machine Learning 简介与学习路线数据挖掘:机器学习(Machine Learning)有众多的应用领域,目前比较活跃的主要是数据挖掘(data mining),计算机视觉(computer vision, CV),自然语言处理(natural language processing, NLP),机器人决策这四大领域。数据挖掘:通俗的说是从大量已获取的案例中寻找出数据的关系..._machine learning

安卓和ios针对小程序兼容以及小程序技术实现上本身遇到的一些问题_小程序安卓和ios兼容问题-程序员宅基地

文章浏览阅读3.3k次。ios:1.ios对全屏设置定位,切换闪动问题、可以上下超出滑动问题_小程序安卓和ios兼容问题

过分!虾皮被曝大范围毁约;深度学习技巧全辑;MongoDB开源替代 4.7K★;剑指Offer解题代码;大数据算法笔记汇总;前沿论文 | ShowMeAI资讯日报-程序员宅基地

文章浏览阅读9.6k次。ShowMeAI资讯日报 08-27 期,lm-debugger 检查和调整基于transformer的语言模型、camviz 对单目深度估计结果进行可视化、surgeon-pytorch 检视PyTorch模型中间层、xh 发送HTTP请求、FerretDB 完美替代MongoDB的开源工具、大数据算法基础课·笔记集锦、剑指 Offer解题代码·Python&Java&C++、MedMCQA 医学入学考试问答数据集、深度学习过程加速技巧集、前沿论文…点击获取全部资讯...