- 1、本文档共23页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
Impala
01ImpalaShellImpala监控管理Impala存储分区ImpalaSQL020304
01ImpalaShell
ImpalaShell01-h(--help)帮助-v(--version)查询版本信息-V(--verbose)启用详细输出--quiet关闭详细输出-p显示执行计划-i?hostname(--impalad=hostname)指定连接主机 格式hostname:port默认端口21000-r(--refresh_after_connect)刷新所有元数据-q?query(--query=query)从命令行执行查询,不进入impala-shell
ImpalaShell02-d?default_db(--database=default_db)指定数据库-B(--delimited)去格式化输出--output_delimiter=character指定分隔符--print_header打印列名-fquery_file(--query_file=query_file)执行查询文件,以分号分隔-ofilename(--output_file?filename)结果输出到指定文件-c查询执行失败时继续执行-k(--kerberos)使用kerberos安全加密方式运行impala-shell-l启用LDAP认证-u启用LDAP时,指定用户名
ImpalaShell03特殊用法:helpconnecthostname:port连接主机,默认端口21000refreshtablename增量刷新元数据库invalidatemetadata全量刷新元数据库explainsql显示查询执行计划、步骤信息setexplain_level设置显示级别(0,1,2,3)shellshell不退出impala-shell执行Linux命令profile(查询完成后执行)查询最近一次查询的底层信息
02Impala监控管理
Impala监控管理01查看StateStore查看Catalog
03Impala存储分区
Impala存储分区01文件类型格式压缩是否能够直接创建是否直接插入ParquetStructuredSnappy,gzip;currentlySnappybydefault√√CREATETABLE,INSERT,LOADDATA,andqueryTextUnstructuredLZO,gzip,bzip2,Snappy√√1、LZO在hive中创建表、加载数据2、其他压缩格式可通过LoadData、Hive、操作HDFS方式AvroStructuredSnappy,gzip,deflate,bzip2√Impala1.4.0以前通过hive创建表×仅支持查询通过LoadData、在hive加载数据RCFileStructuredSnappy,gzip,deflate,bzip2√×仅支持查询通过LoadData、在hive加载数据SequenceFileStructuredSnappy,gzip,deflate,bzip2√×仅支持查询通过LoadData、在hive加载数据
Impala存储分区02压缩方式Snappy推荐使用的压缩算法,该算法在压缩比和解压速度上实现了很好的平衡。GZIP期望达到最大压缩比(最少硬盘空间)时推荐,主要以节省硬盘空间为目的。Deflate不支持文本文件BZIP2不支持文本文件LZO仅支持文本文件。Impala可以直接查询LZO压缩文本文件表,但目前无法创建该类型压缩表和向该类型压缩表插入数据,需要在?Hive中执行这些操作。
Impala存储分区03添加分区方式1、partitionedby创建表时,添加该字段指定分区列表2、使用altertable进行分区的添加和删除操作createtablet_person(idint,namestring,ageint)partitionedby(typestring);altertablet_personaddpartition(sex=‘man);altertablet_persondroppartition(sex=‘man);altertablet_persondroppartition(sex=‘man‘,type=‘boss’);分区内添加数据insertintot_personpartition(type=boss)values(1,’zhangsan’,18),(2,
您可能关注的文档
- 沈阳明致软件介绍.pptx
- euro cult unit 3 hellenistic greek edited欧元邪教单位希腊化希腊语.pptx
- 教程文稿fb leer hoch erstellers schott pcan-mands要求.pdf
- 章与付款循环审计.pptx
- m0 xx economics paper hl markscheme济学试卷评分.pdf
- 全国百强作品华南广外超级帮bang.pptx
- 同等学力英语基础词汇.pdf
- 课件设计论电气.pdf
- 广东省广东实验中学2024_2025学年高一历史下学期期中试题选择考.doc
- 广东省2024高考英语学业水平合格考试总复习第3部分学考题型强化题型2阅读理解教师用书教案.doc
- 浙江省金华市曙光学校2024_2025学年高一历史上学期期中试题.doc
- 河南省新乡市卫辉市高级中学2024_2025学年高一历史下学期第一次调研考试试题含解析.doc
- 江苏省苏州新草桥中学2024_2025学年高一历史下学期6月月考试题.doc
- 广东省广州市广东实验中学2025届高三生物下学期线上考试试题含解析.doc
- 广东省廉江市实验学校2024_2025学年高二历史下学期第七次限时训练试题A班.doc
- 通史版2025届高考历史大一轮总复习课时作业8“百家争鸣”和汉代儒学成为正统思想含解析.doc
- 陕西省铜川市一中2025届高三生物八模试题含解析.doc
- 河北省衡水市桃城区第十四中学2024_2025学年高一历史下学期期末考试试题.doc
- 江西省宜春市2024_2025学年高一化学下学期第七次月考试题4月.doc
- 陕西省宝鸡市金台区2024_2025学年高二政治上学期期中试题.doc
文档评论(0)