推广 热搜: 百度  搜索引擎  可以  企业  使用  选择  page 

Impala使用指南

   日期:2024-12-27     作者:2oc7f    caijiyuan  
核心提示:impala中建表hive中可以直接看到,hive中建表inpala中见不到,需要刷新元数据impala中插入数据hive中可以直接看到&#

impala中建表hive中可以直接看到,hive中建表inpala中见不到,需要刷新元数据

 

impala中插入数据hive中可以直接看到,hive中插入数据直接报错,需要修改以下文件
root用户没有权限,需要开放hdfs去设置权限

 
 
 
 

ApplicationMaster 内存
yarn.app.mapreduce.am.resource.mb
Gateway Default Group
吉字节 ApplicationMaster 虚拟 CPU 内核
yarn.app.mapreduce.am.resource.cpu-vcores Gateway Default Group 2
ApplicationMaster Java 最大堆栈 Gateway Default Group 2 吉字节 Map 任务内存
mapreduce.map.memory.mb Gateway Default Group 2 吉字节 Map 任务 CPU
虚拟内核 mapreduce.map.cpu.vcores Gateway Default Group 2 Reduce 任务内存
mapreduce.reduce.memory.mb Gateway Default Group 2 吉字节 Reduce 任务
CPU 虚拟内核 mapreduce.reduce.cpu.vcores Gateway Default Group 2 Map
任务最大堆栈 Gateway Default Group 2 吉字节 Reduce 任务最大堆栈 Gateway Default
Group 2 吉字节 堆与容器大小之比 mapreduce.job.heap.memory-mb.ratio Gateway
Default Group
0.8 客户端 Java 堆大小(字节) Gateway Default Group 825955249 B ≈787.69 兆字节 JobHistory Server 的 Java 堆栈大小(字节) JobHistory Server Default Group
58 兆字节 Cgroup CPU 共享 cpu.shares 编辑单个值 JobHistory Server Default
Group …and 2 others 1024 Cgroup I/O 权重 blkio.weight 编辑单个值
JobHistory Server Default Group …and 2 others 500 Cgroup 内存软限制
memory.soft_limit_in_bytes 编辑单个值 JobHistory Server Default Group
…and 2 others
-1 兆字节 Cgroup 内存硬限制 memory.limit_in_bytes 编辑单个值 JobHistory Server Default Group …and 2 others
-1 兆字节 NodeManager 的 Java 堆栈大小(字节) NodeManager Default Group 58 兆字节 容器内存 yarn.nodemanager.resource.memory-mb NodeManager Default
Group 4 吉字节 Strict CGroup Resource Usage
yarn.nodemanager.linux-container-executor.cgroups.strict-resource-usage
NodeManager Default Group Containers CPU Limit Percentage
yarn.nodemanager.resource.percentage-physical-cpu-limit NodeManager
Default Group 100

容器虚拟 CPU 内核 yarn.nodemanager.resource.cpu-vcores NodeManager Default
Group 4 ResourceManager 的 Java 堆栈大小(字节) ResourceManager Default
Group 1 吉字节 最小容器内存 yarn.scheduler.minimum-allocation-mb
ResourceManager Default Group 2 吉字节 容器内存增量
yarn.scheduler.increment-allocation-mb ResourceManager Default Group
512 兆字节 最大容器内存 yarn.scheduler.maximum-allocation-mb
ResourceManager Default Group 4 吉字节 最小容器虚拟 CPU 内核数量
yarn.scheduler.minimum-allocation-vcores ResourceManager Default Group
1 容器虚拟 CPU 内核增量 yarn.scheduler.increment-allocation-vcores
ResourceManager Default Group 1 最大容器虚拟 CPU 内核数量
yarn.scheduler.maximum-allocation-vcores ResourceManager Default Group
4 启用 Fair Scheduler 持续调度
yarn.scheduler.fair.continuous-scheduling-enabled ResourceManager
Default Group Fair Scheduler 节点本地性阈值
yarn.scheduler.fair.locality-delay-node-ms ResourceManager Default
Group 2 秒 Fair Scheduler 机架本地性阈值
yarn.scheduler.fair.locality-delay-rack-ms ResourceManager Default
Group 4 秒 Fair Scheduler 节点本地性阈值
yarn.scheduler.fair.locality.threshold.node ResourceManager Default
Group Fair Scheduler 机架本地性阈值
yarn.scheduler.fair.locality.threshold.rack ResourceManager Default
Group

Impala使用指南

impala中建内部表

 

impala中建外部表

本文地址:http://ww.kub2b.com/tnews/2030.html     企库往 http://ww.kub2b.com/ ,  查看更多

特别提示:本信息由相关用户自行提供,真实性未证实,仅供参考。请谨慎采用,风险自负。

 
 
更多>同类生活信息

文章列表
相关文章
最新动态
推荐图文
生活信息
点击排行
网站首页  |  关于我们  |  联系方式  |  使用协议  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报  |  鄂ICP备2020018471号