离线数仓复盘 | 六十五、用户认证-Kerberos安全模式启动Hadoop二
离线数仓复盘 | 六十五、用户认证-Kerberos安全模式启动Hadoop二
|
一、修改HDFS特定路径访问权限1. 创建主体2. 认证主体3. 修改路径权限二、启动Yarn1. 单点启动1. 启动ResourceManager2. 启动NodeManager3. 查看web页面2.群起1. 配置免密2. 修改环境变量3, 执行三、启动HistoryServer1. 启动历史服
离线数仓复盘 | 六十四、用户认证-Kerberos安全模式启动Hadoop一
离线数仓复盘 | 六十四、用户认证-Kerberos安全模式启动Hadoop一
|
一、修改特定本地路径权限1. $HADOOP_LOG_DIR(所有节点)2. dfs.namenode.name.dir(NameNode节点)3. dfs.datanode.data.dir(DataNode节点)4. dfs.namenode.checkpoint.dir(SecondaryNa
离线数仓复盘 | 六十三、用户认证-Kerberos配置Hadoop二
离线数仓复盘 | 六十三、用户认证-Kerberos配置Hadoop二
|
一、修改Hadoop配置文件1. core-site.xml2. hdfs-site.xml3. yarn-site.xml4. mapred-site.xml5. 分发以上修改的配置文件二、配置HDFS使用HTTPS安全传输协议三、配置Yarn使用LinuxContainerExecutor公众号
离线数仓复盘 | 六十二、用户认证-Kerberos配置Hadoop一
离线数仓复盘 | 六十二、用户认证-Kerberos配置Hadoop一
|
一、创建Hadoop系统用户公众号:雨中散步撒哈拉个人博客网站:https://liudongdong.top个人导航网站:https://1024dh.top编辑者:雨中散步撒哈拉资源获取关注公众号: 雨中散步撒哈拉回复关键词: 离线数仓4.0一、创建Hadoop系统用户为Hadoop开启Kerb
离线数仓复盘 | 六十一、用户认证-Kerberos安装
离线数仓复盘 | 六十一、用户认证-Kerberos安装
|
一、Kerberos概述1. 什么是Kerberos2. Kerberos术语3. Kerberos认证原理二、Kerberos安装(root用户下)1. 安装Kerberos相关服务2. 修改配置文件3. 初始化KDC数据库4. 修改管理员权限配置文件5. 启动Kerberos相关服务6. 创建K
离线数仓复盘 | 六十、集群监控-Zabbix集成Grafana
离线数仓复盘 | 六十、集群监控-Zabbix集成Grafana
|
一、部署Grafana1. 下载Grafana安装包2. 使用rpm安装Grafana3. 启动Grafana5. 访问Grafana页面二、 快速入门三、 集成Zabbix1. 配置数据源2.集成案例公众号:雨中散步撒哈拉个人博客网站:https://liudongdong.top个人导航网站:h
离线数仓复盘 | 五十九、集群监控-Zabbix使用二
离线数仓复盘 | 五十九、集群监控-Zabbix使用二
|
一、申请邮箱二、创建报警媒介类型(Media type)三、测试邮件发送四、创建模板公众号:雨中散步撒哈拉个人博客网站:https://liudongdong.top个人导航网站:https://1024dh.top编辑者:雨中散步撒哈拉资源获取关注公众号: 雨中散步撒哈拉回复关键词: 离线数仓4.
离线数仓复盘 | 五十八、集群监控-Zabbix使用一
离线数仓复盘 | 五十八、集群监控-Zabbix使用一
|
一、 Zabbix术语1. 主机(Host)2. 监控项(Item)3. 触发器(Trigger)4. 动作(Action)二、 Zabbix使用1. 创建Host2. 创建监控项(Items)3. 创建触发器(Trigger)4. 创建动作(Action)公众号:雨中散步撒哈拉个人博客网站:ht
离线数仓复盘 | 五十七、集群监控-Zabbix安装部署
离线数仓复盘 | 五十七、集群监控-Zabbix安装部署
|
一、Zabbix入门1. Zabbix概述2. Zabbix 基础架构二、Zabbix部署1. 集群规划2. 准备工作1. 关闭集群2. 关闭防火墙(3台节点,已关闭)3. 关闭SELinux(hadoop102)3. 配置Zabbix yum源(3台节点)1. 安装yum仓库2. 修改zabbix
离线数仓复盘 | 五十六、即席查询-Presto使用
离线数仓复盘 | 五十六、即席查询-Presto使用
|
一、Presto优化之数据存储1.合理设置分区2. 使用列式存储3. 使用压缩二、Presto优化之查询SQL1. 只选择使用的字段2. 过滤条件必须加上分区字段3. Group By语句优化4. Order by时使用Limit5. 使用Join语句时将大表放在左边三、注意事项1. 字段名引用2.