文章浏览阅读1.7k次。文章目录此教程以 6.2.0 的版本为例一、下载此教程以 6.2.0 的版本为例一、下载CDH下载地址下载cdh选择对应linux的下载，例如我下载的是 centos7.7 下使用的cdh6.2.0下载cm..._centos7 cdh6.2.1单节点安装...
admin
文章浏览阅读1.3w次，点赞2次，收藏25次。问题在集群主机点启动HDFS集群和YARN集群之后，查看各个节点启动情况：主节点全部启动成功，从节点启动失败[root@master-node ~]# jps6432 Jps5427 NameNode5811 ResourceManager5531 DataNode5917 NodeManager[roo......
admin
文章浏览阅读1.3w次，点赞2次，收藏25次。问题在集群主机点启动HDFS集群和YARN集群之后，查看各个节点启动情况：主节点全部启动成功，从节点启动失败[root@master-node ~]# jps6432 Jps5427 NameNode5811 ResourceManager5531 DataNode5917 NodeManager[roo......
admin
文章浏览阅读466次。前言转眼间已经参与过我厂好几个小程序的开发了，下面本妹子将开发中的那些注意点和各位小伙伴们分享下，妥妥的干货一枚。一、WXML不要换行写，有空格不行微信开发者工具不会对代码进行trim操作，如......
admin
文章浏览阅读3.3k次，点赞6次，收藏32次。关于Hadoop集群的DataNode启动不了的问题是安装Hadoop最常见的坑，下面我介绍五种方法来填坑。异常提示hadoop集群子节点目录下 jps 操作没有显示datanode的进程http://master-ip: 8088窗口下：java操......
admin
文章浏览阅读3.3k次，点赞6次，收藏32次。关于Hadoop集群的DataNode启动不了的问题是安装Hadoop最常见的坑，下面我介绍五种方法来填坑。异常提示hadoop集群子节点目录下 jps 操作没有显示datanode的进程http://master-ip: 8088窗口下：java操......
admin
文章浏览阅读283次。在使用代理IP时，许多用户都会遇到提示代理IP超时的情况，这种情况是代理IP延迟过高引起的，而导致代理IP延迟过高的原因则有很多：1.客户网络不好，自身网络环境有问题。当自身的本地网络环境波动时......
admin
文章浏览阅读114次。第三部分 zookeeper数据结构与监听机制ZooKeeper数据模型Znode在ZooKeeper中，数据信息被保存在⼀个个数据节点上，这些节点被称为znode。ZNode 是 Zookeeper 中最⼩数据单位，在 ZNode 下面又可以再挂 ZNode，这样⼀层层......
admin
文章浏览阅读9.1k次。Hadoop 空间不足，hive首先就会没法跑了，进度始终是0%。将HDFS备份数降低将默认的备份数3设置为2。 步骤：CDH–>HDFS–>配置–>搜索dfs.replication–>设置为2 删除无用HDFS数据和Hbase表格主要......
admin
文章浏览阅读841次。 上篇我们介绍了distributed pub/sub消息传递机制。这是在同一个集群内的消息共享机制：发布者（publisher）和订阅者（subscriber）都在同一个集群的节点上，所有节点上的DistributedPubSubMediator通过集群内部的沟通......
admin
文章浏览阅读298次。下载spark-2.3.2-bin-hadoop2.7.tgz设置环境变量修改配置cd $SPARK_HOME/confcp spark-env.sh.template spark-env.shvim spark-env.sh注意：由于是On Yarn的配置，无需配置worker、slaves这些启动spark-shell根据启动日志，spark-shell启动的本地......
admin
文章浏览阅读2.4k次。普通的Linuxshell都允许重定向，而重定向使用的就是管道。例如：$ls | pr | lpr把命令ls（列出目录中的文件）的输出通过管道连接到命令pr的标准输入上进行分页。最后，命令pr的标准输出通过管道连接到命令lp......
admin
文章浏览阅读161次。流程控制在一个程序执行的过程中,各条代码的执行顺序对程序的结果是有直接影响的,很多时候我们要通过控制代码的执行顺序来实现我们要完成的功能.简单理解:流程控制就是来控制我们的代码按照什么结......
admin
文章浏览阅读177次。环境装备192.168.16.6 master192.168.16.4 slave1192.168.16.5 slave2spark安装在Master机器，上传spark安装包spark-2.4.3-bin-hadoop2.7.tgz，并将其解压到/home/spark目录下（根据实际情况定）。#上传[root@master software]# rz -y#解压[..._完成s......
admin
文章浏览阅读223次。1）Zepplin安装与启动（1）将zeppelin-0.8.0-bin-all.tgz上传至Linux（2）解压zeppelin-0.8.0-bin-all.tgz之/opt/module tar -zxvf zeppelin-0.8.0-bin-all.tgz -C /opt/module/（3）修改名称 mv zeppelin-0.8.0-bin-all/ zeppelin（4）修改默认端口号web默......
admin
文章浏览阅读226次。在进行文件上传的时候会优先选择客户端所在节点，如果习惯性使用同一个客户端会造成客户端所在节 点存储的数据比较多。集群会有一个自动的负载均衡的操作，只不过这个负载均衡的操作比较慢。机器......
admin
文章浏览阅读657次。文章目录一、安装环境二、关闭SElinux三、关闭防火墙四、在线安装 mariadb五、安装PHP环境一、安装环境操作系统：CentOS7.7WEB：Apache/2.4.6PHP：7.0.33数据库：MySQL二、关闭SElinux[root@zabbix ~]# setenforce 0[root@zabbix ~]# vi......
admin
友情链接申请要求： 不违法不降权 权重相当 请联系QQ：737597453
