hadoop中的Jobhistory历史服务器
1. 启动脚本 mr-jobhistory-daemon.sh start historyserver 2. 配置说明 jobhistory用于查询每个job运行完以后的历史日志信息，是作为一台单独的服务器运行的。可以在namenode或者da...
ResourceManager相关配置参数
1. ResourceManager相关配置参数 （1） yarn.resourcemanager.address 参数解释：ResourceManager 对客户端暴露的地址。客户端通过该地址向RM提交应用程序，...
Hadoop yarn配置参数
参照site：http://hadoop.apache.org/docs/r2.6.0/hadoop-yarn/hadoop-yarn-common/yarn-default.xml 我们在配置yarn的时候只有充分了解各参数的含义，才能避免隐患。这些参数均在yarn-site....
mapred-site.xml 基本配置参考
说明：这是hadoop2.x版本的参数。下面的value都是参数默认值。 常用配置： ♥♥♥ 1.mapreduce.job.hdfs-servers value：${fs.defaultFS} 说明：job客户端参数。 ...
Exception message: /bin/bash: line 0: fg: no job control
这个错误是 我本地idea 远程调试hadoop集群出现的 Diagnostics: Exception from container-launch. Container id: container_1536891254067_0001_02_000001 Exit code: 1 Exception message:...
apache Hadoop-Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster —
在hadoop 环境下运行MapReduce 下wordCount出现以下错误：Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster根据报错提示找到hadoop安装目录下$HAD...
ubuntu 下dbus的环境搭建和使用
从https://launchpad.net/ubuntu/+source/dbus/1.10.6-1ubuntu2下载需要的dbus包，然后解压，./configure make && make install client.c #include <stdio.h> #include&...
prometheus
prometheus
nginx 基于 Nginx 和 FFmpeg 搭建流媒体服务器
什么是流媒体 流媒体就是将视频文件分成许多小块儿，将这些小块儿作为数据包通过网络发送出去，实现一边传输视频数据 包一边观看视频。 什么是流式传输 客户端通过链接视频服务器实时传输音...
服务端 Hadoop各个服务端口列表
端口 Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集...