使用Ambari遇到过的坑

一、 某一天,ambari突然无法启动服务,报错如下 File "/usr/lib/python2.6/site-packages/resource_management/core/provide

Julyme

ambari

2017-07-20

2181

0

YARN的job超过1万个后的优化

YARN提交的job超过1万个后,会出现一系列的REST API的问题和RM UI 的显示问题,例如:在RM UI 上值能看到第9999个job的状态信息,之后的信息看不到了。 YARN的默认保存数量

Julyme

hadoop

2017-07-03

1879

1

YARN告警 local-dirs are bad: /hadoop/yarn/local

今天发现YARN的任务都无法执行,一直报资源不足,但是查看内存等资源都是充足的,后来根据ambari的告警信息,发现是硬盘超过90%造成的,把硬盘容量减少到90%以下后yarn正常运行

Julyme

hadoop

2017-06-28

1712

0

myTranslate--一款eclipse的翻译插件

有时候在看源码时会碰到一些生疏的单词,需要借助翻译软件来查看,但是复制来复制去比较麻烦,所以开发了这款插件,可以直接用快捷键在eclipse上翻译。 一、下载插件 下载地址:https://githu

Julyme

java

2017-05-18

4558

3

Hadoop源码分析(一)——hdfs-client(2)

一、代码分析 通过执行代码来分析,hdfs-client在我们操作hdfs的文件时,做了些什么。 1、初始化Hdfs-Client URI uri = URI.create("hdfs://172.1

Julyme

hadoop

2017-05-04

166

0

Hadoop源码分析(一)——hdfs-client(1)

一、hdfs-client的程序包 从图中可以看出,一共有21个包。下面简单说明这些包用来存放哪些类。 1、client和client.impl:impl包里实现了一些block相关接口的实现类,cl

Julyme

hadoop

2017-05-03

157

0

Java编程笔记

一、在类中加入一个boolean变量,用于选择是否打印debug日志。 private boolean quietmode = true;//安静模式,不打印debug日志 public synchr

Julyme

java

2017-04-27

105

0

可视化监控JVM的情况

一、Jvisualvm Jvisualvm是JDK自带的一款可视化JVM监控工具,在/JDK/BIN/目录下,windows平台可直接执行jvisualvm.exe  

Julyme

java

2017-04-24

119

0

Dashboard WIKI

一、简介 dashborad 是一款可视化的报表工具。 二、安装调试 1、复制git地址 2、在eclpse上创建本地仓库 3、导入Maven工程项目 4、安装项目到本地 5、tomcat调试    

Julyme

大数据

2017-04-18

124

1

Centos安装http代理服务器

基于TinyProxy搭建HTTP代理服务器 1、安装TinyProxy yum install tinyproxy 2、配置文件 配置文件可以修改监听的端口等信息,配置文件地址在/etc/tinyp

Julyme

随笔

2017-04-07

421

0

搜索文章

Julyme的IT技术分享

友情链接




/sitemap