Strom的提高性能减少fail的相关配置

 当storm处理速度跟不上数据传入的速度时,需要调大excutor的输入输出的额度。 下面的配置参数可以根据实际情况调整。 /** The topology.receiver.buffer.size

Julyme

storm

2017-01-21

766

0

Kafka的相关操作

创建一个topic #创建一个test的topic bin/kafka-topics.sh --zookeeper 【zookeeper server:port】 --create --topic t

Julyme

大数据

2017-01-19

441

0

完整详细的Maven教程

文章转自:易百教程 Apache Maven是一个软件项目管理和综合工具。基于项目对象模型(POM)的概念,Maven可以从一个中心资料片管理项目构建,报告和文件。 本教程将介绍如何使用Maven在J

Julyme

java,maven

2016-12-16

497

1

Spark的HA部署

一、安装JDK、Scala 略。 二、安装zookeeper 略。 三、安装Hadoop 略。参考hadoop的安装 四、安装Spark   1、修改spark/conf/spark-env.sh 

Julyme

spark

2016-12-09

478

0

Ajax跨域请求,同时保证session一致

最近在项目中碰到一个问题,ajax跨域请求时,每次tomcat都会生成一个新的session。 在百度中找到了解决方法。http://blog.sina.com.cn/s/blog_e774c01e0

Julyme

随笔

2016-11-10

5023

0

Twitter开源的Heron快速安装部署教程

什么是Heron? Twitter使用Storm实时分析海量数据已经有好几年了,并在2011年将其开源。该项目稍后开始在Apache基金会孵化,并在2015年秋天成为顶级项目。Storm以季度为发布周

Julyme

大数据

2016-11-08

1650

1

ambari下的flume和kafka整合

1、安装ambari 参考:http://julyme.com/c/Ambari的安装教程 2、安装flume 略。 3.安装kafka 略。 4.配置flume #扫描指定文件配置 agent.so

Julyme

ambari

2016-11-04

2439

0

清理ambari安装的集群

本文针对redhat或者centos 对于测试集群,如果通过ambari安装的集群后,想重新再来一次的话,需要清理集群。 对于安装了很多hadoop组件的话,这个工作很繁琐。接下来是我整理的清理过程。

Julyme

ambari

2016-11-04

1127

0

Ambari的安装教程

一、准备工作 1、基本工具 安装ambari需要装一些基本工具:yum,rpm,scp,curl,wget,pdsh。前几个一般系统都自带了,pdsh需要自己装。 yum install pdsh 2

Julyme

ambari

2016-11-04

2575

2

Storm的部署

配置方案如下 node1 Nimbus zookeeper node2 Supervisor zookeeper node3 Supervisor zookeeper node4 Supervisor

Julyme

storm

2016-11-03

765

1

搜索文章

Julyme的IT技术分享



/sitemap