当storm处理速度跟不上数据传入的速度时,需要调大excutor的输入输出的额度。 下面的配置参数可以根据实际情况调整。 /** The topology.receiver.buffer.size
创建一个topic #创建一个test的topic bin/kafka-topics.sh --zookeeper 【zookeeper server:port】 --create --topic t
文章转自:易百教程 Apache Maven是一个软件项目管理和综合工具。基于项目对象模型(POM)的概念,Maven可以从一个中心资料片管理项目构建,报告和文件。 本教程将介绍如何使用Maven在J
一、安装JDK、Scala 略。 二、安装zookeeper 略。 三、安装Hadoop 略。参考hadoop的安装 四、安装Spark 1、修改spark/conf/spark-env.sh
最近在项目中碰到一个问题,ajax跨域请求时,每次tomcat都会生成一个新的session。 在百度中找到了解决方法。http://blog.sina.com.cn/s/blog_e774c01e0
什么是Heron? Twitter使用Storm实时分析海量数据已经有好几年了,并在2011年将其开源。该项目稍后开始在Apache基金会孵化,并在2015年秋天成为顶级项目。Storm以季度为发布周
1、安装ambari 参考:http://julyme.com/c/Ambari的安装教程 2、安装flume 略。 3.安装kafka 略。 4.配置flume #扫描指定文件配置 agent.so
本文针对redhat或者centos 对于测试集群,如果通过ambari安装的集群后,想重新再来一次的话,需要清理集群。 对于安装了很多hadoop组件的话,这个工作很繁琐。接下来是我整理的清理过程。
一、准备工作 1、基本工具 安装ambari需要装一些基本工具:yum,rpm,scp,curl,wget,pdsh。前几个一般系统都自带了,pdsh需要自己装。 yum install pdsh 2
配置方案如下 node1 Nimbus zookeeper node2 Supervisor zookeeper node3 Supervisor zookeeper node4 Supervisor
Julyme的IT技术分享