当前位置:首页--Storm

1 storm基本概念 + storm编程规范及demo编写 磁盘清理

   本博文的主要内容有   .Storm的单机模式安装   .Storm的分布式安装(3节点)       .No space left on device   .storm工程的eclipse的java编写              http://storm.apache.org/       分布式的一个计算系统,但是跟mr不一样,就是实时的,实时的跟Mr离线批处理不一样。       离线m......

阅读全文

Twitter Storm 安装实战

 实际上安装Twitter Storm是上周三的事情了,周三的时候安装了一个单机版的,用WordCount跑了一下,感觉还不错。周四试着在集群上安装,碰到了一些问题,一直折腾到周五,留了个尾巴(没有做测试),这周一终于跑了WordCount,先开始出了一些问题,查了很多资料终于解决了。 一直想要把这个过程记录一下,一直都比较犯懒,今天因为也要写文档,但还没有什么特别好的思路,所以先把整个安装过程恢复......

阅读全文

Setting up Storm and Running Your First Topology

 http://www.haroldnguyen.com/blog/2015/01/setting-up-storm-and-running-your-first-topology/ -------------------------------------------------------------------------------------------------------------......

阅读全文

在mesos上安装storm,并且执行wordcount测试程序

 mesos上安装storm 1.基本说明   如果只用一句话来描述storm的话,可能会是这样:分布式实时计算系统。按照storm作者的说法,storm对于实时计算的意义类似于hadoop对于批处理的意义。我们都知道,根据google mapreduce来实现的hadoop为我们提供了map, reduce原语,使我们的批处理程序变得非常地简单和优美。同样,storm也为实时计算提供了一些简单优美......

阅读全文

centos环境安装storm

 CentOS环境安装STORM 安装的版本 storm-0.8.2 相关依赖的版本 zookeeper-3.4.5.tar.gz zeromq-2.1.7.tar.gz jzmq.tar.gz 安装zoopkeeper集群 zookeeper服务集群不小于三个节点 安装jdk 参考了 [CentOS-6.3安装配置JDK-7]

阅读全文

访问Storm ui界面,出现org.apache.storm.utils.NimbusLeaderNotFoundException: Could not find leader nimbus from seed hosts ["master" "slave1"]. Did you specify a valid list of nimbus hosts for confi的问题解决(图文详解) apache-storm-1.0.2.tar.gz的集群搭建(3节点)(图文详解)(非HA和HA)

       不多说,直接上干货!       前期博客 apache-storm-1.0.2.tar.gz的集群搭建(3节点)(图文详解)(非HA和HA)            问题详情 org.apache.storm.utils.NimbusLeaderNotFoundException: Could not find leader nimbus from seed hosts ["maste......

阅读全文

Storm的简单介绍与安装

 Storm的集群跟hadoop的集群非常像。但是在Hadoop上面你运行的是MapReduce的Job, 而在Storm上面你运行的是Topology。 在Storm的集群里面有两种节点: 控制节点(master node)和工作节点(worker node)。控制节点上面运行一个后台程序: Nimbus, 它的作用类似Hadoop里面的JobTracker。Nimbus负责在集群里面分布代码,分......

阅读全文

【原】Storm Local模式和生产环境中Topology运行配置

 Storm入门教程 1. Storm基础 Storm Storm主要特点 Storm基本概念 Storm调度器 Storm配置 Guaranteeing Message Processing(消息处理保障机制) Daemon Fault Tolerance(守护线程容错机制) 理解Storm拓扑的并行 Tutorial Local模式 本地模式的通用配置: 在生产环境中运行Topologies 通......

阅读全文

Storm实践

 1.Storm命令   在Linux中观直接输入Storm,不带任何参数信息,可以查看Storm命令。   参考这里   1.  activate     激活指定的拓扑Spout。语法:storm activate topology-name   2. classpath   打印出Storm客户端运行命令时使用的类路径(classpath),语法:storm classpath   3. de......

阅读全文

Storm 01之 Storm基本概念及第一个demo

 2.1 Storm基本概念 在运行一个Storm任务之前,需要了解一些概念: Topologies :[tə'pɑ:lədʒɪ]拓扑结构 Streams Spouts:[spaʊt]喷出; 喷射; 滔滔不绝地讲; 把…典当掉; Bolts:[bəʊlt]筛选; 囫囵吞下; (把门、窗等) 闩上; 突然说出,脱口说出; Stream groupings Reliability  Tasks Work......

阅读全文
1 2 3 4 下一页 尾页