Apache Storm 1.1.0 中文文档 | ApacheCN

前言

Apache Storm 是一个免费的,开源的,分布式的实时计算系统.

官方文档:http://storm.apache.org

中文文档:http://storm.apachecn.org

ApacheCN最近组织了翻译Storm 1.1.0 中文文档的活动,整体翻译进度为 96%.

感谢大家参与到该活动中来

感谢无私奉献的贡献者,才有了这份Storm 1.1.0 中文文档

感谢一路有你的陪伴,我们才可以做的更好,走的更快,走的更远,我们一直在努力 。。。

网页地址:http://storm.apachecn.org/releases/cn/1.1.0/

github:https://github.com/apachecn/storm-doc-zh

如果您有任何意见建议,问题反馈,或者也想参与该翻译,或者想成为该项目的负责人,麻烦联系企鹅: 1042658081

技术交流企鹅群:214293307

学习方法

Storm 怎么学习,怎么入门 ?

我只能悄悄的告诉你,跟着中文文档走,把文档看一遍先,文档中的概念,例子什么的先弄懂,基本上就入门了

Storm 如何成为大神呢?

先看看大佬们的 blog 学习下,多在群里面跟别人讨论下

文档内容目录

NOTE(注意)

在最新版本中, class packages 已经从 “backtype.storm” 改变成 “org.apache.storm” 了, 所以使用旧版本编译的 topology 代码不会像在 Storm 1.0.0 上那样运行了. 通过以下配置提供向后的兼容性

client.jartransformer.class: "org.apache.storm.hack.StormShadeTransformer"

如果要运行使用较旧版本 Storm 编译的代码, 则需要在 Storm 安装中添加上述配置. 该配置应该添加到您用于提交 topologies(拓扑)的机器中.

更多细节, 请参阅https://issues.apache.org/jira/browse/STORM-1202.

Storm 基础

Javadoc

概念

调度器

配置

保证消息处理

Daemon(守护进程)容错

命令行 client(客户端)

REST API

理解 Storm topology 的 parallelism(并行度)

FAQ

Layers on Top of Storm

Storm Trident

Trident 是 Storm 的另一个 interface(接口).

它提供了 exactly-once(仅且一次)处理, “transactional(事务性的)” datastore persistence(数据存储持久化), 以及一些常见的 stream analytics operations(流式分析操作).

Trident 教程– 基础的概念和预排工作

Trident API 概述– 针对 transforming(转换)和 orchestrating 数据的操作

Trident State(状态)– exactly-once(仅且一次)处理以及 fast(快速的), persistent aggregation(持久化的聚合)

Trident spouts– transactional(事务性的)和 non-transactional(非事务性的)数据引入

Trident RAS API– 与 Trident 一起使用 Resource Aware Scheduler .

Storm SQL

该 Storm SQL 的集成可以让用户在 Storm 的 streaming data(流式数据)上来运行 SQL 查询.

NOTE(注意): Storm SQL 是一个experimental(实验性的)功能, 所以 Storm SQL 的结构和所支持的功能在以后可能会发生变化.

但是小的变化不会影响用户体验. 在引入 UX 更改时, 我们会及时通知用户.

Storm SQL 概述

Storm SQL 示例

Storm SQL 文献

Storm SQL 结构

Flux

Flux Data Driven Topology Builder

Storm 安装和部署

安装一个 Storm 集群

Local mode(本地模式)

问题排查

在生产 cluster(集群)上运行 topologies(拓扑)

构建 Stormwith Maven

安装 Secure(安全的)Cluster(集群)

CGroup 的实施

Pacemaker 针对大集群减低在 zookeeper 上的负载

Resource Aware Scheduler(资源意识调度器)

Daemon Metrics/Monitoring(守护进程的度量/监控)

Windows 平台的用户指南

Storm 中级

Serialization(序列化)

Common patterns(常见模式)

Clojure DSL

与 Storm 一起使用非 JVM 的语言

分布式的 RPC

Transactional topologies(事务性的拓扑)

Hooks(钩子)

Metrics(度量)

State Checkpointing

Windowing(窗口操作)

Joining Streams

Blobstore(Distcahce)

Storm 调试

Dynamic Log Level Settings

Searching Worker Logs

Worker Profiling

Event Logging

Storm 与外部系统, 以及其它库的集成

Apache Kafka 集成,新的 Kafka Consumer(消费者)集成

Apache HBase 集成

Apache HDFS 集成

Apache Hive 集成

Apache Solr 集成

Apache Cassandra 集成

JDBC 集成

JMS 集成

Redis 集成

Event Hubs 集成

Elasticsearch 集成

MQTT 集成

Mongodb 集成

OpenTSDB 集成

Kinesis 集成

Druid 集成

Kestrel 集成

Container, Resource Management System Integration

YARN 集成,通过 Slider 集成 YARN

Mesos 集成

Docker 集成

Kubernetes 集成

Storm 高级

为 Storm 定义非 JVM 语言的 DSL

多语言协议(如何为其它语言提供支持)

实现文档

结束感言

翻译过程中,大家有说有笑,有时候大家自己也不太懂,关键字啥的都会搞错,完全看不懂,一脸懵逼,醉了 。。。

但总算是把这份中文文档给弄好了吧,也算是对大家,或者对自己有一个交代,没有半途而废吧!~~~

希望大家可以一起走的更快,走的更远 。。。

如果您有任何意见建议,问题反馈,或者也想参与该翻译,或者想成为该项目的负责人,麻烦联系企鹅: 1042658081

技术交流企鹅群:214293307

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,923评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,154评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,775评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,960评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,976评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,972评论 1 295
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,893评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,709评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,159评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,400评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,552评论 1 346
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,265评论 5 341
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,876评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,528评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,701评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,552评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,451评论 2 352

推荐阅读更多精彩内容