问题标签 [heron]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
2 回答
1693 浏览

apache-storm - Apache nifi 和 Apache Heron(Storm) 的区别

我正在从事一个学术项目,该项目涉及处理来自传感器的流数据。我对苍鹭(风暴的继任者)和尼菲进行了四舍五入。两者都支持内置的背压,这对我的项目至关重要。Apache Nifi 和 Heron 之间的主要区别是什么?

哪一种更适合物联网应用?

0 投票
1 回答
30 浏览

heron - 苍鹭激活错误:集群/角色/环境不匹配。拓扑 'WordCountTopology' 在 local/root/default 下运行,而不是 local/yitian/default

当我使用以下命令在本地机器上运行 Twitter Heron 时,发生了以下错误:

错误信息:

0 投票
1 回答
96 浏览

windows - 如何在 Windows 10 上使用 IntelliJ IDEA 创建 Twitter Heron 项目?

我想在 Windows 10 上使用 IntelliJ IDEA 创建一个 Twitter Heron 项目。但我找不到有关它的教程。任何建议,将不胜感激。

0 投票
2 回答
233 浏览

streaming - 最大出水口容量

我正在使用 Heron 对 IoT 数据执行流式分析。目前在架构中只有一个并行度为 1 的 spout。

我正在尝试对 Heron 可以在其内部在 spout 使用的队列中保存的数据量的统计数据进行基准测试。

我通过将值传递给它来玩弄 setMaxSpoutPending() 方法。我想知道我们传递给这个方法的数量是否有限制?

我们可以通过增加系统配置或为拓扑提供更多资源来调整参数方法吗?

0 投票
1 回答
113 浏览

java - 如何在 Windows 操作系统上部署 Twitter Heron?

我可以在Liunx OS上部署一个Twitter heron集群,但是不知道heron能不能部署在Window OS上?

更重要的是,如果我想使用 IntelliJ IDEA 运行 Heron 项目,我应该在 Liunx OS(而不是 Windows OS?)上安装 IntelliJ IDEA。

任何建议,将不胜感激。

0 投票
2 回答
70 浏览

scheduled-tasks - 提交 Heron 拓扑后,Aurora 实例始终处于待处理状态

我使用 Aurora 和 Mesos 部署了一个 Twitter Heron 集群。集群的组件如下列表:

  1. 调度器:极光调度器
  2. 状态管理者:动物园管理员
  3. 上传者:HDFS

在我提交名为 WordCountTopology 的示例拓扑后,Aurora 的实例始终处于待处理状态。下面是集群运行的截图。

Mesos 代理:

在此处输入图像描述

极光调度器:

在此处输入图像描述

问题出在哪里?难道集群中的机器资源不能满足togology任务的需要?谢谢你的帮助。

0 投票
1 回答
75 浏览

mesos - 修改拓扑的 RAM 要求在 Heron 中无效

我在名为 Heron 的示例拓扑中修改了 RAM 要求,并使用命令WordCountTopology.java重建了文件。mvn assembly:assembly当我将修改后的 WordCountTopology 提交到 Heron 集群时,我发现 Heron Instance 的 RAM 需求没有改变。
构建过程.jar是成功的。WordCountTopology 的默认 RAM 要求如下:

在上面的代码中。ExampleResources.COMPONENT_RAM_MB = 512mb. parallelism的默认值为1
ExampleResources 的内容如下:

我将 的值更改ExampleResources.COMPONENT_RAM_MB=512mb256mb
但是,拓扑的需求显示Aurora scheduler如下: 在此处输入图像描述 并且极光中的所有实例都失败了: 我的问题:我应该怎么做才能有效地改变拓扑中的RAM需求?我不知道为什么任务运行失败金币和极光。谢谢你的帮助。在此处输入图像描述

0 投票
2 回答
51 浏览

streaming - Opening Heron UI is very slow

When I try to open the http://myip:8889/topologies after running heron-tracker and heron-ui commands, the response speed of this page is very slow even I can't open the page at all.
And the 304 response code showed as following:

When I using heron-tracker --verbose command to run the heron-tracker. The output as following:

heorn-ui:

What's more, I can't find LOG-FILES of heron cluster that deployed in Aurora, Zookeeper and Mesos. Can you tell me it if you know it?
And I don't know what's wrong with it? Thanks for your help!

0 投票
3 回答
130 浏览

streaming - 如何在 Heron 中实现自定义调度程序?

我已经阅读了Heron Documents关于Implementing a Custom Scheduler. 而且我知道我应该实现一些接口来实现自定义调度程序,例如ILauncherIPacking和。ISchedulerIUploader

我已经实现了我CustomScheduler实现的IScheduler接口,我想使用LocalLauncher,LocalUploaderdefault Packing algorithm我的自定义调度程序。

更重要的是,我修改了名为的苍鹭配置文件scheduler.yaml位于conf/local/使用自定义调度程序。同时,我添加了CustomScheduler.jarto heron-core/lib/scheduler/。但是,日志显示有问题:

我应该怎么做才能解决这个问题?谢谢你的帮助!

0 投票
1 回答
103 浏览

twitter - Heron 无法为拓扑“WordCountTopology”设置打包计划

当我将 WordCountTopology 提交到部署了 Aurora 调度器和 Zookeeper 的 Heron 集群时,出现了如下错误:</p>

它出什么问题了?谢谢你的帮助。