SparkUI界面打不开

yellowboy_ 2016-05-30 04:38:56

Spark任务Finished过后进入Spark History界面，Spark DAG Visualization打不开，求大神告知为什么

...全文

1201 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

LinkSe7en 2016-08-26

打赏
举报

回复

引用 1 楼 flecks 的回复:

碰到过类似问题，DAG只显示几个黑点。后来发现是谷歌浏览器问题，在火狐中正常。建议尝试一下

我一直用的是Chrome，从来没这问题，应该是版本的问题吧

flecks 2016-08-25

打赏
举报

回复

碰到过类似问题，DAG只显示几个黑点。后来发现是谷歌浏览器问题，在火狐中正常。建议尝试一下

烟火 :sparkles: Sparkler是一种工具，可以轻松地在家中部署Master / Worker计算网格。它连接框架。简单，非技术性的应用程序界面自动化，容错的分布式计算在家中多种语言的高性能计算框架目录（单击以展开） :floppy_disk: 安装要求到目前为止，它仅在 Windows 8.1、10，Ubuntu 16.04 （已编译）Apache Spark 2.11.8 （如果使用Windows OS）您可以从获取安装程序或克隆此存储库 git clone https://github.com/espetro/sparkler.git 下载Apache Spark发行版，然后将存储库解压缩到其文件夹中。然后将sparkler.jar （带有/不带.exe，.sh等效项）复制到Apache根文件夹。 :play_button: 用法如何部署主人启动应用程序，然后按“主”选项卡上的“ Start

大礼包 Spree是使用和构建的用于Spark的实时更新的Web UI。左：狂欢页面显示所有作业和阶段，并实时更新；右：做简单工作的spark-shell ；有关更多示例，请参见此。特征！ Spree完全重写了，提供了许多显着的优势…… 实时更新多亏了魔术，所有页面上的所有数据都会实时更新。持久性，可伸缩性 Spree为过去和当前正在运行的Spark应用程序提供了统一的界面，结合了当前在Spark的Web UI和“历史服务器”中分布的功能。它将有关Spark应用程序的所有信息持久保存到MongoDB，从而提供易于查询的档案存储，并解决了各种Spark历史服务器的问题，例如加载时间慢，缓存问题等。分页和排序被委派给Mongo以便优雅地处理任意大的阶段，RDD等，这比Spark当前在驱动程序上临时使用文本事件日志文件和内存映射作为临时数据库提供了更清晰的可伸缩性故事

Spark Inspector for Mac是Mac OS平台上一款UI界面调试工具，可利用3D形式展示视图元素，帮你实时调试，同时支持通知监视器，显示每个NSNotification、完整的堆栈跟踪信息、调用方法列表等，快来下载体验吧。软件介绍 Spark Inspector: Spark Inspector是一个UI界面调试工具，可利用3D形式展示视图元素，帮助你进行实时调试。同时，它还支

了解Spark性能注意：现在已弃用这些脚本，因为它们显示的信息现在是Apache Spark UI的一部分。要查看阶段中的每个任务如何花费时间，请在Spark UI中单击阶段详细信息页面，然后单击“事件时间轴”。这将显示此处脚本输出的绘图（看起来更好）。该存储库包含脚本，以了解使用运行的作业的性能。配置Spark记录性能数据为了使用这些工具，您首先需要通过将Spark配置参数spark.eventLog.enabled为true ，将Spark配置为在作业运行时记录性能数据。此配置参数使Spark主数据库将包含有关每个已完成任务的信息的日志写入主数据库中的文件。母版已经跟踪了此信息（大部分信息显示在Spark的Web UI中）；设置此配置选项只会使主机输出所有数据供以后使用。默认情况下，事件日志将写入运行Spark主服务器的计算机上的/tmp/spark-events

SparkSwagger 使用Swagger （）规范的Spark （）应用程序的实时文档。动机创建和维护API的文档是应用程序开发中繁琐的部分。在Spark Framework中开发也不例外。更糟糕的是，由于当前的Swagger平台不支持Spark 。为了与这些方法进行对比，利用现有解决方案，我们将为Spark应用程序提供非官方的Swagger支持。除了以JSON和YAML格式生成Swagger规范外，此扩展还使用两个开源库，以便为任何spark应用程序提供漂亮的文档界面。二手图书馆 Swagger UI-是HTML，Javascript和CSS资产的集合，可从Swagger兼容的API（）动态生成漂亮的文档。 Swagger UI主题-是为这些默认的Swagger Docs增添趣味的主题集合，可以直接放入需要新外观的API文档的任何项目中（）。尖

1,258

社区成员

1,168

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章