WEB项目集成SPARK问题？

menglei109 2015-06-23 09:01:35

spark可以集成到WEB项目里做实时在线交互查询吗？我想把原来MYSQL的一个项目用 SPARK + HBASE + SOLR实现在线查询，但不知道怎么把WEB项目集成到SPARK框架，如何交互？各位高手赐教?

...全文

229 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

LinkSe7en 2015-07-17

打赏
举报

回复

Spark Streaming

新世界的海贼 2015-07-14

打赏
举报

回复

不知rest 是否能实现

项目一Spark离线处理本项目来源于企业级电商网站的大数据统计分析平台，该平台以 Spark 框架为核心，对电商网站的日志进行离线和实时分析。该大数据分析平台对电商网站的各种用户行为（访问行为、购物...

Spark单机运行时，都是跑Main方法，那如何集成到Spring Boot实现http调用呢？接下实现一个从一个文本里排序出频次最高的前10名项目环境：JDK：1.8；Spark：2.2.0项目搭建：pom.xml 依赖：org.springframework.bootspring-boot-starter-parent1.5.3.RELEASEUTF-8UTF-81.82.112.2.0org...

Spark任务提交与SpringBoot项目集成原理利用官方提供的SparkLauncher java接口来使用java代码提交Spark任务到Spark集群实现一个SparkPI 的计算demo，并打包成jar 新建SpringBoot项目，项目加入spark-core依赖，否则无法找到SparkLuncher <properties> <j...

需要实现的功能：写访问spark的接口，也就是从web上输入网址就能把我们需要的信息通过提交一个job然后返回给我们json数据。成果展示：通过url请求，然后的到一个wordcount的json结果（借助的是谷歌浏览器postman插件显示的，直接在浏览器上输入网址是一样的效果）使用的关键技术： java语言编程，springmvc框架，tomcat容器，spark框架，scala相

在离线数仓方面，Spark现在所占据的地位勿庸置疑。我们来看看如何在Hadoop3.x中集成Spark。 1. 下载与解压从镜像站下载下载地址，选择3.0.2版本。上传到服务器后解压到/app目录下 tar zxvf spark-3.0.2-bin-hadoop3.2.tgz -C /app # 修改目录名 cd /app # mv spark-3.0.2-bin-hadoop3.2 spark-3.0.2 ln -s spark-3.0.2-bin-hadoop3.2 spark 2. 修改配置 1

1,258

社区成员

1,168

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章