Flink Scala flatMap方法报错

sunshingheavy 2022-06-19 21:06:37

自己本地写的Flink WordCount程序，使用流式处理时，flatMap方法报错，如下图：

但使用批处理时是好的，如下图：

环境如下：

有哪位大神能知道是什么原因？本人scala初学

...全文

429 3 打赏收藏转发到动态举报

写回复

用AI写文章

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

西维因 2022-10-12

打赏
举报

Flink好像用Java写比较好，底层写的Java

西维因 2022-10-12

打赏
举报

Flink好像用Java写比较好，底层写的Java

sunshingheavy 2022-06-20

打赏
举报

问题原因找到，包导错了，导成了java里的类，应该是scala里的StreamExecutionEnvironment

IDEA使用maven 打包scala flink job时，报错 Static methods in interface require -target:jvm-1.8 解决方式：修改pom中的scala打包插件，具体如下 <plugin> <groupId>net.alchim31.maven</groupId> <artifactId>scala-maven-plugin</artifactId> <exe

当我使用Flink 为1.7.2,Scala为2.11时，使用Flatmap函数时会报错点进去Flatmap查看代码时发现，系统自动导入的时java的代码解决办法只需要导入 org.apache.flink.streaming.api.scala.StreamExecutionEnvironment. 即可 ...

0.Scala函数式编程我们将来使用Spark/Flink的大量业务代码都会使用到函数式编程。下面这些事开发中常用的函数式编程。注意这些函数都是操作 Scala 集合的，一般会进行两类操作：转换操作（transformation ）和行动操作（actions）（有些人喜欢叫他为聚合操作）。第一种操作类型将集合转换为另一个集合，第二种操作类型返回某些类型的值。遍历（ foreach ）映射（ map ）映射扁平化（ flatmap ）过滤（ filter ）是否存在（ exists ）

在写Flink程序的时候（以最简单的WordCount案例为例），有时会使用Lambda表达式来简化，如下边程序中的flatMap算子和Map算子处，都是用了Lambda表达式来简写： public static void main(String[] args) throws Exception { StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

day01课堂笔记 flink简介 flink引入大数据技术架构发展阶段总共有四代,mr–>DAG框架(tez) --> Spark流批处理框架,内存计算(伪实时) -->flink流批处理,内存计算(真正的实时计算) flink vs spark 什么是flink flink是一个分布式,高性能,随时可用的准确的流式计算框架,flink可以对无界数据(流处理)和有界数据(批处理)进行有状态计算(flink天生支持状态计算)的分布式,高性能的计算框架. flink流处理特性 fli

Flink社区

117

社区成员

社区内容

发帖

与我相关

我的任务

其他企业社区

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

1.用户在社区内发帖：帖子内容为推荐与本社区技术相关的【优质书籍、文章、视频】，贴子中要体现推荐的原因。每人可加入多个社区，一个社区中前20位发帖用户，且在同一社区累计发布2个帖子即可获得CSDN定制帆布包1个（同个ID在一个社区仅可领取1次）。同时，活动周结束后，社区专家会对【推荐贴】进行点评，并将优质的帖子整理成【精华贴】置顶。同时我们会在被评为精华帖的同学中随机抽取两位同学获得精美咖啡杯一个。

2.【推荐贴】要求：每个推荐贴中需要推荐和本社区技术相关的【书籍、文章、视频】中至少两类，文章和视频需要复制链接地址，并且在每个推荐的内容下需要附上至少100字的推荐原因/观后感受。同一社区所发的推荐帖内容不能重复。

试试用AI创作助手写篇文章吧

+ 用AI写文章