社区
Java
帖子详情
Flink连接kafka时,krb5认证问题,求大佬解答
cgm1234
2020-06-15 04:46:52
java代码在本地运行的时候还是很正常的,但是打成jar包放在flink上面使用flink run 运行的时候就报错!
我知道这是kafka krb5认证没过的问题,但是要怎么去配置能让krb5.conf生效。。。求大佬解答
配置JVM参数的方法也试过了,好像没有!!
...全文
3366
4
打赏
收藏
Flink连接kafka时,krb5认证问题,求大佬解答
java代码在本地运行的时候还是很正常的,但是打成jar包放在flink上面使用flink run 运行的时候就报错! 我知道这是kafka krb5认证没过的问题,但是要怎么去配置能让krb5.conf生效。。。求大佬解答 配置JVM参数的方法也试过了,好像没有!!
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
懒丹
2021-01-09
打赏
举报
回复
修改配置: FLINK_HOME/conf/flink-conf.yaml 启用配置项: security.kerberos.login.contexts: Client,KafkaClient kafka: props.put("security.protocol", "SASL_PLAINTEXT"); props.put("sasl.mechanism", "GSSAPI"); props.put("sasl.kerberos.service.name", xxx); 不要System.setProperty("java.security.auth.login.config"和System.setProperty("java.security.krb5.conf"
懒丹
2021-01-09
打赏
举报
回复
根本就不是这样玩
Toroidals
2020-12-08
打赏
举报
回复
是不是和spark一样默认读取的是hdfs文件,在krb5文件路径前面加:file://
weifangzjx
2020-12-03
打赏
举报
回复
大佬,解决没
Flink
读取
Kafka
数据保存到Redis的解决方案教程
大数据发展史:
Flink
和storm sparkstreaming对比实
时
框架如何选择1:需要关注流数据是否需要进行状态管理 2:At-least-once或者Exectly-once消息投递模式是否有特殊要
求
3:对于小型独立的项目,并且需要低延迟的场景,建议使用storm 4:如果你的项目已经使用了spark,并且秒级别的实
时
处理可以满足需
求
的话,建议使用sparkStreaming5:要
求
消息投递语义为 Exactly Once 的场景;数据量较大,要
求
高吞吐低延迟的场景;需要进行状态管理或窗口统计的场景,建议使用
flink
针对以上知识我们通过
flink
读取
kafka
保存到redis方式快速让大家学习
flink
如何使用,以及我们如果搭建高性能的
flink
应用,这个课程属于快速实战篇。
Flink
+
kafka
+ redis 实
时
计算
flink
连接
kafka
报错
flink
连接
kafka
报错
问题
解决办法
Flink
连接
kafka
连接
不上
Flink
连接
kafka
Flink
之
Kafka
连接
器
Flink
之
Kafka
连接
器
【
Flink
】
Flink
连接
Kafka
文章目录1 项目依赖 1 项目依赖
Java
50,545
社区成员
85,620
社区内容
发帖
与我相关
我的任务
Java
Java相关技术讨论
复制链接
扫一扫
分享
社区描述
Java相关技术讨论
java
spring boot
spring cloud
技术论坛(原bbs)
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章