单个作业中的Flink EXECUTE语句集和数据流

编程入门 行业动态 更新时间:2024-10-27 11:28:34
本文介绍了单个作业中的Flink EXECUTE语句集和数据流的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧! 问题描述

不知何故,我无法在单个环境中执行语句集和可查询流,如果我的最后一条语句是flinkEnv.ecute,它将执行可查询流,而不执行语句集中的其他语句,反之亦然

val flinkEnv = StreamExecutionEnvironment.getExecutionEnvironment(); val tableEnv = StreamTableEnvironment.create(flinkEnv); val statementSet = tableEnv.createStatementSet(); statementSet.addInsertSql("INSERT INTO OUTPUT (SELECT * FROM INPUT_TRANSFORFM)") tableEnv.toChangelogStream(tableEnv.sqlQuery("SELECT * FROM OUTPUT")).keyBy(row -> row.getField(0)).asQueryableState("OUTPUT_CHANGELOG_STATE"); flinkEnv.execute("job"); // only execute queryable operator //statementSet.execute(); // only execute insert statement, not queryable state

OUTPUT表定义为upsert-kafka->;OUPUT(pkey, name)

接口

推荐答案当前限制此功能。即使使用较低的层也是可能的。

本ticket跟踪语句集+输出到数据流API的用例。

作为一种解决办法,您可以使用toChangelogStreamforsqlQuery("SELECT * FROM INPUT_TRANSFORM"),然后使用fromChangelogStream再次将其注册为表,以便在多个sqlQuery()s中引用同一管道。

更多推荐

单个作业中的Flink EXECUTE语句集和数据流

本文发布于:2023-10-17 13:24:14,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1501052.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:作业   数据流   语句   EXECUTE   Flink

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!