跳到主要内容

flink-questions

批流一体的疑问

对批流一体的入门级疑问, 下面是咨询chatgpt后的结果, 但是也不知道对不对, 还没有去处理过这个领域的case, 只能将信将疑.

picture 1

hive作为批处理系统为什么支持作为flink实时系统的写入端

hive作为批处理系统, 为什么flink可以写入hive呢? 平时使用hive从来没有开启过transaction事务, 需要开启事务的也不会使用hive了, 导致其实对hive的这种事务系统完全不了解, 还停留在每次只能整个分区overwrite的年代.

咨询chatgpt, 很快就能把这部分的入门知识补上了.

picture 2

关于flink实时计算和流式计算的区别

没有使用场景和需求, 只看文字还是没什么深刻印象.

picture 3

flink的无限时间流

picture 4

flink并行度与kafka的分区

picture 5

picture 6