Flink Iceberg Source 并行度推断源码解析

Flink Iceberg Source 并行度推断源码解析,第1张

Flink Hive Source 并行度推断源码解析 批读 Iceberg

Iceberg 提供了两个配置:

public static final ConfigOption TABLE_EXEC_ICEBERG_INFER_SOURCE_PARALLELISM =
  ConfigOptions.key("table.exec.iceberg.infer-source-parallelism")
      .booleanType()
      .defaultValue(true)
      .withDescription("If is false, parallelism of source are set by config.\n" +
          "If is true, source parallelism is inferred according to splits number.\n");

public static final ConfigOption TABLE_EXEC_ICEBERG_INFER_SOURCE_PARALLELISM_MAX =
  ConfigOptions.key("table.exec.iceberg.infer-source-parallelism.max")
      .intType()
      .defaultValue(100)
      .withDescription("Sets max infer parallelism for source operator.");
  • table.exec.iceberg.infer-source-parallelism:默认是 true,意味着 source 的并

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/langs/920176.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-05-16
下一篇 2022-05-16

发表评论

登录后才能评论

评论列表(0条)

保存