kafka 难题,一个 flink 作业消费 5 个 topic 和 5 个作业消费 5 个 topic,那个快一点,假设集群资源全部够用,为什么?

kafka 难题,一个 flink 作业消费 5 个 topic 和 5 个作业消费 5 个 topic,那个快一点,假设集群资源全部够用,为什么

回答·2
最热
最新
  • 没有具体场景都没法说: 1、首选要知道消费的瓶颈在哪里,如果在下游,那么你这里整多少花样都没用。 2、要知道这些 topic 在业务上有没有相关性,如果没有,就不存在放到一个作业里处理的问题,就应该是多个作业。如果有相关性,那么你迟早还是得在一个作业里去处理。 很多所谓难题,其实不过是没有分析清楚问题本身而已
  • 相同的网络环境,kafka 相同的配置,topic 相同的分区,肯定是消费者数量越多,消费效率越高