我在测试的时候12个并行度,16,24都测试了但启任务后的cpu利用率还是 140%左右,不管并行度设置为多少。

















在 2021-01-05 16:49:02,"赵一旦" <[email protected]> 写道:
>不纠结几核。如果任务结点本身不多的话,可以提一提再,只要network buffer数量够就好。
>
>爱吃鱼 <[email protected]> 于2021年1月5日周二 下午4:39写道:
>
>> 24核的机器,已经加到了24的并行度了,然后会 24个并行度的cpu利用率加起来也是140%左右
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>>
>> 在 2021-01-05 16:24:30,"赵一旦" <[email protected]> 写道:
>> >加大并行度。
>> >
>> >爱吃鱼 <[email protected]> 于2021年1月5日周二 下午4:18写道:
>> >
>> >> 怎么提高flink cpu利用率。
>> >> 业务场景,flink batch ,读取大概两个亿数据的文件,然后进行flatmap处理。
>> >> flatmap处理出来的数据转换成表,并用sql 对表的数据进行 max(time),min(time),count等处理。
>> >> cpu利用率只有140%左右,机器还有很多资源,请问怎么可以提高flink cpu的利用率。
>>
>>
>>
>>
>>
>>

回复