"user-zh"
> <
> hinobl...@gmail.com;
> 发送时间:2020年10月21日(星期三) 上午10:06
> 收件人:"user-zh"
> 主题:flink slot资源隔离
>
>
>
> flink slot的资源隔离,内存会真实隔离嘛?cpu肯定不会。
?? Flink StandAlone
Flink-On-Yarn Container??
----
??:
那不使用rocksdb的话,本身主要就是heap。那岂不是slot唯一作用就是安排任务并行度(控制线程数量等),没有什么隔离作用本质上。
Yangze Guo 于2020年10月21日周三 上午10:12写道:
> Managed Memory是隔离的,Heap,Network都是TM级别共享
>
> Best,
> Yangze Guo
>
> On Wed, Oct 21, 2020 at 10:06 AM 赵一旦 wrote:
> >
> > flink slot的资源隔离,内存会真实隔离嘛?cpu肯定不会。
>
Managed Memory是隔离的,Heap,Network都是TM级别共享
Best,
Yangze Guo
On Wed, Oct 21, 2020 at 10:06 AM 赵一旦 wrote:
>
> flink slot的资源隔离,内存会真实隔离嘛?cpu肯定不会。
flink slot的资源隔离,内存会真实隔离嘛?cpu肯定不会。
slot 之间只有 managed memory 是隔离的。
取决于你的 flink 版本,1.10 之后 managed memory 除了用于 batch operator,还会用于 rocksdb
state backend。
Thank you~
Xintong Song
On Wed, Aug 12, 2020 at 3:55 PM Cayden chen <1193216...@qq.com> wrote:
> hi,all
> 对于flink slot之间内存隔离有个疑问。就是slot中的task请求networkbufferpool的
hi??all
flink
slot??slottasknetworkbufferpool??
1/slost(??)??managed
memory??
“By default, Flink allows subtasks to share slots even if they are subtasks
of different tasks, so long as they are from the same job.”
参考官网描述[1],应该只有相同job下的task可以共享slot。
[1]
https://ci.apache.org/projects/flink/flink-docs-release-1.11/concepts/flink-architecture.html
wangl...@geekplus.com
不可以的
Thank you~
Xintong Song
On Mon, Aug 10, 2020 at 3:39 PM wangl...@geekplus.com
wrote:
>
> Flink 一个 job 不同的 operator 可以共享 slot
> 但能做到不同的 job 共享 slot 吗?
>
>
>
>
>
> wangl...@geekplus.com
>
>
Flink 一个 job 不同的 operator 可以共享 slot
但能做到不同的 job 共享 slot 吗?
wangl...@geekplus.com
10 matches
Mail list logo