全部面试刷题微服务数据库消息队列搜索引擎大数据运维 go语言机器学习

请问下 mysql cdc 的任务一般要多大内存，dinky 上批处理的任务能提交成功，但是写 mysql cdc - doris 的任务就报这个错了

提问者：帅平问题分类：大数据

请问下 mysql cdc 的任务一般要多大内存，dinky 上批处理的任务能提交成功，但是写 mysql cdc - doris 的任务就报这个错了，flink-application 模式的基于 yarn

Mysql

发布于：7个月前 (03-12) IP属地：未知

2 个回答

抛去江山、换她笑面如花

你要去yarn界面找下完整日志看看，再就是看看你的flink的conf里配置的单个jb或者tb的内存是不是超过了你yarn队列的容易配置，如果你CDC设置了多并行度，yarn队列可用的资源不够，也可能容器起不来

发布于：7个月前 (03-12) IP属地：四川省

少女榨汁机

dinky 不限制你资源他就是把任务和你带的参数提交给ta

发布于：7个月前 (03-12) IP属地：四川省

我来回答