使用datavines 中spark 引擎做任务检测,程序和spark 这一套环境必须部署在同一台服务器中吗 请教一下,使用datavines 中spark 引擎做任务检测,程序和spark 这一套环境必须部署在同一台服务器中吗?具体要做哪些配置,才能完全把任务跑起来[捂脸][捂脸]... 帅平大数据2025-10-23326 阅读1 评论
park读取paimon的数据来跑批耗时太久,导致源数据的snapshot已经过期了,找不到对应的数据了 你们有没有遇到过这样的问题,spark读取paimon的数据来跑批,但是spark的任务耗时都比较久7-8个小时,这样就会导致源数据的snapshot已经过期了,找不到对应的数据了,现在怎么办?... 帅平大数据2025-10-14461 阅读1 评论
请问一下paimon的流批一体, 指的是存储和读写的一体吗? 请问一下paimon的流批一体, 指的是存储和读写的一体吗? 计算代码是否也是一套能搞定呢? 比如flink sql流读写法和spark sql写法不一样,比较好奇这一点。... 帅平大数据2025-06-10546 阅读1 评论
Spark Stage的划分逻辑?如何查看Spark任务的Stage?你在做任务优化的时候有哪些优化策略? Spark Stage的划分逻辑?如何查看Spark任务的Stage?你在做任务优化的时候有哪些优化策略?... 帅平面试刷题2025-05-15490 阅读1 评论