在spark的开发中，我们一般会开发对应的应用程序，这里我们一般把他称为是一个application或者job。一个应用程序里面包含自己当前应用程序所需要操作的所有逻辑。在应用程序开发完毕之后，我们需要把这个应用程序...

spark从本质上来说算是一个分布式系统，因此我们经常听说spark集群这个词，在整个spark中，有自己的资源管理系统，当然也可以使用外部的资源管理系统例如：apache yarn或者是apache mesos系统...

首先我们上一张spark的技术栈框架图结合上面的图，这篇文章我们主要介绍spark的sparkR技术栈。我们知道，在数据分析的场景里面，很多都是使用python或者R语言的，因此基于python和R语言有很多开源库供...

首先我们上一张spark的技术栈框架图结合上面的图，这篇文章我们主要介绍spark的spark Graphx技术栈。在spark中Spark Graphx是spark提供的一个图计算框架，他是一种嵌入式的图处理API...

首先我们上一张spark的技术栈框架图结合上面的图，这篇文章我们主要介绍spark的spark mllib技术栈。这是一个在spark之上构建的机器学习库，也就是我们可以利用spark做机器学习，算法实现等应用。在s...

首先我们上一张spark的技术栈框架图结合上面的图，这篇文章我们主要介绍spark的spark Structured Streaming技术栈。这里可能大家会问，在图中没有看到spark Structured Str...

首先我们上一张spark的技术栈框架图结合上面的图，这篇文章我们主要介绍spark的spark sql技术栈。在spark中spark sql是日常中使用非常广泛的一个技术栈。整个spark sql是构建在spark...

首先我们上一张spark的技术栈框架图结合上面的图，这篇文章我们主要介绍spark的spark core技术栈。在spark中Spark core模块是整个Spark数据处理引擎的核心，它提供了分布式集群计算的基础设...

在日常中，除了使用正常的长讯之外，我们还会涉及到在Elasticsearch中进行数据统计。在elasticsearch中支持的聚合统计种类有：度量聚合统计和多桶型聚合统计。度量聚合统计是指一组文档的统计分科，可以得...

在前面我们介绍打分的时候，在查询结果里面，我们可以通过_score看到最终每个文档的打分结果，那么我们如何查看某个文档具体的打分占比呢？这里就要采用explain语法了。（这点和mysql及doris是差不多的，如果...

在使用搜索引擎的时候，对于用户来说，我们更希望我们被想要的结果被搜索出来，如果搜索结果中出现一些冗杂信息的时候，我们更希望我们想要的结果被排在最前面，这样子我们可以更快触达到我们想要的结果。在elasticsearc...