在前面我们介绍了数据块压缩,这里我们再介绍一个和数据块压缩配套使用的数据块编码。这个数据块编码是什么意思呢?其实就是每一个key会根据前 key 进行编码和压缩。这个编码选项( FAST_DIFF )让HBase只存...
作者 Rae 发布的文章
Hbase高级进阶系列(四)Hbase表设计之数据块压缩
在hbase的表里面,我们知道数据是以块的方式进行存储的,每一个块大小默认是64KB。但是这个块存储的数是默认没有压缩的。然后我们再回想一下,在hbase里面,每一列他存储的值其实都是特定的类型,那么如果我们对值进行...
Hbase高级进阶系列(三)Hbase表设计之行键设计
在使用hbase做表的时候,表设计也是一个非常重要的概念,一个好的表设计可以为后期hbase的使用减少很多的麻烦。但是对于大多数企业来说,前期在设计表的时候,一般都是做简单的设计,随着后面业务的发展,此时整体表结构可...
Hbase高级进阶系列(二)Hbase集群服务优化参考
在网上其实对于Hbase的优化文章比较多,所以这里我们不会讲解太多,但是主要还是基于几个点来讲解。在hbase进行优化的时候,我们一般要参考下以下几个指标:1、对服务器配置的优化 2、对yarn的优化(hadoop与...
在前面我们介绍了hbase主要以表的形式进行存储,并且已经实现了hbase的部署,那么这里我们来演示以下hbase的使用。这里我们主要是使用hbase命令给让大家入门。首先进入到hbase的bin目录下,我们执行hb...
这里我们介绍下Hbase的集群搭建中服务器的选择,为什么呢?这主要是由于这个集群服务器的选择是一个非常重要的事情,但是却是很多团队几乎忽略的事情。要么上来就是很高的配置,要么就是拿一些很低的配置做一个集群。大部分的团...
(分享)集成文心一言/Chatgpt/星火等模型的AI智能对话系统
在国内目前AI相关的大模型非常火爆,很多小公司会自己开发一套类似chatgpt和文心一言的对话系统。这里我们免费分享一套已经集成了文心一言,chatgpt,星火等模型的智能AI对话系统。本系统完全开源,开箱即用,总共...
上一篇《Hbase入门到进阶系列(二)Hbase表存储介绍》我们介绍了向hbase中存储数据的时候是使用表的方式进行存储的,本文我们再介绍下hbase中存储数据的物理存储时如何存储的,首先来一张图:上面这张表介绍的比...
在hbase中,虽然他是面向列的方式存储数据,但是他也是以表的形式在存储数据,只是有一些和传统面向行的数据库存储形式不一样罢了。在hbase中数据存储还是在表里,整个表的存储要素有:1、rowkey(行键) 2、ti...
Hbase是hadoop大数据集系列的一个重要组成模块,官网上关于hbase的介绍是:HBase是一个基于Java,开源,NoSQL,非关系型、面向列的、构建在Hadoop分布式文件系统( HDFS )上的仿照谷歌的...
热文南昊网上阅卷系统使用指南(十二)合并成绩
如果所有的老师把试卷阅完之后,管理员登录考试管理,可以看到具体的进度:此时管理员就可以点击这个停止阅卷了:然后右侧有个单科合成,就是把学生的成绩合并出来,统计总分等信息,我们点击这个单科合成:当出现成绩已发布的时候,...
南昊网上阅卷系统使用指南(十一)老师阅卷
此时我们可以开始阅卷了,刚才我们设置的是test555这个老师可以阅卷,所以登录test555这个账号就可以看到分配的阅卷任务了:备注:1、分配的test555这个老师来阅卷,所以只有test555这个老师才可以看到...
南昊网上阅卷系统使用指南(十)云阅卷识别端-录入识别
此时假设学生已经考试完毕了,我们已经收集好了所有学生的答题卡,那么我们登录云阅卷识别端,进入到录入识别的模块(记得要对应考试).然后我们选择对应的科目然后就可以看到下面的录入识别方式功能可用了。这里可以使用扫描仪挨个...
南昊网上阅卷系统使用指南(九)阅卷设置
在前面我们已经创建了答题卡模板,并且已经上传到了南昊网上阅卷系统的云端。此时学生可能正在考试,所以我们可以提前设置下阅卷,也就是哪些老师阅卷哪些题。我们进入到南昊网上阅卷系统的web端,进入到刚才创建的考试里面:点击...
南昊网上阅卷系统使用指南(八)云阅卷识别端-模板管理
选择了考试之后,我们接着就要来做模板管理了,这里的模板主要是为了让步南昊网上阅卷系统对于学生的答题卡进行题目拆分算法用的,这一步很重要。所以我们会花大篇幅来介绍下。其实这个模板也可以在网页端进行上传,如下图:但是我在...
