Hadoop系列(六)Hdfs的安全模式 安全模式是hadoop的⼀种保护机制,⽤于保证集群中的数据块的安全性 。当集群启动的时候,会⾸先进⼊安全模式。当系统处于安全模式时会检查数据块的完整性。假设我们设置的副本数(即参数dfs.replication)是3... Raehadoop系列2023-02-09632 阅读0 评论
Hadoop系列(五)Hdfs运维之配置文件限额 在一个hadoop集群里面,我们经常会涉及到多个用户在操作整个集群,因为对于用户之间,我们经常会把这些用户分开,不允许a用户操作b用户的文件,同时像linux一样,每一个非root用户只能在自己的目录里面存放文件。但... Raehadoop系列2023-02-09852 阅读0 评论
Hadoop系列(三)Hdfs的特性有哪些? 在前面我们已经介绍了hdfs系统就是一个文件存储系统,这篇文章我们介绍下hdfs的特性。一、主从架构HDFS 采⽤ master/slave 架构。⼀般⼀个 HDFS 集群是有⼀个 Namenode 和⼀定数⽬的Da... Raehadoop系列2023-02-09819 阅读0 评论
热文Hadoop系列(二)Hdfs介绍 Hadoop 分布式系统框架中,⾸要的基础功能就是⽂件系统,在 Hadoop 中使⽤FileSystem 这个抽象类来表示我们的⽂件系统,这个抽象类下⾯有很多⼦实现类,究竟使⽤哪⼀种,需要看我们具体的实现类,在我们实... Raehadoop系列2023-02-091387 阅读0 评论
热文Doris基础学习系列(十二)使用HdfsLoad方式导入Hdfs中的数据 上一篇我们介绍了使用StreamLoad导入本地的数据,这篇文章我们介绍下使用HdfsLoad导入hadoop中的数据。下面直接开始演示:一、在doris中创建一张表CREATE TABLE `user` ( `id... Raedoris系列2022-11-031679 阅读0 评论