搜索内容

包含标签:hadoop 的文章
  • HDFS与MapResource笔记
    5G

    HDFS与MapResource笔记

    客户端向NN请求上传文件 NN回应可以上传 请求上传块,返回DN 所以后面就比较慢 找最近的服务器进行 64K发到1节点,1节点立刻发给2节点,同时1节点自动开始落盘,……
    admin 2023-07-21
  • hadoop分布式系统复习题 选择题
    5G

    hadoop分布式系统复习题 选择题

    1、以下哪一项不属于 Hadoop 可以运行的模式? 互联模式 2、下面哪个程序负责 HDFS 数据存储? Datanode 3、HDFS 中的 block 默认保存__3 _份。 4、配置Hadoo……
    admin 2023-07-20
  • hadoop组成及其架构
    架构

    hadoop组成及其架构

    1.Hadoop组成 组成Hadoop的最核心框架有三个MapReduce、YARN和Hdfs,分别是分布式计算框架、资源调度框架和分布式文件系统。 1.1 HDFS架构概述 Hadoop Dist……
    admin 2023-07-18
  • HBase 架构
    架构

    HBase 架构

    文章目录 一,HBase 架构简介 hbase架构拓扑图 Client Zookeeper Master RegionServer HLog(WAL log) Region Memstore 与 storefile HBase和HDFS的对比……
    admin 2023-07-09
  • " alt="大数据处理架构Hadoop">
    架构

    大数据处理架构Hadoop

    Hadoop两大核心:HDFS和MapReduce Hadoop的特性: 1.高可靠性:多台机器构成集群,部分机器故障,剩余机器可以继续对外提供服务 2.高效率:成百上千台机器一……
    admin 2023-07-06
  • 一文带你快速初步了解云计算与大数据
    云计算

    一文带你快速初步了解云计算与大数据

    目录 🔍一、云计算基础 1、云计算的概念、特点、关键技术 2、云计算的分类 3、云计算的部署模式 4、云计算的服务模式:IaaS、PaaS、SaaS分别是什么,具体含义……
    admin 2023-07-03
  • Hadoop基础——HDFS知识点梳理
    5G

    Hadoop基础——HDFS知识点梳理

    HDFS基础知识 1. 介绍一下HDFS组成架构? 组成部分: HDFS Client, NameNode, DataNode Secondary NameNode( HA模式下是 StandBy NameNode) Client: 客……
    admin 2023-07-03
  • 数据仓库是什么?
    云计算

    数据仓库是什么?

    对于大数据的学习者来讲,深入理解数据仓库是很重要的。本文将对数据仓库的基本概念进行讲解,大家可以在看完数据仓库的概念、主要特征以及分层架构之后,真……
    admin 2023-06-27
  • [Sqoop 安装配置]
    研发管理

    [Sqoop 安装配置]

    目录 🍗前言: 🍗 下载地址: 🍗首先需要有Java环境,确定是否安装Java和Hadoop 🍗压缩包解压指令: #重命名sqoop目录[root@hadoop01 local]#mv sqoop-1.4.7 sqoop  ……
    admin 2023-06-24
  • Hive SQL:DDL建库 建表
    研发管理

    Hive SQL:DDL建库 建表

    Hive SQL:DDL建库 / 建表 🐘Hive SQL数据库 建库 数据库 在Hive中,默认的数据库叫做default,存储数据位置位于HDFS:/user/hive/warehouse 用户自己创……
    admin 2023-06-19