搜索内容

包含标签:hadoop 的文章
  • " alt="Hadoop 原理及架构详解">
    架构

    Hadoop 原理及架构详解

    ### README 本文是基于黑马程序员的 Hadoop 网课的前半部分整理的笔记,主要介绍了相关操作与组件架构。 视频网址:01-课程内容大纲与学习目标_哔哩哔哩_bili……
    admin 4天前
  • HDFS的架构优势与基本操作
    架构

    HDFS的架构优势与基本操作

    目录 写在前面 一、 HDFS概述 1.1 HDFS简介 1.2 HDFS优缺点 1.2.1 优点 1.2.2 缺点 1.3 HDFS组成架构 1.4 HDFS文件块大小 二、HDFS的Shell操作(开……
    admin 4天前
  • 大数据开发(Hadoop面试真题-卷三)
    研发管理

    大数据开发(Hadoop面试真题-卷三)

    大数据开发(Hadoop面试真题) 1、Hadoop集群工作时启动哪些进程?它们有哪些作用? 2、Hadoop在集群计算的时候,什么是集群的主要瓶颈? 3、搭建Hadoop集……
    admin 2024-03-08
  • 大数据开发(Hadoop面试真题-卷二)
    研发管理

    大数据开发(Hadoop面试真题-卷二)

    大数据开发(Hadoop面试真题) 1、在大规模数据处理过程中使用编写MapReduce程序存在什么缺点?如何解决这些问题? 2、请解释一下HDFS架构中NameNode和Data……
    admin 2024-03-08
  • 大数据开发-Hadoop伪集群搭建
    5G

    大数据开发-Hadoop伪集群搭建

    大数据开发-Hadoop伪集群搭建 文章目录 大数据开发-Hadoop伪集群搭建 环境下载地址 虚拟机环境修改(CentOs7) Java以及Hadoop安装 启动Hadoop集群 启动H……
    admin 2024-03-07
  • hive,hbase集群拷贝注意事项
    研发管理

    hive,hbase集群拷贝注意事项

    注意事项: 1.有足够的带宽,最好能300M/S = 磁盘写入速度 2.两个集群的在一个网络,且新集群的主机名=可以访问的域名。    CDH的主机名不能轻易更改,若只能……
    admin 2024-03-05
  • hadoop学习中遇到的问题一
    研发管理

    hadoop学习中遇到的问题一

    由于看视频总是断断续续,经常遇到各种报错,现将遇到的问题进行总结。 hadoop学习中遇到的问题:hadoop拒绝连接 hadoop安装好之后,在本地浏览器输入地址ht……
    admin 2024-03-05
  • ​(三)hadoop之hive的搭建1
    研发管理

    ​(三)hadoop之hive的搭建1

    下载 访问官方网站https://hive.apache.org/ 点击downloads 点击Download a release now! 点击https://dlcdn.apache.org/hive/ 选择最新的稳定版 ……
    admin 2024-02-09
  • 2024-02-01(Hive)
    物联网

    2024-02-01(Hive)

    1.我们通过忘Hive中执行SQL语句,Hive会帮我们将SQL语句翻译成MapReduce在底层去做分布式的计算。 2.Hive看似处理的是mysql的表,但实际上处理的是HDFS中的文……
    admin 2024-02-03
  • 大数据开发之Hive(压缩和存储)
    5G

    大数据开发之Hive(压缩和存储)

    第 9 章:压缩和存储 Hive不会强制要求将数据转换成特定的格式才能使用。利用Hadoop的InputFormat API可以从不同数据源读取数据,使用OutputFormat API可以……
    admin 2024-01-15