包含标签:hadoop 的文章
-
-
-
HBase 在集群中对表(ddl)和数据(dml)的相应操作
HBase 在集群中对表(ddl)和数据(dml)的相应操作 HBase特点 要开启hbase之前必须先开启hdfs和zookeeper(关闭将start改为stop即可) 启动hdfs:my_hadoop.…… -
Ubuntu 安装配置SSH(ssh: connect to host localhost port 22: Connection refused问题的解决)
目录 应用场景 错误信息 基础知识 配置过程 应用场景 Hadoop搭建伪集群启动和关闭服务时ssh报错,需要手动安装ssh服务。 错误信息 基础知识 SSH是指S…… -
-
Flink运行架构及相关命令
Flink运行架构及相关命令 最近学习了Flink,整理了一些关于flink函数框架运行和相关算子的运算方法。 flink阿里17年开始开源blink,里面融合的部分flink功能…… -
hadoop从零搭建一个集群
重要说明:一切安装时基于centos7 1.linux最小化安装 安装完成linux最小化base,关闭base,重新克隆一个完整的系统,并命名为hadoop40 2.配置主…… -
Hive的split,explode和lateral view(保姆级教程)
split函数: split函数:分割字符串,返回值是array 使用desc function split命令查看hive中的split的使用的基本语法。 split函数根据regex来截取字符串,r…… -
Hadoop完全分布式搭建
hadoop完全分布式搭建 1. 准备工作 1.1. 软件版本 1.2. 集群规划 2. 环境搭建 1.修改主机名 2. 关闭防火墙 3.修改hosts文件 4.配置ssh,无密码登录 5…… -
Hadoop使用MapReduce求ncdc气象数据中的最低温度
一、下载、解压、合并与上传数据 在进行数据处理前首先需要获得所需要的数据,首先下载数据 cd /home/hadoop mkdir temp #创建文件夹用于存放数据 cd temp s……