包含标签:hdfs 的文章
-
Hadoop实战——MapReduce实现主播的播放量等数据的统计及TopN排序(第一篇)
进来了就点个赞呗 本次实战项目一共分三篇教学(二三篇后续更新) 第一篇:对主播文本数据的清洗,从大量数据中获取我们所需要的数据(如播放量,时长等) …… -
Hadoop——HDFS文件系统的Java API操作(上传、下载、查看、删除、创建文件)详细教学
如果还没有配置好Hadoop的可以点击链接查看如何配置 各大技术基础教学、实战开发教学(正在持续更新中······) 首先,启动Hadoop集群服务 然后在浏览器访…… -
第四届大数据竞赛-线上选拔赛 —–Hadoop集群配置
这个比赛我负责集群配置方向 集群配置如下: master slave1 slave2 ip地址 192.168.1.10 192.168.1.11 192.168.1.12 系统 centos7.2 centos7.2 cento…… -
Hadoop经典案例——单词统计
通过 Hadoop经典案例——单词统计,来演示 Hadoop集群的简单使用。 (1)打开 HDFS 的 UI,选择Utilities→Browse the file system查看分布式文件系统里的数据文…… -
-
Incompatible namespaceIDs问题解决,hdfs文件上传失败
解决namenode启动异常情况 事情起因 笔者在离线安装的hadoop上尝试往hdfs文件系统里面传输数据的时候,发现一直传不上去,报错内容如下: DataStreamer Exc…… -
Hadoop安装详细教程 单机版
Hadoop安装进程目录 前言 一、Hadoop是什么? 二、Hadoop单机版安装 1.安装步骤 2.Hadoop运行模式 3.Hadoop集群配置 三、总结 前言 随着人工智能的…… -
大数据笔记 | HDFS 常用操作命令
目录 一、HDFS 命令前缀 二、ls 命令 三、put 命令 四、moveFromLocal 命令 五、get 命令 六、rm 命令 七、mkdir 命令 八、cp 命令 九、mv 命令 十、cat 命…… -
【Linux】Hive无法插入数据
[2021-11-08 11:30:08.454]Container [pid=6936,containerID=container_1636331971860_0002_01_000007] is running 2320286728 beyond the 'VIRTUAL' memory …… -
自建大数据集群因kerberos认证无法进入hdfs Web UI问题
关于mac本机访问webdfs的kerberos认证问题的解决方式 问题如下: 在配置kerberos认证后hdfs无法访问目录文件,用户无此权限,需要进行用户认证。 解决方案……