Hadoop --- HDFS介绍
HDFS 文件存储系统。适合一次写入，多次读出的场景。HDFS不需要单独安装，安装Hadoop的时候带了HDFS系统。
Hadoop Hdfs基本命令
dfs.sh 对应 DataNode / NameNode / SecondaryNameNode。yarn.sh 对应 ResourceManager / NodeManager。下载 将hellohadoop.txt 下载到当前（kb23tmp目录下）上传文件 来到instal
【大数据之Hive】二十五、HQL语法优化之小文件合并
小文件优化可以从两个方面解决，在Map端输入的小文件合并，在Reduce端输出的小文件合并。
大数据Hadoop完全分布式及心得体会
认识hadoop，根据所学知识完成作业，并总结本学期心得体会。
一百零八、Kettle采集Kafka数据到HDFS（踩坑，亲测有效）
Kettle采集Kafka数据到HDFS
Hadoop步骤二：设置免密码登录
Hadoop步骤二：安装SHH 一些常见的问题
org.apache.hadoop.io.nativeio.NativeIO$Windows.access0问题的解决
需在java项目中重新创建一个包,将NativeIO.java进行重写。NativeIO.java代码如下。修改之后,重新运行项目即可.
Hadoop分布式集群搭建（三台虚拟机）
搭建hadoop集群完整教程（一步步手把手教你搭建），新建一台虚拟机hadoop01并克隆hadoop02、hadoop03两台虚拟机，配置虚拟机网络，进行配置文件的修改，完成搭建hadoop的分布式集群。
hadoop集群启动master节点jps后没有namenode解决方案
2.切换到hadoop的目录下将logs与tmp文件与内容删除并创建新的logs。3.重新格式化namenode。
Hadoop命令大全
本节比较全面的向大家介绍一下Hadoop命令，欢迎大家一起来学习，希望通过本节的介绍大家能够掌握一些常见Hadoop命令的使用方法
Hadoop的DataNode无法启动的解决方案
3. 删除HDFS下的DataNode下的Data文件。
Hive 数据仓库介绍
hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。
基于华为云的在线拍卖数据分析
基于华为云服务器，实现在线数据拍卖分析萌新初次使用云服务器搭建Hadoop文件系统，使用Hive操作数据库，进行数据预测
基于Hadoop的网上购物行为分析设计与实现
sink3指定了一个名为sink3的数据输出端，使用了hive模式，hive的metastore地址为thrift://hadoop:9083，数据库名称为taobao，表名为taobao_data，数据格式为DELIMITED，分隔符为逗号，字段名称为user_id、item_id、behavio
Hadoop下载安装(物理机)
将hadoop-2-7.4.tar.gz包上传到/root/export/software目录。
【大数据】下载hadoop与jdk
如果使用apt-get install xxx这种方式安装的话，会把配置文件打散，可执行文件在/bin 目录，配置文件在/etc目录，这样的话hadoop找不到对应的文件，就无法运行。传输后可以直接在虚拟机中看到，将文件移动到到下载里面。此时再用 ssh localhost 命令，无需输入密码就可以
Hadoop常见配置文件及用处
mapred-site.xml：配置 MapReduce 的属性，例如作业跟踪器和任务跟踪器的地址、作业优先级、输出压缩等。yarn-site.xml：配置 YARN 的属性，例如资源管理器和节点管理器的地址、内存和 CPU 的分配、日志聚合等。core-site.xml：配置 Hadoop 的基本
【Hadoop】安装部署-完全分布式搭建
Hadoop是一个适合大数据的分布式存储和计算平台。狭义上说Hadoop就是一个框架平台，广义上讲Hadoop代表大数据的一个技术生态圈，包括很多软件框架。而我们的完全分布式，指的是在真实环境下，使⽤多台机器，共同配合，来构建⼀个完整的分布式 ⽂件系统。在真实环境中，hdfs中的相关守护进程也会分布
Hadoop 集群一直处于安全模式，强制退出后出现数据丢失警告。解决方法
也就是说，我们其实已经实际删除了某些数据块，但是记录的元数据因为一些故障导致没有进行同步，就会出现这种情况。通俗来说就是，当前系统中元数据与记录数据块前后不一致，而 Hadoop 默认要求最大的误差阀值为。此时，我们就会发现那些数据块丢失的文件，将这些文件按照路径在 HDFS 中全部删除即可。如果你
关于hadoop的Cannot set priority of datanode process
之前搜索了很多文章一直没有效果，用了一个下午的时间。因为之前我用root账户进行了初始化操作，后来又用个人账号又进行了一次初始化，最后果然出现了问题。我发现我的hadoop文件下data和logs文件夹的用户权限为root（我已修改了data的数据权限），进行了初始化还是不行。关于使用Hadoop3
