Hive报错org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask

org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask

Dbeaver连接Hive数据库操作指导

由于工作需要,当前分析研究的数据基于Hadoop的Hive数据库中,且Hadoop服务端无权限进行操作且使用安全模式,在研究了Dbeaver、Squirrel和Hue三种连接Hive的工具,在无法绕开useKey认证的情况下,只能使用DBeaver工具进行远程连接。

Hive数据表删除数据操作

Hive数据表删除数据操作

在虚拟机上安装Hadoop

开启:[root@localhost .ssh]# ssh-copy-id -i ./id_rsa.pub -p22。2,刷新配置文件:[root@localhost soft]# source /etc/profile。3,测试:[root@localhost soft]# java -versi

解决Hadoop伪分布式集群jps没有datanode节点问题

解决Hadoop伪分布式集群没有datanode节点问题

hive--执行计划

来聊一聊执行计划,如果掌握了MapReduce,且开发者有一定的经验积累可以反推Compiler将SQL转换的MapReduce执行算法,并借助explain来比对你构思的执行计划和实际生成的执行计划是否存在差异,并思考差异的原因是啥,慢慢就能够对生成的算法以及算法执行路径图是否合理给出一个自己的评

Hive 根据日期计算周数以及周几

余数就是周几(0~6),0 代表周日。示例:求日期。

Spark安装配置

一文搞懂Spark安装步骤及提交流程

-bash: hadoop: 未找到命令

-bash: hadoop: 未找到命令

在 IntelliJ IDEA 中使用 Hadoop

在 IntelliJ IDEA 中使用 Hadoop

Hive和Impala的行列转换

hive行列转换

Hadoop面试题十道

Hadoop面试题十道

安装完全分布式 hive 远程安装时出现错误

/usr/bin/ssh-copy-id : INFO: Source of key(s) to be installed: "/home/hadoop/.ssh/id_rsa.pub"/usr/bin/ssh-copy-id : INFO: attempting to log in with th

解决:java.net.NoRouteToHostException: 没有到主机的路由

解决:java.net.NoRouteToHostException: 没有到主机的路由在执行spark程序的jar包时,出现下面问题查看: http://wiki.apache.org/hadoop/NoRouteToHost中,提示如下可以根据上面查找问题我出现是虚拟机之间的防火墙没有关闭查看防

Hbase的bulkload流程与实践

通常MapReduce在写HBase时使用的是方式,在 reduce 中直接生成 put 对象写入HBase,该方式在大数据量写入时效率低下(HBase 会 block 写入,频繁进行 flush、split、compact 等大量 IO 操作),并对HBase节点的稳定性造成一定的影响(GC 时间

Flink1.14提交任务报错classloader.check-leaked-classloader问题解决

Trying to access closed classloader. Please check if you store classloaders directly or indirectly in static fields. If the stacktrace suggests that t

hadoop实验

hadoop实验

HDFS中Block size的默认大小

为了确认上述问题的答案,从Hadoop的官网上看了各个版本的说明文档中关于 Data Blocks 的说明,发现是从2.7.3版本开始,官方关于Data Blocks 的说明中,block size由64 MB变成了128 MB的。有的说是Hadoop 1.X版本是64MB,2.X版本是128MB,

第1关:HDFS 上查看文件块信息

第1关:HDFS 上查看文件块信息 在右侧命令行模式操作,将本地的 /opt 目录上传至 HDFS中 /user/hadoop 目录下,并查找文件块的位置和机架信息,将查找出来的信息保存至本地的 /usr/result.txt 中。

Hadoop大数据从入门到实战(二)分布式文件系统HDFS

头歌实践教学平台教学课堂大数据从入门到实战 - 第2章 分布式文件系统HDFS。

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈