Oracle 迁移 Hive 过程中遇到的问题总结
最近一个小伙伴在做从Oracle到Hive的业务迁移工作,在迁移过程中属实遇到了一些坑,今天就来汇总一下这些坑,避免以后大家其他业务迁移的时候再出现类似的问题,即使出现了也可以拿过来进行对照解决。在迁移业务的过程中,要了解不同系统中函数的用法,希望我遇到的坑,给大家带来一点借鉴意义!
Hive调优之计算资源配置(一)
hive调优
flink-sql读写hive-1.16
本文为 flink 1.16 官网中读写 hive 部分的翻译整理。
Hive窗口函数-lead/lag函数
Hive窗口函数-lead/lag函数
SQL实现一行数据分组后转多行多列
通过聚合拆分再聚合的方式实现一行数据变分组的多行多列
hive中substring_index()的使用
hive sql substring_index
解决Hive视图View数据乱码的问题
解决Hive视图View数据乱码的问题
Hive(25):Select高级查询之Subqueries子查询
1 from子句中子查询在Hive0.12版本,仅在FROM子句中支持子查询。而且必须要给子查询一个名称,因为FROM子句中的每个表都必须有一个名称。子查询返回结果中的列必须具有唯一的名称。子查询返回结果中的列在外部查询中可用,就像真实表的列一样。子查询也可以是带有UNION的查询表达式。Hive支
sql数据类型映射与数据类型转换
MaxCompute 2.0新增了DECIMAL类型与DATETIME的常量定义方式,100BD是数值为100的DECIMAL,2017-11-11 00:00:00是DATETIME类型的常量。关于CAST的介绍请参见CAST。关系运算符包括=、<>、<、<=、>、>=、IS NULL、IS NO
Flink Direct Reader访问Hive ACID表被ranger授权限制
Flink Direct Reader 绕过了 Hive Thrift 接口,直接读取 Hive ACID 表的数据文件,因此无法受到 Ranger 的授权限制。要在受到 Ranger 鉴权的环境中访问 Hive ACID 表,可以考虑使用 Hive Thrift 接口或配置适当的 Ranger 授
Hive 窗口函数大全
hive的窗口函数使用集合和使用示例
使用hive查看orc文件 orcfiledump命令详解 异常处理(Failed to read ORC file)
hadoop hive查看orc文件 orc文件修复 orcfiledump命令详解
HIVE获取json字段特定值(单个json或者json数组)
说明:解析json的字符串json_string,可指定多个json数据中的key,返回对应的value。代码:SELECT get_json_object(‘{“NAME”:“张三”,“ID”:“1”}’,‘$.NAME’) as name;SELECT get_json_object(‘{“NA
Hive学习(11)hive去除空格或去掉字符串前后或中间的某一字符串
hive去除空格或字符串某一字符时,MySQL及Hive解决方案
hive sql—开窗函数—累积求和和滑动求和
hive sql—开窗函数—累积求和和滑动求和
Hive 中的爆炸函数( lateral view 与 explode 用法)
hive中的爆炸函数( lateral view 与 explode详解),本篇文章主要针对实际应用中的情况,进行讲解
Hive SQL——explode拆分函数&多行(列)合并为一行(列)&reflect函数
Hive SQL —— explode 拆分函数
Hive自定义函数
本文章主要分享单行函数UDF(一进一出)现在前面大体总结,后边文章详细介绍自定义函数分为临时函数与永久函数需要创建Java项目,导入hive依赖创建类继承GenericUDF(自定义函数的抽象类)(实现函数)打成jar包,传到服务器上将jar包添加到hive的class path上临时生效通过hiv
教你使用三种方式写一个最基本的spark程序
教你使用三种方式写一个最基本的spark程序
Hive学习:Hive如何进行update?
在hive中,没有直接的update语句,可以使用insert overwrite来覆盖原有表数据达到更新的效果。