活动
hive创建udf函数流程
1.编写udf函数 引入pom文件 <dependencies> <dependency> <
hive中如何计算字符串中表达式
比如 select ' 1+(2-3)+(-4.1-3.1)-(4-3)-(-3.3+4.3)-1 ' col ,1
Hive | 加载数据后，出现字段显示为 NULL的问题
进到HIVE命令下，命令格式： 在root目录下创建的user.txt文件，格式如下： 将创建好的文件加载到新创建的tb_user表中： 成功界面： 进一步查询： 为什么呢? 如果按照上面的
Hive-JDBC round(num, 0)取整问题记录
生产环境ELK记录的报错信息：对应的报错代码片段：报错的SQL语句：将这个SQL拿到类似于ad hoc这种即时查询可视化平台查询得到的结果： 考虑到是线上应用，故而考虑将SQL取整，即使用impala提供的round(num, 0)
JDBC getColumnLabel和getColumnName区别及自动解析查询字段
背景最近在负责的一款数据产品，其功能之一为数据推送，即把数据从源头数据源同步到目标数据源。 功能大致如下，SQL语句块需要支持多段SQL，以英文逗号;分隔：问题自测时发现一个问题。对于select 11 as userid
textfile,sequencefile和rcfile的使用与区别详解
textfile,sequencefile和rcfile的使用与区别详解
hive的关系运算、逻辑预算、数学运算、数值运算、日期函数、条件函数和字符串函数的语法与使用示例详解
Apache Hive 系列文章1、apache-hive-3.1.2简介及部署（三种部署方式-内嵌模式、本地模式和远程模式）及验证详解2、hive相关概念详解--架构、读写文件机制、数据存储3、hive的使用示例详解-建表、数据类型详解、
Hive跨集群和版本迁移
公司重新搭建CDH6.3.0，并把旧集群Hive1.1迁移新集群Hive2.1，记录一下过程。一. 迁移Hive数据和MySQL中的matastore通过DistCp拷贝Hive数据到新集群，并从MySQL中导出Hive的元数据上传到新集群
Hive on Tez改用beeline客户端报错的解决办法
问题现象：就是beeline客户端连接hive的时候更换引擎为tez执行报错，用mr就不报错，同样的语句在hive cli中，更换引擎为tez不报错，mr引擎执行也不报错解决方案：之前这个配置为false就报错改成true
hue创建hive表的时候显示注释乱码
问题环境软件 版本CDH 6.3.0hive 2.1.1-cdh6.3.0问题原因其实hive的元数据都是存储在数据库里面，目前支持mysql,oracle,Postgres和MS SQL Server。如果我们建表发现乱码，很显然就可以归
Hadoop快速入门（一）
Hadoop快速入门（一）
第11章 hive常见错误及解决方案
第11章 hive常见错误及解决方案
CDH常用优化配置
1.hive.metastore.warehouse.dirHive 仓库目录是在 HDFS 中存储 Hive 表格的位置。注意此仓库目录的 Hive 默认值为“/user/hive/warehouse”。2.hive.warehouse.
数栈技术分享：带你详解数栈FlinkX实时采集原理与使用
一、FlinkX实时采集功能的基本介绍 首先为大家介绍下FlinkX实时模块的分类，如下图所示： 1、实时采集模块(CDC) 1）MySQL Binlog插件 利用阿里开源的Canal组件实时从MySQL中捕获变更数据。 2）Postgr
hive 搭建数据仓库
Beeline连接 !connect jdbc:hive2://ip:port 用户名 hive 密码 hive有的创建的hive数据库可能存在乱码的现象，故本次一并解决。1.修改Mysql中的hive表相关配置修改表字段注解和表注解修改分
有关hive表占用磁盘空间大小的研究
---有关hive表占用磁盘空间大小的研究-----不加【distribute by uuid sort by uuid,servAddtime】-----16.7 Ginsert overwrite table tmp_ods_sony_
Impala自动同步Hive元数据
目 录1. 引言 31.1 背景介绍 31.2 编写目的 31.3 适用范围 31.4 角色职责 31.5 其他 32. 非生产环境测试结果 42.1 impala参数调整前测试
如何使用Hive合并小文件
目前集群存于一个非常不健康的状态，主要问题是小文件太多，单个DataNode的block数量阈值是500,000，而现在单个DataNode的block为2,631,218，约为阈值的5倍，现在所有DataNode都处于黄色不健康状态。 小
基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优
基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优 Hive默认使用的计算框架是MapReduce，在我们使用Hive的时候通过写SQL语句，Hive会自动将SQL语句转化成MapReduce作业去执行，但是Map
hive on spark报timed out waiting for connection from the Remote Spark Driver解决方案
Client '1c5c0ae6-d56d-47b3-ae5a-d85fd941b14e_0' timed out waiting for connection from the Remote Spark Driver报
热门文章
如何使用Hive合并小文件
2023-06-14 09:13:23
hive视图操作
2023-04-25 10:21:36
【iOS越狱开发】如何将应用打包成.ipa文件
2023-05-10 06:00:56
基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优
2023-06-14 09:13:14
第4章 DDL数据定义
2023-06-14 09:05:39
hive 默认队列修改
2023-05-31 08:48:11
- APP
