文章浏览阅读310次,点赞2次,收藏2次。时间戳现在今天昨天字符串秒数现在SELECT CURRENT_TIMESTAMP();current_dateunix_timestampFROM_UTC_TIMESTAMPGMT+8_hive转换事件类型...
admin 2024-01-23
文章浏览阅读117次。hive分布式搭建首先hive单机搭建注: 现在master机器上搭建,并初始化生成mysql中hive数据库参考博主的单机搭建博客试一试(里面包含了安装包无需寻找对应安装包)hive单机安装教程,简单实用hive集群搭建在s......
admin 2024-01-24
文章浏览阅读486次。文章目录搭建集群的模式有三种1. 源码包下载及解压2. 集群的环境3. MySQL服务端的设置3.1 安装Mysql服务端3.2 开启服务3.3 进入MySQL修改权限3.4 需要将mysql的jar包拷贝到$HIVE_HOME/lib目录下4. 修改hive-site.xml文件5. 启......
admin 2024-01-25
文章浏览阅读576次。Hive中表的类型:    1.内部表(受控表):当删除内部表时,HDFS上的数据以及元数据都会被删除   ......
admin 2024-01-22
文章浏览阅读102次。查询相关函数空字段赋值 (NVL)函数说明:给值为null的数据赋值,语法为nvl(str,replace_with),它的功能是如果string1为NULL,则NVL函数返回replace_with的值,否则返回string1的值,如果两个参数都为NULL ,则返回NULL;......
admin 2024-01-23
文章浏览阅读729次。Hive SQL 常见需求集锦需求一: 2021年9月购买过得用户/ 顾客及总人数selectname ,count(1) over(rows between unbouned preceding and unbounded following)fromw_orderswhereyear(time) = '2021-09'group by name;需求二: 顾客的购买明细信息以及每月......
admin 2024-01-24
前言关于hadoop完全分布式部署,我在https://blog.csdn.net/zisefeizhu/article/details/84317520已经有详细步骤接https://blog.csdn.net/zisefeizhu/article/details/84317520继续部署hbase分布式关于有关原理请关注这个大佬https://blog.csdn.net/Forge..._hive分布式部......
admin 2023-10-11
文章浏览阅读2w次,点赞7次,收藏3次。删除数据库时,遇到如下问题FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. InvalidOperationException(message:Database tmp is not empty. One or more tables exist.)是因为数据库中有表不能直......
admin 2024-01-12
文章浏览阅读2.4k次。查询1,基本查询(select…from)2,where语句3,分组4,join语句5,排序6,分桶及抽样查询7,其他常用查询函数1,基本查询(select..from)1.1,全表和特定列查询1.全表查询hive (default)> select * from emp;2.选择特定列......
admin 2024-01-23
文章浏览阅读432次。Hadoop 系列之 HiveHive 的官网:http://hive.apache.org/Hive versions 1.2 onward require Java 1.7 or newer.上一篇提到的 MapRedue 虽然简化了分布式应用的实现方式,但还是离不开写代码。Hive 简介Hive 是基于 Hadoop 的一个【数据仓......
admin 2024-01-22
文章浏览阅读321次。一、DDL: 全拼是Data Definition LanguageHive的DDL一般是指create delete drop alter关键字开头的操作。官网的介绍https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL 先看看HIVE的一个数据结构图:红色对应的全部都hdf......
admin 2024-01-23
文章浏览阅读1.4k次。Hive On Spark环境中执行selectcount语句时候报错:Failedto execute spark task, with exception'org.apache.hadoop.hive.ql.metadata.HiveException(Failed to create sparkclient.)如图:报错完整信息是:hive> select coun..._hive聚合函数报错...
admin 2024-01-24
文章浏览阅读274次。版权声明:本文为博主原创文章,转载请注明出处。交流QQ: 824203453欢迎访问博主个人主页:http://www.oldsheep.cnHive查询https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Select [WITH CommonTableExpression (..._or谓词中子......
admin 2024-01-24
Hive跨集群迁移数据工作是会出现的事情, 其中涉及到数据迁移, metastore迁移, hive版本升级等。1. 迁移hdfs数据至新集群hadoop distcp -skipcrccheck -update hdfs://xxx.xxx.xxx.xxx:8020/user/risk hdfs://xxx.xxx.xxx.xxx:8020/user/risk-skipcrc_hive数据迁移...
admin 2023-10-11
文章浏览阅读1.9k次。Hive 建表语句CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT col_comment], ...._hive textfile建表语句...
admin 2024-01-23
一 语法LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE]INTO TABLE tablename [PARTITION (partcol1=val1,partcol2=val2 ...)]二 表hive> desc t2;OKtid int tname string age int Time taken: 2.176_hive load...
admin 2023-10-14
文章浏览阅读515次。一、查询语句1.基本语法SELECT [ALL|DISTINCT] select_expr,select_expr,...FROM table_reference[WHERE where_condition][GROUP BY col_list][ORDER BY col_list][CLUSTER BY col_list|[DISTRIBUTE BY col_list][SO..._hive 算前10%...
admin 2024-01-12
友情链接申请要求: 不违法不降权 权重相当 请联系QQ:737597453