hive truncate 命令卡死问题

2024-06-17 13:58

本文主要是介绍hive truncate 命令卡死问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

  • hive 执行create,drop,insert等语句没有问题

    执行truncate命令卡死,查看log:/tmp/root/hive.log

    2017-06-16T09:16:16,658  INFO [main] lockmgr.DbTxnManager: Setting lock request transaction to txnid:0 for queryId=root_20170616091616_a575e3d7-ff4e-40fc-a5ed-771ab991219d
    2017-06-16T09:16:16,658  INFO [main] lockmgr.DbLockManager: Requesting: queryId=root_20170616091616_a575e3d7-ff4e-40fc-a5ed-771ab991219d LockRequest(component:[LockComponent(type:EXCLUSIVE, level:TABLE, dbname:alarm, tablename:alarm_no_partition, operationType:NO_TXN, isAcid:true)], txnid:0, user:root, hostname:master, agentInfo:root_20170616091616_a575e3d7-ff4e-40fc-a5ed-771ab991219d)
    2017-06-16T09:16:16,678  INFO [main] txn.TxnHandler: 'CheckLock' locked by 'master'
    2017-06-16T09:16:16,696  INFO [main] txn.TxnHandler: 'CheckLock' unlocked by 'master'
    2017-06-16T09:16:16,700  INFO [main] lockmgr.DbLockManager: Response to queryId=root_20170616091616_a575e3d7-ff4e-40fc-a5ed-771ab991219d LockResponse(lockid:227, state:WAITING)
    2017-06-16T09:16:16,818  INFO [main] txn.TxnHandler: 'CheckLock' locked by 'master'
    2017-06-16T09:16:16,835  INFO [main] txn.TxnHandler: 'CheckLock' unlocked by 'master'
    2017-06-16T09:16:17,057  INFO [main] txn.TxnHandler: 'CheckLock' locked by 'master'
    2017-06-16T09:16:17,074  INFO [main] txn.TxnHandler: 'CheckLock' unlocked by 'master'
    2017-06-16T09:16:17,495  INFO [main] txn.TxnHandler: 'CheckLock' locked by 'master'
    2017-06-16T09:16:17,512  INFO [main] txn.TxnHandler: 'CheckLock' unlocked by 'master'
    2017-06-16T09:16:18,334  INFO [main] txn.TxnHandler: 'CheckLock' locked by 'master'

    出现在hive lock,问题查看官网介绍:https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties#ConfigurationProperties-Locking

    hive.lock.mapred.only.operation

    • Default Value: false
    • Added In:
      This configuration property is to control whether or not only do lock on queries that need to execute at least one mapred job.

    设置值为true,解决问题
    shell上设置只是临时设置,hive-site.xml中需要重启HiveMetaStore

这篇关于hive truncate 命令卡死问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1069640

相关文章

Linux如何查看文件权限的命令

《Linux如何查看文件权限的命令》Linux中使用ls-R命令递归查看指定目录及子目录下所有文件和文件夹的权限信息,以列表形式展示权限位、所有者、组等详细内容... 目录linux China编程查看文件权限命令输出结果示例这里是查看tomcat文件夹总结Linux 查看文件权限命令ls -l 文件或文件夹

解决pandas无法读取csv文件数据的问题

《解决pandas无法读取csv文件数据的问题》本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参... 目录一、前言二、问题复现1. 问题2. 通过 on_bad_lines=‘warn’ 跳过异常数据3

idea的终端(Terminal)cmd的命令换成linux的命令详解

《idea的终端(Terminal)cmd的命令换成linux的命令详解》本文介绍IDEA配置Git的步骤:安装Git、修改终端设置并重启IDEA,强调顺序,作为个人经验分享,希望提供参考并支持脚本之... 目录一编程、设置前二、前置条件三、android设置四、设置后总结一、php设置前二、前置条件

解决RocketMQ的幂等性问题

《解决RocketMQ的幂等性问题》重复消费因调用链路长、消息发送超时或消费者故障导致,通过生产者消息查询、Redis缓存及消费者唯一主键可以确保幂等性,避免重复处理,本文主要介绍了解决RocketM... 目录造成重复消费的原因解决方法生产者端消费者端代码实现造成重复消费的原因当系统的调用链路比较长的时

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

kkFileView启动报错:报错2003端口占用的问题及解决

《kkFileView启动报错:报错2003端口占用的问题及解决》kkFileView启动报错因office组件2003端口未关闭,解决:查杀占用端口的进程,终止Java进程,使用shutdown.s... 目录原因解决总结kkFileViewjavascript启动报错启动office组件失败,请检查of

Linux系统之lvcreate命令使用解读

《Linux系统之lvcreate命令使用解读》lvcreate是LVM中创建逻辑卷的核心命令,支持线性、条带化、RAID、镜像、快照、瘦池和缓存池等多种类型,实现灵活存储资源管理,需注意空间分配、R... 目录lvcreate命令详解一、命令概述二、语法格式三、核心功能四、选项详解五、使用示例1. 创建逻

C语言进阶(预处理命令详解)

《C语言进阶(预处理命令详解)》文章讲解了宏定义规范、头文件包含方式及条件编译应用,强调带参宏需加括号避免计算错误,头文件应声明函数原型以便主函数调用,条件编译通过宏定义控制代码编译,适用于测试与模块... 目录1.宏定义1.1不带参宏1.2带参宏2.头文件的包含2.1头文件中的内容2.2工程结构3.条件编

SpringBoot 异常处理/自定义格式校验的问题实例详解

《SpringBoot异常处理/自定义格式校验的问题实例详解》文章探讨SpringBoot中自定义注解校验问题,区分参数级与类级约束触发的异常类型,建议通过@RestControllerAdvice... 目录1. 问题简要描述2. 异常触发1) 参数级别约束2) 类级别约束3. 异常处理1) 字段级别约束

Python错误AttributeError: 'NoneType' object has no attribute问题的彻底解决方法

《Python错误AttributeError:NoneTypeobjecthasnoattribute问题的彻底解决方法》在Python项目开发和调试过程中,经常会碰到这样一个异常信息... 目录问题背景与概述错误解读:AttributeError: 'NoneType' object has no at