记一次,kettle执行JOB的一个BUG,linux下环境表输入(查询)卡住问题,windows环境下执行正常。

news2024/10/7 8:29:55

问题

采集数据,linux下执行JOB时。
发现表输入卡在,查询卡住,如图,11:37:19、11:37:42、 11:42:56
分别在40000、60000行的时候卡住,23s、5分14s。
在这里插入图片描述

拿出sql到pl/sql上查询,并查看执行计划,均没有卡住。
在这里插入图片描述
后续通过Windows上执行,发现并没有卡住。表输入很快就查询装载到组件里了。
表
通过查看oracle的Session,是查询是完成的,确认kettle的问题。继续通过修改反馈行数为1000,发现卡在某一块查询。后续通过修改日志级别:/level Debug,修改linux的jbdc版本、换一台linux、切换到kettle9.0、修改编码等,发现依旧不行。
在这里插入图片描述

解决方法

通过创建dblink、临时表,把数据先插入到临时表(建在目标库)中,再通过临时表 插入\更新 到目标表中。

1、创建dblink、临时表(建在目标库)。

create table tabe_name_temp(……);
create  public  database link dblin_name_A
  connect to username_A identified by password_A
  using '(DESCRIPTION =(ADDRESS_LIST =(ADDRESS =(PROTOCOL = TCP)(HOST = 127.0.0.1)(PORT = 1521)))(CONNECT_DATA =(SERVICE_NAME = orcl)))';

2、kettle添加在转换前面,truncate、insert步骤。

  truncate table  tabe_name_temp;
insert into  tabe_name_temp@dblin_name_A
(……)
select 
……
from table_name

在这里插入图片描述
3、表输入语句改成查询tabe_name_temp。就可以正常的插入更新了。

select * from tabe_name_temp

在这里插入图片描述
在这里插入图片描述
至此,问题解决。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1167803.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

盘点10月Sui生态发展,了解Sui的近期成长历程!

10月是Web3的Uptober,整个行业在经历了深度的低潮期后迎来了一些回暖。Sui也紧跟行业脚步,举办了各类生态活动,包括Quset 3游戏主题的奖励活动、DeFi和zklogin专题Workshop & AMA、多平台发布的线上教育内容以及持续的科普文章输出。此外…

SPSS二项分布检验

前言: 本专栏参考教材为《SPSS22.0从入门到精通》,由于软件版本原因,部分内容有所改变,为适应软件版本的变化,特此创作此专栏便于大家学习。本专栏使用软件为:SPSS25.0 本专栏所有的数据文件请点击此链接下…

多测师肖sir___app测试_001

app测试 一、app测试分为两大类 app手工测试(讲) app自动化测试(讲) (1)手工app测试? 就是通过手点击app上的应用,cs架构上 (2)app自动化测试? 通…

*LEEDCODE 73矩阵置零

![在这里插入代码片](https://img-blog.csdnimg.cn/ab1d7d4b9d5046d8900de430249be3bf.png)1 0 0 替换两个列表 2 记录时 0 0 已经是半改好的状态

整理10个地推拉新app接单平台,免费一手推广渠道平台干货分享

1. 聚量推客: “聚量推客”汇聚了众多市场上有的和没有的地推网推拉新接单项目,目前比较火热,我们做地推和网推从业者如果长期在这行业去做推广可以使用这个平台,价格高数据也好,大部分拉新项目也都是官签一手资源 一…

nodejs express uniapp 图书借阅管理系统源码

开发环境及工具: nodejs,mysql5.7,HBuilder X,vscode(webstorm) 技术说明: nodejs express vue elementui uniapp 功能介绍: 用户端: 登录注册 首页显示轮播图&am…

shell脚本的一些测试和笔记总结

目录 1、cat <<EOF2、echo -e3、$#、 $、 $* 、 $?4、测试的demo 1、cat <<EOF cat命令表示查看&#xff0c;而cat <<EOF命令表示将进行输入&#xff0c;直到以EOF终止符来结束输入&#xff08;最后的新行&#xff09;。EOF必须写在一行的头部&#xff0c;…

2023李宏毅机器学习HW05样例代码中文注释版

这里只是 2023 李宏毅机器学习 HW05 样例代码的中文注释版的分享&#xff0c;下面的内容绝大部分是样例代码&#xff0c;补充了小部分函数的功能解释&#xff0c;没有做函数功能上的修改&#xff0c;是 Simple baseline 版本。 notebook 代码下载: [EN] [ZH] 文章目录 作业描述…

为什么CDN要部署全球节点 有什么好处

当今互联网时代&#xff0c;CDN&#xff08;内容分发网络&#xff09;已经成为网络加速的重要工具。CDN通过分布式节点在全球范围内分发内容&#xff0c;从而提高网站和应用的性能&#xff0c;减少延迟&#xff0c;降低带宽成本&#xff0c;增强用户体验。本文将探讨CDN加速的好…

浪涌保护器,漏电保护器和空气开关的区别

地凯科技浪涌保护器 浪涌保护器&#xff0c;也叫防雷器或过电压保护器&#xff0c;是一种为各种电子设备、仪器仪表、通讯线路提供安全防护的电子装置。它主要用于限制过电压和泄放浪涌电流。 浪涌是指瞬间超出稳定值的峰值&#xff0c;包括浪涌电压和浪涌电流。供电系统的浪…

进击的代码之路:如何培养解决问题的架构思维?

目录 一、拓宽知识面 二、学习设计原则与模式 三、培养系统思维 四、注重可扩展性 五、多角度思考 六、实践经验总结 七、团队协作与交流 培养解决问题的架构思维是每位开发者在成长过程中都需要掌握的重要能力之一。架构思维不仅可以帮助我们更好地理解和解决复杂的技…

子串简写(第14届蓝桥杯b组题目)

程序猿圈子里正在流行一种很新的简写方法&#xff1a; 对于一个字符串&#xff0c;只保留首尾字符&#xff0c;将首尾字符之间的所有字符用这部分的长度代替。 例如 internationalization 简写成 i18n&#xff0c;Kubernetes 简写成 K8s&#xff0c;Lanqiao 简写成 L5o 等。 …

【实用】得到三个动态时间点作为分界点

因为周报需要对比上周,所以现在有一个需求&#xff0c;动态生成上周周一的时间点&#xff0c;类似 ‘2023-10-23 00:00:00’ 并将值赋予给time2变量,将time2 减去7天&#xff0c;得到的时间点赋值给time1&#xff0c;将time2 减去7天&#xff0c;得到的时间点赋值给time3&#…

java学习路线24版

前言 作为大四老学长的秃狼&#xff0c;近日收到大量兄弟们的私信&#xff0c;希望我能出一期java学习路线的视频&#xff0c;很多小伙伴也是大一的新生&#xff0c;都想和我一样做最美逆行者。还有一些非科班准备转码的小伙伴&#xff0c;不想走培训班那条路线想要通过自学找…

利用 docker 实现JMeter分布式压测

&#x1f4e2;专注于分享软件测试干货内容&#xff0c;欢迎点赞 &#x1f44d; 收藏 ⭐留言 &#x1f4dd; 如有错误敬请指正&#xff01;&#x1f4e2;交流讨论&#xff1a;欢迎加入我们一起学习&#xff01;&#x1f4e2;资源分享&#xff1a;耗时200小时精选的「软件测试」资…

Linux中centos获得root权限

1.在centos中右键打开终端 2.输入su root会显示密码&#xff0c;直接输入自己的密码就可以&#xff0c;他不会显示输入的内容但是密码已经输入进去了&#xff0c;输入密码后点击回车。 3.输入后前面的用户名变成root如图片里画的三条横线中的内容所示&#xff0c;$符号变成#则…

JavaScript设计程序结构

JavaScript提供了20多个命令&#xff0c;分别执行不同的操作。从用途分析&#xff0c;这些命令可以分为&#xff1a;声明语句、分支控制、循环控制、流程控制、异常处理和其他语句。本贴将重点讲解程序结构设计命令&#xff0c;包括if条件判断语句、switch多分支语句、for循环语…

校企联动,促进就业丨湖北三峡职院到访唯众考察交流

11月2日&#xff0c;湖北三峡职院技术学院电子信息学院学工办主任林雯&#xff0c;教师何峡峰、江晶晶、张博阳一行到访武汉唯众智创科技有限公司进行考察交流。唯众创始人辜渝傧及相关人员等进行了热情接待。此次活动旨在促进校企合作&#xff0c;加强教育与实践的结合&#x…

vue二维码生成插件qrcodejs2-fix、html生成图片插件html2canvas、自定义打印内容插件print-js的使用及问题总结

一、二维码生成插件qrcodejs2-fix 1.安装命令 npm i qrcodejs2-fix --save2.页面使用 import { nextTick } from vue; import QRCode from qrcodejs2-fix; nextTick(() > {let codeView document.querySelector("#codeView");codeView.innerHTML ""…

antd的Table组件使用rowSelection属性实现多选时遇到的bug

前言 前端样式框架采用AntDesign时&#xff0c;经常会使用到Table组件&#xff0c;如果要有实现多选或选择的需求时往往就会用到rowSelection属性&#xff0c;效果如下 rowSelection属性属性值如下 问题 文档中并没有说明选择时以数据中的哪个属性为准&#xff0c;看官方案例…