Java使用Groovy执行脚本的使用,GroovyShell Matespace内存溢出解决

news2024/11/23 15:17:30

目录

业务场景

使用了工具Groovy

遇到Metaspace内存溢出的问题

解决方案


业务场景

类似工作流的场景,需要判断  参数,是否满足流转条件。

随便举个例子:

新增商品资料。  如果是普通商品,状态为"待审核", 如果为虚拟商品,状态直接为"已发布"

Init ---"prodType == 1 && optType = ‘新增商品’"--> unAudit

Init ---"prodType == 2 && XXX"-->  released

script:"prodType == 1 && optType = XXX "

params.put("prodType ",prod.getProdType());

params.put("optType ","新增商品");

Boolean b = ScriptUtil.eval(script,params);//获取 true or false

使用了工具Groovy

代码如下

maven依赖

<!-- 脚本引擎依赖 groovy start -->
<dependency>
    <groupId>org.codehaus.groovy</groupId>
    <artifactId>groovy-all</artifactId>
    <version>2.1.9</version>
</dependency>

<dependency>
    <groupId>org.codehaus.groovy</groupId>
    <artifactId>groovy-jsr223</artifactId>
    <version>2.1.9</version>
</dependency>
<!-- 脚本引擎依赖 groovy end -->

java工具类

    public static Boolean executeScript1(String script, Map<String, Object> params)
    {
        ScriptEngine engine = new ScriptEngineManager().getEngineByName("groovy");

        // 创建 bindings 对象,将输入参数添加为变量
        Bindings bindings = engine.createBindings();
        if(params != null)
        {
            params.forEach(bindings::put);
        }

        // 执行脚本并返回输出结果
        try
        {
            return (Boolean) engine.eval(script, bindings);
        }
        catch (ScriptException e)
        {
            LOGGER.warn(String.format(" GroovyScriptEngineUtil 执行脚本出错script[%s],params[%s]  msg[%s] ", script, params.toString(),
                    e.getMessage()));
            return false;
        }
    }

遇到Metaspace内存溢出的问题

执行几万次,甚至几十万次,发现线上服务直接重启。查看日志主要错误为OutofMemoryError:Metaspace

查看Prometheus监控平台,Metaspace持续增加,不回收。

解决方案

临时解决当然是临时增加了Metaspce空间,由256M增加了512M. 指标不治本,仅仅暂时缓解重启次数。

大致参数如下:

-XX:+UseG1GC -XX:MaxMetaspaceSize=512M -XX:MetaspaceSize=256M -Xms2048M -Xss380K -Xmx2048M -XX:MaxGCPauseMillis=1000 -XX:+HeapDumpOnOutOfMemoryError

搜索相关博客后和自己debug调试,得知根本原因如下: 

因为每次都new ScriptEngine,导致 缓存script转化的Class的classMap每次也都是新的。

即:每次都load 新的class进入Metaspace, Metaspace class的卸载条件又比较苛刻,导致了内存溢出的问题。

 

解决 : 

附上代码:需要的同学可以拿走~

import java.nio.charset.StandardCharsets;
import java.util.HashMap;
import java.util.Map;
import java.util.concurrent.ConcurrentHashMap;

import javax.script.Bindings;
import javax.script.ScriptEngine;
import javax.script.ScriptEngineManager;
import javax.script.ScriptException;

import com.google.common.hash.Hashing;

/**
 * 有缓存,避免内存溢出
 */
public class GroovyScriptEngineUtil
{
    
    private static final ScriptEngineManager ENGINE_MANAGER = new ScriptEngineManager();
    
    private static final Map<String, ScriptEngine> CACHE = new ConcurrentHashMap<>();
    
    /**
     * 运行 Groovy 脚本
     *
     * @param script Groovy 脚本
     * @param params 输入参数
     * @return 布尔类型输出结果
     * @throws ScriptException 如果脚本执行出错
     */
    public static Boolean executeScript(String script, Map<String, Object> params)
    {
        // 使用 MD5 将脚本名称作为缓存键
        String key = Hashing.md5().hashString(script, StandardCharsets.UTF_8).toString();
        ScriptEngine engine = CACHE.computeIfAbsent(key, s -> ENGINE_MANAGER.getEngineByName("groovy"));
        
        // 创建 bindings 对象,将输入参数添加为变量
        Bindings bindings = engine.createBindings();
        if(params != null)
        {
            params.forEach(bindings::put);
        }
        
        // 执行脚本并返回输出结果
        try
        {
            return (Boolean) engine.eval(script, bindings);
        }
        catch (ScriptException e)
        {
            //这里按需打印,如果需要打印stack信息,LOGGG.warn("xxx",e)即可。
            LOGGER.warn(String.format(" GroovyScriptEngineUtil 执行脚本出错script[%s],params[%s]  msg[%s] ", script, params.toString(),
                    e.getMessage()));
            return false;
        }
    }

    public static void main(String[] args)
    {
//        -XX:+UseG1GC -XX:MaxMetaspaceSize=20M -XX:MetaspaceSize=10M -Xms512M -Xss380K -Xmx512M -XX:MaxGCPauseMillis=1000 -XX:+HeapDumpOnOutOfMemoryError
        String script = "prodType  in  [1,2]  &&  status  in  [4,8,9,5] && optType == '新增商品' ";
        Map<String, Object> params = new HashMap<>();
        params.put("prodType", 1);
        params.put("optType", "新增商品");
        params.put("status", 4);
        System.out.println(GroovyScriptEngineUtil.executeScript(script, params));// true
    }
}

 再次执行查看Metaspace情况。增加几M后,内存趋于稳定 

致谢以下同学的相关blog以及GTP给的建议:

Java的Groovy执行器内存泄露(MetaSpace)问题分析与解决办法

1.对比 ScriptEngineManager  和    new GvoovyShell的方式对比  (测试环境测试:Matespace都不回收,本地main方法只要限制了Metaspace都可以回收/第二次测试也出现了内存溢出)

2.升级版本号  (测试环境测试 升级版本号,依然不回收)

Java中整合Groovy遇到的问题分析_groovy动态加载 安全问题_愚愚是个大笨蛋的博客-CSDN博客

https://www.cnblogs.com/umgsai/p/10742271.html

3.提供的缓存的思路

转载请注明出处,共同学习,一起进步。加油。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/535480.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

mapbox加载多个大数据图层并且播放的技术优化路线

先看成果图 介绍 首先介绍一下我这个数据有15W的面数据&#xff0c;可以即时渲染&#xff0c;即时加载&#xff0c;然后播放。 技术路线 首先这种数量级的大数据&#xff0c;用别的二维API是绝对不可行的&#xff0c;arcgis和openlayer自动放弃&#xff0c;leaflet最多可以坚…

漏测分析的目的

漏测分析的目的 漏测分析是软件测试过程中的一项重要工作&#xff0c;旨在识别和分析测试工作中可能存在的遗漏或疏漏&#xff0c;从而进一步提高软件质量和可靠性。 漏测分析的主要目的是找出未被覆盖的测试用例&#xff0c;即未能被测试到的功能或者代码路径。通过漏测分析&a…

纷享销客PaaS平台之“业务对象定制”

如何填补产品与市场之间的鸿沟&#xff1f;一定程度的定制化是高效运营的基础。 今天的企业需要的不再是简单的几套标准化系统&#xff0c;而是一个能够支撑业务常态化调整、兼具高性能与可扩展的弹性平台。 纷享销客PaaS平台基于元数据模型驱动&#xff0c;提供零代码和低代码…

【FMC148】8 路500MSPS/1GSPS/1.25GSPS 采样率14 位AD 采集FMC 子卡模块-具有出色的同步采集性能(AD9680)

板卡概述 FMC148 是一款基于VITA57.4 标准的JESD204B 接口FMC 子卡模块&#xff0c;该模块可以实现8 路14-bit、500MSPS/1GSPS/1.25GSPSADC 采集功能。该板卡ADC 器件采用ADI 公司的AD9680 芯片,全功率-3dB 模拟输入带宽可达2GHz。该ADC 与FPGA 的主机接口通过16 通道的高速串…

多表联查及mybatis中@Results,@ResultMap注解的应用

在实际的项目中&#xff0c;为了保证数据的简洁和查询的效率&#xff0c;通常会到采用多表联查。 那么什么是多表联查呢&#xff1f; 一般查询语句都是针对一个表的&#xff0c;但是在关系型数据库中&#xff0c;表与表之间是有联系的&#xff0c;所以在实际应用中&#xff0…

Vue3实现酷炫打字机效果:让你的网站文字动起来

✅创作者:陈书予 🎉个人主页:陈书予的个人主页 🍁陈书予的个人社区,欢迎你的加入: 陈书予的社区 🌟专栏地址: 三十天精通 Vue 3 文章目录 引言一、介绍1.1 什么是酷炫打字机效果1.2 Vue3框架简介二、创建Vue3项目2.1 安装Vue CLI2.2 创建Vue3项目2.3 运行项目

基于回归模型(贝叶斯岭回归、XGB、SVR等)销售额预测

博主在之前也写过较多的预测模型的文章&#xff0c;主要是基于LSTM&#xff0c;见下&#xff1a; 使用 Conv1D-LSTM 进行时间序列预测&#xff1a;预测多个未来时间步【优化】 使用 Conv1D-LSTM 进行时间序列预测&#xff1a;预测多个未来时间步 LSTM-理解 Part-1&#xff08;R…

Linux kernel 释出3.18.48,或将是3.18最后一版

Linux 稳定版内核维护者 Greg Kroah-Hartman 出人意料的宣布释出 Linux kernel 3.18 LTS的新版本&#xff0c;而 3.18 LTS 原计划于今年1月终止支持。Kroah-Hartman 释出了 3.18.48&#xff0c;修正了 3.18.47 和 3.18.27 的一个bug&#xff0c;他希望这个版本将是 3.18 分支的…

如何停止一个线程?

文章目录 停止线程的场景强制停止线程优雅停止线程使用标志位使用interrupt()方法 总结 前些天发现了一个巨牛的人工智能学习网站&#xff0c;通俗易懂&#xff0c;风趣幽默&#xff0c;忍不住分享一下给大家。点击跳转到网站。 如何停止一个线程&#xff1f;这是本人面试中遇到…

Git之GitFlow工作流 | Gitflow Workflow(万字整理,已是最详)

目录 &#x1fa78; 写在前面 一、 GitFlow 介绍 1.1 什么是 GitFlow 1.2 GitFlow 常用分支说明 1.3 Git flow中的分支介绍 1.3.1 主要分支&#xff08;Master&#xff09; 1.3.2 开发分支&#xff08;Develop&#xff09; 1.3.3 功能分支&#xff08;Feature&#xff…

百度发布2023年Q1财报:营收311亿元,净利润大幅增长48%

北京时间5月16日&#xff0c;百度&#xff08;NASDAQ&#xff1a;BIDU&#xff0c;HKEX&#xff1a;9888&#xff09;发布了截至2023年3月31日的第一季度未经审计的财务报告。第一季度&#xff0c;百度实现营收311亿元&#xff0c;同比增长10%&#xff1b;归属百度的净利润&…

C++数据结构:哈希桶 -- 通过开散列的方法解决哈希冲突

目录 一. 什么是哈希桶 二. 哈希桶的实现 2.1 哈希表节点数据 2.2 特定Key值的查找find 2.3 哈希桶的扩容 2.4 数据插入操作insert 2.5 数据删除操作erase 2.6 哈希桶的析构函数 附录&#xff1a;哈希桶的实现完整版代码 一. 什么是哈希桶 之前的博客中我提到过&…

手机突然被停机了,那你可能‘摊上’这些问题了!

最近总是有小伙伴私信小编&#xff0c;手机明明有话费&#xff0c;但是不能用流量也不能打电话。小编一通分析&#xff0c;信号好&#xff0c;未欠费&#xff0c;八成是手机被停机了。结论一出&#xff0c;小伙伴更懵逼了&#xff0c;手机还可以被停机&#xff1f;今天这个视频…

一.手把手教你部署项目-VMware安装Centos

前言 市场内卷&#xff0c;只会写代码的程序员可没那么吃香了&#xff0c;在企业中很多时候会要求后端程序写前端&#xff0c;甚至做运维&#xff0c;因为小公司为了解决成本是不会请专门的运维人员的。所以对于后端程序原来说&#xff0c;会一些运维只是必不可少的&#xff0…

TCP协议/UDP协议(三次握手/四次挥手)

TCP协议 保证传输过程的三个关键的步骤&#xff0c;分别为三次握手、传输确认、四次挥手。 三次握手 三次握手是建立连接的过程&#xff0c;当客户端向服务端发起连接时&#xff0c;会先发一包连接请求数据&#xff0c;过去询问一下&#xff0c;能否与你建立连接&#xff0c;…

IPv4和IPv6协议

IPv4和IPv6报文比较 IPv4报文格式 IP Packet(IP数据包),其包头主要内容如下: Version:4 bit,4:表示为IPv4;6:表示为IPv6。 Header Length:4 bit,首部长度,如果不带Option字段,则为20,最长为60。 Type

找回 Windows 映射网络驱动器密码

随着越来越多的人使用 NAS&#xff08;网络云硬盘&#xff09;&#xff0c;各种网络映射驱动器的问题也随之出现。最近有个客户要换电脑。换电脑之后就无法访问 NAS 了&#xff0c;因为他记不得他 NAS 里边设置的用户名密码。还好他之前的电脑有保存这些密码记录。 第一次链接 …

【算法学习系列】02 - 你真的有好好使用过 Math.random() 函数吗?

文章目录 说明验证函数等概率返回功能验证 [0, 8)上也是等概率返回一个数的功能验证等概率返回[0, K - 1]中的一个整数实现&#xff1a;任意x&#xff0c;x属于[0, 1)&#xff0c;[0, x)范围上的数出现概率由原来的x调整成x平方 说明 获取随机数大家应该都有用到过 Math.random…

PMP课堂模拟题目及解析(第10期)

91. 在项目执行阶段&#xff0c;一名项目干系人要求项目经理加入一个新过程的优化。项目经理应该怎么做&#xff1f; A. 执行实施整体变更控制过程。 B. 与过程专家一起审查项目。 C. 将优化项目分配给团队。 D. 拒绝范围蔓延企图。 92. 项目经理要求团队提供对项目应急计…

【LeetCode】415. 字符串相加

415. 字符串相加&#xff08;简单&#xff09; 方法一 思路 这道题很简单&#xff0c;我们知道&#xff0c;如果对两个数相加&#xff0c;那么需要对位相加&#xff0c;为了方便对位&#xff0c;我们可以对长度较小的字符串前面补 0&#xff0c;使得 num1 和 num2 长度相等。…