从零搭建xxl-job(六):xxl-job执行器服务端的简单搭建

news2024/11/17 1:36:11

经过前面的学习,相信大家对XXL-JOB调度中心的核心知识点和定时任务的调度流程已经了如指掌了,接下来,我们的重心就要从调度中心过渡到定时任务程序了,接下来,我会为大家搭建起一个简易的可运行的定时任务的体系,然后在这个体系内进一步迭代演变,最终实现一个高性能的执行调度中心远程调度的定时任务的执行器模块。所以,在接下来的章节中,我将程序执行定时任务的程序为执行器。这样一来,我们的程序也就进一步接近XXL-JOB了,调度中心和执行器这两大模块就构成了XXL-JOB的全部。

众所周知,在业务开发中,XXL-JOB都是要集成到SpringBoot中使用的。可以说,XXL-JOB执行器的工作,是从SpringBoot开始的。当SpringBoot启动的时候,会在SpringBoot容器中的所有单例bean创建之后,启动执行器的服务端,然后执行器就开始工作了,可以接受调度中心的远程调度,然后执行定时任务。这就是执行器的执行流程,听我这样讲解,大家可能觉得似乎也没有什么流程,逻辑也十分简单。但是内在的逻辑大家仍然十分模糊,所以,接下来,就让我以一个小李子渐渐迭代出完整的,包含每一个细节的执行流程。

好了,现在我要创建一个定时任务,然后想方设法的让调度中心来远程调度。

请看下面的代码块。

     Runnable runnable = new Runnable() {
            @Override
            public void run() {
                System.out.println("执行器的任务开始执行了");
            }
     };

上面的代码块中是一个简单到极致的Runnable任务,该任务只要提交给线程,就可以被执行了。但是在我们目前构建的程序中,显示不可能在执行器这一端创建一个Runnable任务,然后设定执行时间,交给一个线程去执行。这一套是行不通的,现在,我们要做的就是把这个定时任务的信息抽取出来,然后远程发送给调度中心,让调度中心来统一调度和维护。因为有可能执行器这一端并不是只有一个定时任务,更进一步地说,有可能并不是只有一个执行器在执行定时任务,而是多个执行器在执行很多相同的执行任务,为了防止定时任务重复执行,这时候就需要把所有的定时任务都交给调度中心来调度和维护,在前几章,我为大家引入了一个封装定时任务参数的类,现在,我把这个类搬运到这里,大家简单回顾一下。

public class RegistryParam implements Serializable {
    private static final long serialVersionUID = 42L;

    //定时任务方法的名称
    private String registryKey;
    //定时任务程序部署的服务器的ip地址
    private String registryValue;

    public RegistryParam() {
    }

    public RegistryParam(String registryKey, String registryValue) {

        this.registryKey = registryKey;
        this.registryValue = registryValue;
    }


    public String getRegistryKey() {
        return registryKey;
    }

    public void setRegistryKey(String registryKey) {
        this.registryKey = registryKey;
    }

    public String getRegistryValue() {
        return registryValue;
    }

    public void setRegistryValue(String registryValue) {
        this.registryValue = registryValue;
    }

    @Override
    public String toString() {
        return "RegistryParam{" +
                "registryKey='" + registryKey + '\'' +
                ", registryValue='" + registryValue + '\'' +
                '}';
    }
}

上面的代码块中呈现的RegistryParam类,其功能就是用来封装要发送给调度中心的定时任务的信息。可以看到,该类中要封装的定时任务信息有两个,一个就是定时任务所在的执行器的IP地址,另一个就是定时任务的名字。但是看看刚刚我创建的那个Runnable任务,暂且先不考虑怎么设定任务的执行时间,大家只需要思考,这个任务该怎么把自己的信息封装到RegistryParam对象中呢?然后远程发送给调度中心。或者说,这个定时任务自身有什么信息可以被封装到RegistryParam对象中呢?上面的Runnable看起来干巴巴的,连一个正式的名字都没有,显然,我们不能以这种方式在执行器这一端部署定时任务。

那该怎么创建定时任务呢?既然Runnable显得十分单调,不够丰富,那就简单直接一点,给这个Runnable做一层封装,或者说的更直接一点,直接把定时任务放到一个对象中。然后从这个对象中收集定时任务信息,就像下面这样。

public class SampleYyJob{
    public void demoJobHandler()throws Exception{
        System.out.println("执行器的任务开始执行了")
    }
}

在上面的代码块中,我定义了一个类,在该类中定义了一个方法,方法的名称就叫demoJobHandler,该方法就是我要执行的定时任务。这样一来,当执行器启动之后,是不是就可以把定时任务的方法名称,也就是demoJobHandler封装到RegistryParam中了?然后发送给调度中心,对吧?但是仅仅这样就够了吗?方法的名称是有了,调度中心远程调度任务的时候会发送给TriggerParam对象的信息给执行器,而TriggerParam对象就封装着要执行的定时任务的方法名称,就像下面这样。

public class TriggerParam implements Serializable{
    private static final long serialVersionUID = 42L;
   
    //定时任务方法的名字
    private String executorHandler;
    // 省略get\Set方法

}

如果TriggerParam对象通过http协议发送成功之后,执行器这一端就会接到到这条消息,解码之后就能从TriggerParam对象中获得要执行的定时任务方法的名称。可是仅仅通过一个方法的名称,怎么就能执行该方法呢?换句话说,方法都是由对象来调用的,现在我们只知道定时任务方法的名称,连它属于哪个对象都不知道,怎么通过对象来调用这个定时任务呢?

这时候也许有朋友就会建议把定时任务所属的对象也一并发送给调度中心,而在执行器启动的时候,把所有定时任务所在的对象都收集起来,等到调度中心调度任务的时候,可以通过发送过来的定时任务的方法和所属的对象的名称来寻找具体的定时任务。当然,这里就需要注意一下了,如果执行器那一端部署了多个定时任务,那么每个定时任务的名字和其所在的对象名称都要求是唯一的了。如果有重名的定时任务方法,执行器就不知道调用哪一个定时任务了。这一点想必大家都已经清楚了。采用这种编码思路执行器就可以顺利执行定时任务了。这虽然是很不错的解决问题的思路,但是有没有更简单一点的呢?比如,我就只把定时任务方法的名字发送给调度中心,并不关心它在哪个对象中。这样一来,只要求定时任务方法的名字是唯一的就可以了,也减少了执行器这一端出错的概率。可是,只有方法名称,没有对象,怎么调用任务呢?很简单,直接使用反射不就行了?请看下面的代码块。

// 只用用Method对象反射调用定时任务
method.invoke(target);

如果是这样的话,那我是不是只需要把定时任务的方法名称发送给调度中心就可以了。反正定时任务的方法名称是唯一的,这样一来,只要执行器本地把所有定时任务的信息收集一起,让定时任务方法的名字和其Method对象一一对应,然后缓存起来。比如,就以键值对的形式缓存在一个map中,那么,当从调度中心发送的信息中得到要执行的定时任务方法的名字后,只需根据要执行的定时任务的名字,从Map中获得对应的Method对象,然后再反射调用该方法,不就可以执行定时任务了吗?

分析到这里,很多朋友可能会提出问题,反射调用方法并不只是拥有Method对象即可,还需要得到目标对象呀。就像上面代码块中写的那样。换句话说,我把定时任务创建在SampleYyJob对象中了,定时任务的方法名称为demoJobHandler,那么要想执行这个定时任务,SampleYyJob对象本身和定时任务的方法名字我都需要。那么怎么能得到SampleYyJob对象呢?并且能够让执行器一启动,就把各个定时任务所在的对象都收集起来。因为一个执行器中可能要部署多个定时任务,多个定时任务可能要定义在多个不同的对象中。讲到这里,是不是就意味着终于要引入SpringBoot了?因为SpringBoot是帮助程序管理对象的最佳帮手。只要在一个类上加上@Component注解,SpringBoot就会为我们创建这个类的单例对象,并且把这些对象收集在单例池中,就像下面这样

@Component
public class SampleYyJob{
    public void demoJobHandler()throws Exception{
        System.out.println("执行器的任务开始执行了")
    }
}

但是,请大家仔细想一想,虽然得到SampleYyJob类的对象是我们的目标之一,但我们的目标并不只有一个,根据刚才的分析,执行器启动后,要把定时任务的方法的名字和其对应的Method存放到一个Map中,那该定时任务的method对象该怎么得到呢?并且很明显,只得到method对象是不可能执行定时任务的,得到method对象的同时,还要得到该定时任务所在的那个对象,这两个缺一不可。但是map的键值对结构,只能是一对一的关系,而定时任务的名称又是唯一的,所以,不如我们就把定时任务的method对象和其所在的对象封装进一个新的对象中。然后把定时任务方法的名称的这个新的对象,以键值对的方式缓存在map中。具体的逻辑看下面的代码块。

首先定义一个封装定时任务method对象和其所在的目标对象信息的新类。类的名字就定义为MethodJobHandler。

public class MethodJobHandler{
    // 目标类对象,就是用户定义的IOC容器的bean
    private final Object target;
    // 目标方法,就是要被执行的定时任务方法
    private final Method method;


    // 构造方法
    public MethodJobHandler(Object target, Method method){
        this.target = target;
        this.method = method;    
    }

    // 通过反射执行定时任务方法
    public void execuet() throws Exception{
        // 没有参数,就直接反射调用方法
        method.invoke(target);
    }
}

上面的对象定义好了之后,执行器端缓存定时任务信息的Map就可以定义成下面这样。

private static ConcurrentMap<String,MethodJobHandler> jobHandlerRepository = new ConcurrentHashMap<String,MethodJobHandler>();

可以看到,我使用了一个ConcurrentMap来解决可能出现的并发问题。总之现在好像已经万事俱备,只欠东风了,也就是收集对象,并且把对象缓存到这个ConcurrentMap种。所以,接下来就该引入SpringBoot了。但是在真正引入SpringBoot之前,让我来为大家思考一下,我们引入了Springboot后,究竟要怎么使用它?首先我们肯定要使用SpringBoot为我们把加了@Component注解的单例bean创建出来,但是创建出来的这个单例bena是存在在SpringBoot自己的单例吃中的,所以,我们肯定还要获得SpringBoot的容器,从容器中获得用户自己的定义的对象,然后方法哦执行器自己的ConcurrentMap中。这就是全部的流程了。当然,既然创建好的对象肯定是要缓存在执行器自己的ConcurrentMap中,就必须要等待springboot容器创建好所有的单例bean中,才能将对象缓存在map中。而这一过程肯定是要使用到springboot的容器,所以,springboot容器肯定也要被提前获得。结合这两点,我想我的程序应该在容器中的所有单例bean都创建完之后启动,并且启动的时候可以很轻松就获得springboot的容器,因此我就可以充分利用springboot的两个扩展点,一个就是applicationContextAware接口,另一个就是SmartInitializingSingleton接口,在下面的代码块中有这两个接口具体作用的解释。

我现在定义了一个新的类,叫做YyJobSpringExecutor,并且就在这个类中实现刚才我为大家分析的编程思路。

public class YyJobSpringExecutor implements ApplicationContextAware, SmartInitializingSingleton {

    // 该成员变量是由下面set方法注入的
    private static  ApplicationContext applicationContext;


    // 该方法就是就是ApplicationContentAware接口中定义的方法,该方法会在springboot启动的过程中被回调
    // 被回调的时候SpringBoot的容器已经创建了,所以可以直接被赋值在这里,这样YyJobSpringExecutor
    // 类型的对象就可以直接使用springboot的容器了
    @Override
    public void setApplicationContext(ApplicationContext applicationContext) throws BeansException {
        YyJobSpringExecutor.applicationContext = applicationContext;
    }

    // 该方法就是SmartInitializingSingleton接口中定义的方法,该方法会在springboot中所有单例bean创建完成后被回调、
    // 这个时候,springboot的容器已经获得了,所有的单例bean也已经被创建好了
    // 所以就可以在该方法内将创建好的封装定时任务的对象缓存到执行器自己的map中
    @Override
    public void afterSingletonsInstantiated() {
        // 该方法就会把用户定义的所有定时任务注册到MethodJobHandler中
        initJobHandlerMethodRepository(applicationContext);
    }

    // 那这个核心方法该如何实现呢
    private void initJobHandlerMethodRepository(ApplicationContext applicationContext){

    }
}

上面代码块的逻辑应该很清晰了,唯一让我感到困扰的就是最核心的那个initJobHandlerMethodRepository方 法,在这个最核心的方法中,我要把SpringBoot容器中的所有用来封装定时任务信息的对象,通通转移到执行器 自己的Map中。但是,请大家仔细想想,SpringBoot中的只是bean对象,而我们要存入Map中的是定时任务方法 的名称,还有对应的封装着定时任务Method对象与其目标类对象的MethodJobHandler对象,要想获得 MethodJobHandler对象,就必须获得定时任务的Method对象与其目标类对象,目标类对象还好说,就是我们从 容器中得到的bean本身,那么,Method对象该怎么获得呢?换句话说,现在我们只是要将和定时任务有关的 bean缓存到执行器的Map中,可是在SpringBoot容器中,不止存放着和定时任务有关的bean,有可能还有其他很 多单例bean,那该怎么对这两类bean作区分呢?这种情况,再怎么仔细思索,其实也没什么更好的方法,无非就 是给用来当作定时任务的bean的方法添加一个标记,在从容器中获得每一个对象的时候,判断其内部的方法上是 否有这个标记即可,如果有就说明是用作定时任务的方法。而所谓的标记也无非就是注解,通过反射获得注解然后 判断。这种编程套路,想必大家已经非常熟悉了。比如,就定义一个@XxlJob注解,只要是添加了该注解的方法, 就是用做定时任务的方法,并且还可以把定时任务的方法名称定义在注解中,这样在判断SpringBoot容器中所有 对象的过程中,定时任务的唯一的方法名称也就获得了。就像下面这样。 定义好的@YyJob注解。

@Target({ElementType.METHOD})
@Retention(RetentionPolicy.RUNTIME)
@Inherited
public @interface YyJob {

    //定时任务的名称
    String value();

    //初始化方法
    String init() default "";

    //销毁方法
    String destroy() default "";

}

接着,就是我自己实现的initJobHandlerMethodRepository方法,请看下面的代码块。

public class YyJobSpringExecutor implements ApplicationContextAware, SmartInitializingSingleton {

    // 该成员变量是由下面set方法注入的
    private static ApplicationContext applicationContext;


    // 该方法就是就是ApplicationContentAware接口中定义的方法,该方法会在springboot启动的过程中被回调
    // 被回调的时候SpringBoot的容器已经创建了,所以可以直接被赋值在这里,这样YyJobSpringExecutor
    // 类型的对象就可以直接使用springboot的容器了
    @Override
    public void setApplicationContext(ApplicationContext applicationContext) throws BeansException {
        YyJobSpringExecutor.applicationContext = applicationContext;
    }

    // 该方法就是SmartInitializingSingleton接口中定义的方法,该方法会在springboot中所有单例bean创建完成后被回调、
    // 这个时候,springboot的容器已经获得了,所有的单例bean也已经被创建好了
    // 所以就可以在该方法内将创建好的封装定时任务的对象缓存到执行器自己的map中
    @Override
    public void afterSingletonsInstantiated() {
        // 该方法就会把用户定义的所有定时任务注册到MethodJobHandler中
        initJobHandlerMethodRepository(applicationContext);
    }

    // 那这个核心方法该如何实现呢
    private void initJobHandlerMethodRepository(ApplicationContext applicationContext) {
        if (applicationContext == null) {
            return;
        }
        String[] beanDefinitionNames = applicationContext.getBeanNamesForType(Object.class);
        for (String beanDefinitionName : beanDefinitionNames) {
            // 根据名称获得每一个bean
            Object bean = applicationContext.getBean(beanDefinitionName);
            Map<Method, YyJob> annotatedMethods = null;
            // 下面是Spring自己封装的和反射相关的类,通过下面的操作,可以得到bean对象中所有添加@YyJob注解的方法
            // 返回的就是添加了注解的方法和注解本身,以键值对的形式存放上面的map,而这个map会返回给程序下面使用
            annotatedMethods = MethodIntrospector.selectMethods(bean.getClass(),
                    new MethodIntrospector.MetadataLookup<YyJob>() {
                        @Override
                        public YyJob inspect(Method method) {
                            // 在这里检查是否添加了@YyJob注解
                            return AnnotatedElementUtils.findMergedAnnotation(method, YyJob.class);
                        }
                    }
            );
            // 如果结果为空,就说明该bean对象中没有添加@YyJob注解
            if (annotatedMethods == null || annotatedMethods.isEmpty()){
                continue;
            }
            // 在这里循环处理bean对象中添加了@YyJob注解的方法
            for (Map.Entry<Method, YyJob> methodYyJobEntry : annotatedMethods.entrySet()) {
                // 得到该方法
                Method executeMethod = methodYyJobEntry.getKey();
                // 得到注解,获取定时任务名称
                YyJob yyJob = methodYyJobEntry.getValue();
                // 下面这个方法就是更进一步的核心方法,在该方法中要把刚才收集到的定时任务的信息
                // 封装到methodJobHandler对象中,并且再把定时任务的名字和methodJobHandler对象缓存到执行器的map中
                // 注意,这里的bean就是目标对象,而executeMethod就是定时任务的method对象
                // 下面的方法暂时不做shi先
                reigistJobHandler(yyJob,bean,executeMethod);
            }
        }
    }
}

上面的代码已经实现了很大一部分逻辑了,但是最关键的逻辑,把已经得到的定时任务方法的名称和 MethodJobHandler以键值对的形式缓存到执行器的Map中,这个流程还没有实现。该流程要在registJobHandler 方法中实现,但在上面的代码块中,我并没有为执行器实现这个方法。因为我忽然想到一个问题,想跟大家探讨一 下。现在我是把自己的程序集成到SpringBoot中使用了,让SpringBoot帮我创建封装定时任务的bean对象,然后 完成后续的操作。就目前完成的代码来看,我的执行器离开了SpringBoot似乎就不能很好的运行了,这就意味着 我的执行器只能依附于SpringBoot来执行,这可不是我想要的结果。如果我构建的分布式定时任务调度框架只能 集成在SpringBoot中执行,这不就是个SpringBoot的附属品吗?其实我从一开始就想好了,执行器最终成型后, 它既可以集成在SpringBoot中运行,也可以自己单独启动和运行,因此,在上面的代码块中,我才把类名定义为 XxlJobSpringExecutor,意味着这是要集成SpringBoot运行的执行器。除此之外,我还会再定义一个名为 XxlJobSimpleExecutor的执行器,这个执行器可以单独启动(这个执行器的具体实现就不在文章中展示了)。不过,虽然有两个功能不同的执行器,但也只是创建封装定时任务的对象的方式不同,其他后续的 流程,比如把已经得到的定时任务方法的名称和MethodJobHandler以键值对的形式缓存到执行器的Map中,这些 后续的流程都是一样的。所以,我就可以为这两个类引入一个公共父类,将公共的方法定义在父类当中,就比如上 面代码块中还未实现的registJobHandler方法。而且这个公共父类,不如就定义成XxlJobExecutor。请看下面的 代码块。 首先,XxlJobSpringExecutor需要继承父类XxlJobExecutor了。

public class YyJobSpringExecutor extends YyJobExecutor implements ApplicationContextAware, SmartInitializingSingleton {
    // 内部的方法就省略了
}
public class YyJobExecutor {
    // 存放IJobHandler对象的Map
    private static ConcurrentMap<String, MethodJobHandler> jobHandlerRepository = new ConcurrentHashMap<String, MethodJobHandler>();

    // 该方法就是用来将用户定义的bean中的每一个定时任务方法都注册到JobHandler的子类对象中的
    protected void registJobHandler(YyJob yyJob, Object bean, Method executeMethod) {
        //先判断注解是否为空,为空直接返回
        if (yyJob == null) {
            return;
        }
        //获取注解的名称,这个名称就是用户定义的当前定时任务的名称
        String name = yyJob.value();
        //得到bean的Class对象
        Class<?> clazz = bean.getClass();
        //获得定时任务方法的名称,其实定时任务的名称和注解名称也可以定义为相同的,这个没有限制
        String methodName = executeMethod.getName();
        //对定时任务的名称做判空处理
        if (name.trim().length() == 0) {
            throw new RuntimeException("xxl-job method-jobhandler name invalid, for[" + clazz + "#" + methodName + "] .");
        }
        //从缓存JobHandler的Map中,根据定时任务的名字获取JobHandler
        if (loadJobHandler(name) != null) {
            //如果不为空,说明已经存在相同名字的定时任务了,也有了对应的JobHandler了,所以抛出异常
            throw new RuntimeException("xxl-job jobhandler[" + name + "] naming conflicts.");
        }
        //设置方法可访问
        executeMethod.setAccessible(true);

        //把得到的定时任务的方法对象,初始化方法对象,和销毁方法对象,以及定时任务的名字,包装一下
        //定时任务的方法对象,初始化方法对象,和销毁方法对象可以注册到MethodJobHandler中,以后调用时就由这个类的对象
        //调用,其实内部还是使用了反射。然后把定时任务的名字和MethodJobHandler对象以键值对的方式缓存在
        //jobHandlerRepository这个Map中
        registJobHandler(name, new MethodJobHandler(bean, executeMethod));
    }

    public static MethodJobHandler registJobHandler(String name, MethodJobHandler jobHandler){
        return jobHandlerRepository.put(name, jobHandler);
    }

    public static MethodJobHandler loadJobHandler(String name){
        return jobHandlerRepository.get(name);
    }
    
}

所以,在XxlJobSpringExecutor类的initJobHandlerMethodRepository方法中,程序在执行该方法的最后一行代 码registJobHandler(xxlJob, bean, executeMethod)的时候,就会调用到父类XxlJobExecutor中的 registJobHandler方法,之后的逻辑在前面已经帮大家梳理过了,就不再重复了。总之,程序执行到这里,已经 把我的执行器启动前的所有准备工作都已经做好了。用户创建的定时任务都以key-value键值对的形式缓存到一个 Map中,Map的键对应的是要执行的定时任务的方法名,其value就是一个MethodJobHandler对象,这个对象中 封装着定时任务所在的目标对象和定时任务方法本身的Method对象。当从调度中心发送过来的TriggerParam对 象中获得到要执行的定时任务的名字,就可以根据名字从Map中得到对应的MethodJobHandler对象,然后执行 该对象的execute方法,反射调用定时任务。

到此为止,定时任务被调度中心远程调用的整体逻辑,我就给大家展示完了。当然,这其中还有一些细节后面才会 讲到。但现在,我的执行器构建终于可以进入到一个新的阶段,那就是可以真正启动我的执行器,然后向调度中心 发送定时任务的相关信息,换句话说,就是把定时任务本身注册到调度中心,让调度中心把定时任务信息记录在 库,同时,执行器也要接收调度中心发送过来的信息,执行被调度中心调度的定时任务。如果是这种情况,请大家 想一想,执行器既要发送消息,又要接收消息,这就意味着执行器既要有承担客户端责任的组件,也要有承担服务 端责任的组件。客户端用来向调度中心发送消息,也就是把定时任务信息发送给调度中心;服务端用来接收调度中 心发送过来的定时任务的调度信息,然后开始执行要被调度的定时任务。所以,接下来,就让我先为大家仔细分析 分析,这两个组件该如何实现。 首先,让我们来探讨一下执行器的客户端组件,其实说这个是组件也有点小题大做了,如果仅仅是为了发送消息, 就可以干脆沿用前几章的模式,直接使用http协议发送不就完了?将封装着定时任务信息的RegistryParam对象序 列化之后,通过http发送给调度中心。调度中心接收到消息后解码,然后将定时任务的信息记录到数据库。这个本 来也挺简单的,对吧?但是根据我们刚才讲解的内容,请大家再仔细想想,RegistryParam对象可以封装定时任务 的信息,这一点没错,可以把执行器的IP地址和要执行的定时任务的方法名称封装进去,发送给调度中心,这一切 都是建立在这个执行器只有一个定时任务的情况下。但是刚才我向大家分析了,一个执行器实际上是可以部署多个 定时任务的,那么现在要把执行器中部署的多个定时任务的信息都发送给执行器,该怎么发送呢?难道要给执行器 的每一个定时任务都封装一个RegistryParam对象吗?这显然是不合适的。那么就把所有要发送的定时任务的名字 放到一个集合中,然后封装到RegistryParam对象中,

✨ 该图片内容识别如下:

如果把一个执行器中部署的所有定时任务的名字收集起来,放到一个集合中,然后把集合和执行器的IP地址封装到 重构过后的RegistryParam对象中,把这个对象发送给调度中心,这么做好像也不是不可以。没错,确实可以这么 做,那我真的要这样重构代码吗?请大家再仔细想一想,在真实的开发环境中,不可能只部署一个执行器来执行定 时任务,对吧?如果有三个定时任务要被执行,肯定是这这三个任务部署在第一个执行器上,然后再部署到第二个 执行器上。这两个执行器会执行相同的定时任务,但是经过调度中心的调度,不会被重复调度。同一时间只有一个 执行器会执行定时任务。既然是这种情况,那请大家再次仔细想一想,这两个执行器的IP地址是不是都要发送给调 度中心?根据前几章所讲的内容,肯定要这么做对吧?发送过去的IP地址会被调度中心收集到一个List集合中。相 同的执行器执行相同的定时任务,并且每个执行器的IP地址是不同的,但是要在调度中心把这些执行相同定时任务 的执行器收集到一起,方便使用调度策略选择具体的执行器来执行定时任务。这时候,该怎么判断这些执行器执行 的是相同的定时任务呢?如果我能给每一个执行相同定时任务的执行器设定一个唯一的标识就好了,每一个执行相 同任务的执行器都发送这个唯一的标识给调度中心,这样不就解决问题了吗?我可以把这个标识定义成 appName,并且就把它定义在RegistryParam类中。就像下面这样。

public class RegistryParam implements Serializable {
    private static final long serialVersionUID = 42L;

    // 执行器的唯一标识,也就是appName
    private String registryKey;
    //定时任务程序部署的服务器的ip地址
    private String registryValue;

    public RegistryParam() {
    }

    public RegistryParam(String registryKey, String registryValue) {

        this.registryKey = registryKey;
        this.registryValue = registryValue;
    }

}

上面代码块中的内容和最初的RegistryParam类的内容一模一样,好想什么都没改变,但实际上已经 发生变化了。registryKey这个成员变量并不会被定时任务的方法名称赋值了,而是被执行器的唯一标 识appName赋值。至于appName这个名称要怎么设定,其实也很简单,直接让用户定义在配置文件 中即可,所有执行相同定时任务的执行器都要在配置文件中定义相同的appName,然后通过 SpringBoot可以获得配置文件定义的内容,就可以在程序中使用了。讲解到这里,使用过XXL-JOB 的朋友们肯定也都反应过来了,定时任务的信息实际上并不是由执行器亲自注册的,执行器只是部署 了定时任务,然后把执行器本身的信息通过http发送给调度中心。定时任务的注册是在调度中心的 web模块由用户手动输入的。请看下面两张图片。

在上面图片两个红圈的地方,将要注册的定时任务和执行器绑定起来,JobHandler就是定时任务方法的名字。关 于这一块的知识,我会放到视频中为大家讲解。总之,到此为止,我从执行器客户端的组件延伸到定时任务注册 的方式,都为大家讲解清楚了。至于执行器访问调度的中心的客户端,我在上面也为大家讲解了,可以直接通过 http协议发送消息。所以,接下来,我会为大家着重讲解执行器的服务器组件,也就是用来接收调度中心发送过来 的消息,然后根据消息的内容执行相应的定时任务这一模块的功能。

讲到这里,大家有没有感觉很熟悉?执行器的服务端要接收调度中心发送过来的消息,并且根据消息的内容执行 相应的定时任务,这和我们刚刚学习过的Netty的ChannelPipeline处理消息的流程多像呀。以Netty构建的客户端 或者是服务端,不就可以在接收到一条消息后出发消息的入站事件,然后会将这条消息传递到ChannelPipeline链 表上进行流水化处理吗?在被回调的channelRead方法中可以进行业务的处理。那回到我自己的构建的执行器 中,我不就可以使用Netty构建一个服务器吗?既然调度中心是通过http发送的消息,那我的Netty就构建成http的 服务器,所谓http服务器,其实就是使用对应的http协议的编解码器来处理接收或发送的消息。然后用户可以自己 定义一个入站的消息处理器,在该处理器中实现channelRead方法,定义自己的业务逻辑,在该方法内根据解码 后得到定时任务的方法名称,去执行相应的定时任务。所以,接下来,我就可以根据这个思路继续编写我的执行 器程序了。刚才我的代码已经编写到XxlJobExecutor中了,并且已经实现了把定时任务信息以键值对的形式缓存 到Map中。也就是说,在XxlJobSpringExecutor类的afterSingletonslnstantiated方法中,其内部调用的 initJobHandlerMethodRepository方法已经执行完毕了,定时任务的信息也都收集成功了。请看下面的代码块。

    @Override
    public void afterSingletonsInstantiated() {

        //该方法就会把用户定义的所有定时任务注册到IJobHandler中,这里的applicationContext是由
        //该类实现的ApplicationContextAware接口帮忙注入的,这个是Spring的基础知识,想必大家应该都清楚
        //这所以需要它,是因为ApplicationContextAware可以得到所有初始化好的单例bean
        initJobHandlerMethodRepository(applicationContext);

        //在这里调用父类的方法启动了执行器
        try {
            super.start();
        } catch (Exception e) {
            throw new RuntimeException(e);
        }
    }

接下来就是父类YyJobExecutor

public class YyJobExecutor{
 //下面这些成员变量都是定义在配置文件中的,而这里的属性,会在用户自己定义的XxlJobConfig配置类中被赋值成功
    //服务器的地址,也就是调度中心的地址,执行器要注册到调度中心那一端
    private String adminAddresses;
    //token令牌,这个令牌要和调度中心那一端的令牌配置成一样的,否则调度中心那端校验不通过会报错
    private String accessToken;
    //这个就是执行器的名称,注册执行器到调度中心的时候,使用的就是这个名称
    private String appname;
    //执行器的地址,这个地址在配置文件中为空,意味着使用默认地址
    //地址为:ip+port
    private String address;
    //执行器的ip地址
    private String ip;
    //端口号
    private int port;


    public void start() throws Exception {
        //启动执行器内部内嵌的服务器,该服务器是用Netty构建的,但构建的是http服务器,仍然是用http来传输消息的
        //在该方法中,会进一步把执行器注册到调度中心上
        initEmbedServer(address, ip, port, appname, accessToken);
    }

    // 启动执行器内嵌的Netty服务器,然后把执行器注册到调度中心
    private void initEmbedServer(String address, String ip, int port, String appname, String accessToken) throws Exception {
        //这里就是使用默认地址的操作,因为执行器一端的配置文件中并没有配置执行器的地址
        //所以这里使用工具类得到默认端口号9999
        port = port>0?port: NetUtil.findAvailablePort(9999);
        //在这里得到默认IP地址
        ip = (ip!=null&&ip.trim().length()>0)?ip: IpUtil.getIp();
        //判断地址是否为null
        if (address==null || address.trim().length()==0) {
            //如果为空说明真的没有配置,那就把刚才得到的IP地址和port拼接起来
            //得到默认的执行器地址
            String ip_port_address = IpUtil.getIpPort(ip, port);
            address = "http://{ip_port}/".replace("{ip_port}", ip_port_address);
        }
        //校验token
        if (accessToken==null || accessToken.trim().length()==0) {
            logger.warn(">>>>>>>>>>> xxl-job accessToken is empty. To ensure system security, please set the accessToken.");
        }
        //创建执行器端的Netty服务器
        embedServer = new EmbedServer();
        //启动服务器,在启动的过程中,会把执行器注册到调度中心
        embedServer.start(address, port, appname, accessToken);
    }
}

在上面的代码块中可以看到,所有核心的逻辑都来到了EmbedServer类中,

EmbedServer就是执行期端内嵌的Netty服务器的启动类,该类的start方法一旦调用,

Netty服务器就启动了。接下来我们就应该着重重构这个类的

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2049627.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

spring揭秘06-Autowired自动绑定依赖及组件自动扫描

文章目录 【README】【1】基于xml配置文件版本的自动绑定【1.1】基于xml配置文件版本的自动绑定代码示例 【2】基于注解版本的自动绑定【2.1】根据类型匹配的注解版自动绑定Autowired【2.2】根据名称匹配的注解版自动绑定AutowiredQualifier【2.2.1】 示例代码 【2.3】关于Prim…

面向财商人群的AI垂直产品 —— AI股票助手

在数字化转型的大潮中,AI技术正在重塑各行各业,尤其是金融市场。对于那些渴望在瞬息万变的股市中保持敏锐洞察力的金融分析师、投资者及股票爱好者来说,一款强大而智能的工具显得尤为重要。今天,我们将向大家介绍一款专为财商人群打造的AI垂直产品——AI股票助手。 一、产…

mac如何恢复被同名替换掉的文件夹 mac文件被替换如何恢复

Mac系统一直以高性能遥遥领先其他的Windows系统&#xff0c;因此&#xff0c;Mac虽然价格远远高出其他的笔记本电脑&#xff0c;但是还是受到了一众用户的青睐。使用mac时&#xff0c;我们也经常会将一个文件命名为已经有了相同文件的文件名&#xff0c;且保存到同一个目标地址…

吴恩达机器学习-C2W3-多类分类

目标 在本实验中&#xff0c;您将探索一个使用神经网络进行多类分类的示例。 工具 您将使用一些绘图例程。它们存储在这个目录下的lab_utils_multiclass_TF.py中。 import numpy as np import matplotlib.pyplot as plt %matplotlib widget from sklearn.datasets import …

centos7.9最小化安装之后的配置与下载

一. 配置yum源 1.备份系统自带源文件 cd /etc/yum.repos.d/ mkdir bak mv *.repo bak 2. 配置阿里云yum源 若有wget wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo若没有wget&#xff0c;先直接把 http://mirrors.aliyun.com/re…

11.怎么做好一个动态标签页

效果 步骤 1.在Elementui找一个标签页组件 复制粘贴到代码 2.将他写活 将很多页面需要用的方法和变量写入store editableTabsValue: 2,editableTabs: [{title: 首页,name: index,},],addTab(state, tab) {if (state.editableTabs.findIndex(item > item.title tab.titl…

mysql5.7主从同步失败原因总结-windows

1&#xff0c;主库data文件复制到从库&#xff0c;之后主库要同步的实例data一定不要在修改&#xff1b; 1.1&#xff0c;修改之后就要重新覆盖一遍修改过的data 2&#xff0c;如果状态不对&#xff1a;一定要查看日志&#xff1b;比如slave_io_state是空时&#xff0c;需要查…

KEEPALIVED 全csdn最详细----理论+实验(干货扎实,包教会的)

环境准备 主机名IP虚拟IP&#xff08;VIP&#xff09;功能ka1172.25.254.10172.25.254.100keepalived服务ka2172.25.254.20172.25.254.100keepalived服务realserver1172.25.254.110web服务realserver2172.25.254.120web服务 注意一定要关闭selinux,和防火墙&#xff0c;不然在…

zabbix7.0 设置中文语言( Debian GNU/Linux 12)

本例为安装zabbix7.0 zabbix_server (Zabbix) 6.4.17 Revision c12261f00b4 15 July 2024, compilation time: Jul 15 2024 11:05:06 系统版本信息为 lsb_release -a No LSB modules are available. Distributor ID: Debian Description: Debian GNU/Linux 12 (bookworm) Rele…

防疫物资管理信息系统pf

TOC springboot379防疫物资管理信息系统pf 第1章 绪论 1.1选题动因 当前的网络技术&#xff0c;软件技术等都具备成熟的理论基础&#xff0c;市场上也出现各种技术开发的软件&#xff0c;这些软件都被用于各个领域&#xff0c;包括生活和工作的领域。随着电脑和笔记本的广泛…

【Django开发】前后端分离django美多商城项目第2篇:展示用户注册页面,1. 创建用户模块子应用【附代码文档】

全套笔记资料代码移步&#xff1a; 前往gitee仓库查看 感兴趣的小伙伴可以自取哦~ 本教程的知识点为&#xff1a; 项目准备 项目准备 配置 1. 修改settings/dev.py 文件中的路径信息 2. INSTALLED_APPS 3. 数据库 用户部分 图片 1. 后端接口设计&#xff1a; 视图原型 2. 具体…

【网络安全】SSO登录过程实现账户接管

未经许可,不得转载。 文章目录 正文正文 登录页面展示了“使用 SSO 登录”功能: 经分析,单点登录(SSO)系统的身份验证过程如下: 1、启动SSO流程:当用户点击按钮时,浏览器会发送一个GET请求到指定的URL: /idp/auth/mid-oidc?req=[UNIQUE_ID]&redirect_uri=[REDI…

在 Mac 上更改 24小时制时间显示

使用“日期与时间”设置设定或更改 Mac 上的日期和时间。如果日期和时间正确&#xff0c;那么电子邮件、信息和文件上的时间戳也是准确的。了解如何设定日期和时间。 若要更改这些设置&#xff0c;请选取苹果菜单 >“系统设置”&#xff0c;点按边栏中的“通用” &#x…

[星瞳科技]OpenMV使用时有哪些常见错误和解决办法?

常见代码错误 ImportError:no module named xxx 这个错误是Import错误&#xff0c;没有stepper这个模块。 原因&#xff1a; 你没有把stepper.py这个文件拖到你的板子里。见&#xff1a;模块的使用 拖过去之后&#xff0c;需要重启&#xff0c;使模块生效 MemoryError:FB …

Class字节码文件结构

class字节码文件结构 类型名称说明长度数量u4magic魔数,识别Class文件格式4个字节1u2minor_version副版本号(小版本)2个字节1u2major_version主版本号(大版本)2个字节1u2constant_pool_count常量池计数器2个字节1cp_infoconstant_pool常量池表n个字节constant_pool_count-1u2a…

马头拧紧驱动器维修 拧紧控制器故障

马头拧紧控制器作为工业自动化领域不可或缺的重要设备&#xff0c;其稳定运行对于生产线的效率与安全性至关重要。然而&#xff0c;在实际应用中&#xff0c;难免会遇到各种Desoutter拧紧工具控制器故障&#xff0c;影响生产进度和设备性能。 拧紧轴控制器维修 拧紧装置 马头…

ubuntu设置共享文件夹,非虚拟机,服务器版

在Ubuntu中共享文件夹通常可以通过几种不同的方式来实现&#xff0c;比如使用Samba服务、NFS&#xff08;Network File System&#xff09;或者通过虚拟机软件如VirtualBox或VMware的内置共享文件夹功能。这里我假设您是在询问如何在Ubuntu主机上设置一个简单的文件共享服务&am…

MongoDB Redis 快速上手:NoSQL数据库操作精要

先言之 ☘️随着大数据时代的到来&#xff0c;非关系型数据库因其灵活性和扩展性逐渐受到开发者的青睐。MongoDB 和 Redis 作为两种非常流行的 NoSQL 数据库&#xff0c;各自拥有独特的特性和应用场景。MongoDB 是一款面向文档的数据库&#xff0c;适用于需要存储复杂数据结构…

ESP32-C3在MQTT访问时出现“transport_base: Poll timeout or error”问题的分析(2)

接前一篇文章:ESP32-C3在MQTT访问时出现“transport_base: Poll timeout or error”问题的分析(1) 前一篇文章在分析定位笔者所遇MQTT(MQTTs)传输时问题的时候,定位到了问题是出自于components\components\tcp_transport\transport_ssl.c的ssl_write函数。本回开始,就围…

【四】阿伟开始学Kafka

阿伟开始学Kafka 概述 人生若只如初见&#xff0c;阿伟心里回想起了第一次和Kafka见面的场景&#xff0c;记忆虽然已经有些模糊&#xff0c;但是感觉初次见面是美好的。积累了一些实战经验之后&#xff0c;阿伟感觉不能再是面对百度开发了&#xff0c;于是决心系统的学习一下Ka…