DataWorks创建JavaUDF函数全流程

news2024/12/25 1:24:58

文章目录

  • 插件下载
  • 创建MaxCompute Studio项目
  • 创建MaxCompute Java Module
  • 编写Java UDF函数
  • 注意

说明:这篇文章只是个人记录下,具体步骤都可以在官网找到。推荐看官网文档哈

插件下载

在这里插入图片描述

创建MaxCompute Studio项目

  1. 启动IntelliJ IDEA,在顶部菜单栏,单击File > New > Project。
  2. 在New Project对话框的左侧导航栏,选择MaxCompute Studio,单击Next。
    在这里插入图片描述
  3. 单击View > Tool Windows > Project Explorer
    在这里插入图片描述
  4. 单击左上角的+,选择Add project from accessId/Key。
    在这里插入图片描述
  5. Add MaxCompute project对话框,配置Connection页签信息
    在这里插入图片描述

创建MaxCompute Java Module

  1. 启动IntelliJ IDEA,在顶部菜单栏,单击File > New > Module…。
  2. 在New Module对话框的左侧导航栏,单击MaxCompute Java。
  3. 配置Module SDK文件位置,单击Next。
  4. 填写Module name,单击Finish。
    在这里插入图片描述

编写Java UDF函数

  1. 在Project区域,右键单击Module的源码目录(即src > main > java),选择new > MaxCompute Java。
    在这里插入图片描述
  2. 在Create new MaxCompute java class对话框,单击UDF并填写Name后,按Enter键。例如Java Class名称为Lower。
    在这里插入图片描述
  3. 此时就可以编写代码了

注意

官网给的上传函数 和资源的方式是 通过Deploy to server...。但是我是自己传到DataWorks上的,这点与官网不同

  • 上传资源:新建资源 --> jar --> 上传资源
  • 创建函数:新建函数 --> 函数名字 --> 选择 jar 包
    在这里插入图片描述
  • 另外:
    如果你的udf函数包含其他依赖,例如fastJson那你就要上传胖包,不然会报Class Not Found的错误
//maven 打包插件
<build>
    <plugins>
        <plugin>
            <groupId>org.apache.maven.plugins</groupId>
            <artifactId>maven-assembly-plugin</artifactId>
            <version>3.0.0</version>
            <configuration>
                <descriptorRefs>
                    <descriptorRef>jar-with-dependencies</descriptorRef>
                </descriptorRefs>
            </configuration>
            <executions>
                <execution>
                    <id>make-assembly</id>
                    <phase>package</phase>
                    <goals>
                        <goal>single</goal>
                    </goals>
                </execution>
            </executions>
        </plugin>
    </plugins>
</build>

阿里云Java UDF链接

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/150465.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

1806. 还原排列的最少操作步数

解法一&#xff1a; 根据题目的题目描述进行模拟&#xff0c;遇到偶数iii将arr[i]prem[i/2]arr[i] prem[i/2]arr[i]prem[i/2],遇到奇数iii,将arr[i]prem[(n−1i)/2]arr[i]prem[(n-1i)/2]arr[i]prem[(n−1i)/2] 时间复杂度: O(n2)O(n^2)O(n2), 最多会循环n次空间复杂度&#…

Nginx反向代理使用方法小总结

文章目录一、前言二、反向代理定义重申三、短网址方式代理四、多级域名方式代理五、通配符代理方式总结一、前言 本文只介绍代理转发到一个主机的方式&#xff0c;至于在代理时进行负载均衡大家需要自己尝试&#xff0c;也比较简单&#xff0c;在本专栏前面文章提到过&#xf…

(二)Redis概述与安装

目录 一、概述 1、特性 2、应用场景 二、安装 三、启动 1、前台启动&#xff08;不推荐&#xff09; 2、后台启动&#xff08;推荐&#xff09; 四、redis关闭 五、redis相关知识介绍 一、概述 1、特性 Redis是一个开源的key-value存储系统。和Memcached类似&#x…

TOOM舆情分析监控管理系统集成,舆情监控系统监测那些人群?

当前&#xff0c;互联网已成为思想文化信息的集散地和社会舆论的扩大器&#xff0c;舆情监控新闻、论坛博客、聚合新闻等等&#xff0c;做好舆情监控&#xff0c;至于监测那些人群&#xff0c;舆情分析监控是非常必要的&#xff0c;接下来我们简单了解TOOM舆情分析监控管理系统…

接口协议之抓包分析 TCP 协议

TCP 协议是在传输层中&#xff0c;一种面向连接的、可靠的、基于字节流的传输层通信协议。环境准备对接口测试工具进行分类&#xff0c;可以如下几类&#xff1a;网络嗅探工具&#xff1a;tcpdump&#xff0c;wireshark代理工具&#xff1a;fiddler&#xff0c;charles&#xf…

《移动通信》多章节部分重要习题(简答、单选、判断)

调制技术在移动通信中的作用&#xff1f; 调制有两个目的: 1 )经过调制可以使基带信号变换为带通信号。选择需要使用的载波频率 ( 简称载频 ) ,可以把信号的频谱从开始的频段转移到到所需要的频段上,从而使传输信号适应信道的要求,或是可以把许多个输入信号合起来应用于多路传…

开发模型 和 测试模型 详解

开发模型 开发模型 &#xff1a; ① 瀑布模型 ② 螺旋模型 ③ 增量模型 和 迭代模型 ④ 敏捷模型 (优点 缺点 适用场景)测试模型 &#xff1a; ① V模型 ② W模型瀑布模型优点/特点&#xff1a;线性结构&#xff0c;每个阶段 只执行一次是其他模型的一个基础框架缺点&#xff1…

sentinel-Roadmap(三)

Pages 60 Sentinel 官方网站 OpenSergo 微服务治理 文档 Read Me新手指南Sentinel 介绍FAQRoadmap如何使用工作原理流量控制集群流控&#xff08;分布式流控&#xff09;网关流控熔断降级热点参数限流系统自适应限流黑白名单控制实时监控数据动态规则控制台生产环境使用 Sent…

Spring依赖注入时,创建代理bean和普通bean详解

问题来源 以前一直有个疑惑&#xff0c;为什么我创建的controller中注入的service类有时候是代理类&#xff0c;有时候是普通javabean&#xff0c;当时能力不够&#xff0c;现在已经有了点经验就大胆跟了跟源码&#xff0c;看看到底咋回事。 首先看看问题现象&#xff1a; a1…

linux nfs umount报错:device is busy

执行nfs卸载命令umount /mnt&#xff0c;报错target is busy. 或device is busy可以按以下步骤检查&#xff1a;退出要卸载挂载的目录&#xff0c;再执行卸载挂载cd ../umount /mnt找出占用目录的端口&#xff0c;kill端口fuser -m /mnt/kill -9 端口umount /mnt停止nfs服务&am…

PCA 主成分分析-清晰详细又易懂

PCA&#xff08;Principal Component Analysis&#xff09;通过线性变换将原始数据变换为一组各维度线性无关的表示&#xff0c;可用于提取数据的主要特征分量&#xff0c;常用于高维数据的降维。 当然我并不打算把文章写成纯数学文章&#xff0c;而是希望用直观和易懂的方式叙…

Java char[]数组转成String类型(char to String)详细介绍

前言 string toCharArray() 方法将给定的字符串转换为字符序列 Java中字符串转换为字符数组的方法在之前的博客已经介绍了&#xff01; 今天介绍char[]数组转成String 方法有4种&#xff1a; 使用 String 类的 valueOf() 方法使用字符串连接使用 Character 类的 toString() 方…

图形编辑器:场景坐标、视口坐标以及它们之间的转换

大家好&#xff0c;我是前端西瓜哥。 图形编辑器的坐标系有两种。 一个是场景&#xff08;scene&#xff09;坐标系&#xff0c;一个是 视口&#xff08;viewport&#xff09;坐标系。视口就是场景的一个子区域。 假设我们的视口的原点&#xff0c;离场景原点的坐标水平和垂直…

C2芯片一ESP32-C2开发板

C2是一个芯片采用4毫米x 4毫米封装&#xff0c;与272 kB内存。它运行框架&#xff0c;例如ESP-Jumpstart和ESP造雨者&#xff0c;同时它也运行ESP-IDF。ESP-IDF是Espressif面向嵌入式物联网设备的开源实时操作系统&#xff0c;受到了全球用户的信赖。它由支持Espressif以及所有…

月报总结|Moonbeam 12月份大事一览

本月&#xff0c;针对生态和项目&#xff0c;Moonbeam基金会启动首期Accelerator Program孵化计划&#xff0c;将针对入选团队提供一系列扶持资源&#xff0c;申请仍在开放中。对于开发者&#xff0c;Moonbuilders Academy上线了关于构建跨链应用的新课程。 社区活动方面&…

【案例分析】汽车制造行业电能质量治理方案分析

摘要&#xff1a;现如今的汽车制造行业&#xff0c;使用的机械设备越来越精密&#xff0c;制造技术与自动化水平也越来越高&#xff0c;为此对供电系统的电能质量要求更高更苛刻&#xff0c;同时对不能满足现有生产工艺需求的供电质量进行治理。通过分析汽车制造过程中冲压工艺…

连续三年!Fortinet再次位列《 Gartner 企业级有线和无线局域网基础设施魔力象限报告》“远见者”

网络安全领导者Fortinet&#xff08;NASDAQ&#xff1a;FTNT&#xff09;&#xff0c;近日宣布连续第三年入围《Gartner企业级有线和无线局域网基础设施魔力象限报告》“远见者”象限。这一殊荣源于Fortinet 旗下FortiSwitch 和 FortiAP等有线和无线局域网产品组合的强劲实力&a…

激光焊接薄板时需要注意的一些问题

焊接是目前工业制造中必要的工艺技术&#xff0c;焊接金属时需要注意很多方面的问题&#xff0c;本文主要针对金属薄板焊接中的一些工艺问题进行展开讨论。例如&#xff1a;焊缝的牢固程度、焊缝的平整度、焊缝直线度的控制、焊缝高度和宽度的控制以及焊接的均匀性等方面。 一、…

程序员们有什么好的编程习惯?

优良的代码显然不是制作优秀软件的唯一要素&#xff0c;但是主要的要素之一。我们可能拥有世界上最好的产品和营销团队&#xff0c;部署了最好的平台&#xff0c;并以最好的框架来构建软件&#xff0c;但归根结底&#xff0c;一款软件所做的一切&#xff0c;都是因为有人写了一…

LeetCode 49 字母异位词分组 | 解题思路分享

原题链接&#xff1a;49. 字母异位词分组 - 力扣&#xff08;LeetCode&#xff09; 题目难度&#xff1a;中等 题目描述 给你一个字符串数组&#xff0c;请你将 字母异位词 组合在一起。可以按任意顺序返回结果列表。 字母异位词 是由重新排列源单词的字母得到的一个新单词…