IDEA集成MaxCompute

最新推荐文章于 2020-07-12 09:48:19 发布
最新推荐文章于 2020-07-12 09:48:19 发布
阅读量1.5k 收藏 1
点赞数 1
分类专栏： 阿里云 大数据 文章标签： idea 发布 测试 界面 结构

点击查看全文


IDEA集成MaxCompute

集成方式参阅：
https://help.aliyun.com/document_detail/50891.html?spm=5176.product27797.6.730.Lbsygn

开发UDF

  1. 新建一个MaxCompute Java Moudel
    项目结构如图：
    DingTalk20170817160603.png

  2. 创建测试类
    在src/main/java下创建MaxCompute Java 里面默认有一个带有一个参数的方法，如果我们的UDF中需要传入多个参数，那么我们可以重构默认方法，根据自己的需求添加参数。具体可以参考UDF项目的example示例
    DingTalk20170818165903.png

  3. 开发测试
    在我们的UDF类上右键，点击RUN XXXX。进入执行配置界面，
    DingTalk20170818170121.png
    带星号的这几项为必填项
    project: 你odps对应的project
    table: 你odps对应的表名称
    partition: odps表的分区
    columns: odps作为入参传入的列名称，多个用逗号隔开

配置好后，点击apply 然后执行

  1. 发布 发布前，需要把刚刚的项目打成jar包，对于有自己特殊依赖的项目，打包时要将依赖打进去。将所有依赖包含进去打成一个jar需要配置一个maven 插件


点击查看全文


Mc顽固份子
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
IDEA本地maxcompute开发环境搭建
lck_csdn的博客
03-09 254
IDEA本地maxcompute开发环境搭建
在IDEA中配置maxcomputer
m0_51100801的博客
11-02 984
阿里云官网文档 https://developer.aliyun.com/article/185005
打开新的intellij idea工程，发现无法添加maxcompute java文件
山中有石为玉
05-14 739
描述： 打开新的intellij idea工程，发现文件下标是黄色指针（图1），而不是蓝色c（图2 正确的工程）。 图1 错误的工程 ...
MaxComputer (ODPS) 之UDF
二月依依的博客
12-14 4585
UDTF功能：可以放在sql语句中对单行中某个字段进行处理并且生成一行或者多行数据. 开发工具 Intellij IDEA 1.下载MaxCompute Studio idea -> File -> settings -> Plugins  搜索‘MaxCompute Studio’ 没有的话点击Browse repositories… ，点击Manage reposi...
IDEA常用插件
南风南
01-25 488
1.keymap 功能：分屏 设置：File–>setting 个人习惯水平分屏，也可以垂直分屏（Split Horizontally） 2.BackgroundImage 功能：设置编辑背景 设置：File–>setting–>plugin，搜索 BackgroundImage 更换背景图片：Ctrl+Shift+A 输入 set Background...
intellij idea 集成tomcat
03-23
intellij idea 集成tomcat
IDEA集成git和使用步骤的实现方法
08-19
IDEA集成git和使用步骤的实现方法 本文主要介绍了IDEA集成git和使用步骤的实现方法，涵盖了IDEA集成git的方法、在IDEA上拉下Git项目的步骤、IDEA项目的提交和更新操作等知识点。 一、IDEA集成git方法 要集成git到...
intelliJ idea集成zkoss插件
03-26
idea集成zkoss插件,安装方式：settings --> Plugins -->Install plugin from disk... 弹出框里选择下载的jar 重启idea生效
idea集成mybatis插件
12-17
今天我们将探讨如何在IntelliJ IDEA中集成Mybatis插件，以及如何利用这个插件进行便捷的SQL操作，如insert、update、query的生成，以及主键查询生成XXXById的方法。 Mybatis是一款优秀的持久层框架，它支持定制化...
idea集成git教程
09-08
有较详细的关于idea怎么样集成版本控制工具git的教程包括文字教程和图片教程，逐步指导，让你轻松在idea上使用git
aliyun-odps-r-plugin:MaxComputeODPS 的 R 插件
05-31
RODPS：R 的 ODPS 插件 特征 从/向 ODPS 读/写数据帧。 将一些 R 模型转换为 SQL 命令。 大数据集可以使用分布式算法进行处理。 小数据集可以直接在R中处理。 要求 Java：推荐 Java 8（Java 9 或更高版本可能会遇到 JAXB 问题） R：最新版本（RODPS 本身支持 R 1.8+，其依赖库不支持） R 库 rJava 发展部 RSQLite 安装 1.下载包： 2.安装依赖： install.packages('DBI') install.packages('rJava') install.packages('RSQLite') 或者您可以使用devtools来帮助您解决依赖关系： install.packages('devtools') 3.安装RODPS包： install.packages('https://githu
IDEA安装MaxCompute Studio的详细步骤
数据搬运工
05-18 2386
1.安装好IDEA 2.点击File >> Settings >> Plugins，在搜索框搜索MaxCompute，找到对应的插件。 3.点击File >> New >> Project，创建新工程，选择MaxCompute Studio。 4.点击左上角的“+”加号，添加阿里云上的数据工程。记得提前准备MaxCompute客户端的配置文件！ 5.成功加载阿里云上的数仓，并可显示相关的表记录! 6.新建MaxCompute SQL脚本 7.编写
【实验】阿里云大数据助理工程师认证（ACA）- ACA认证配套实验-02-MaxCompute客户端配置（下）
07-12 1559
一、实验概述 大数据计算服务（MaxCompute，原名 ODPS）是一种快速、完全托管的 GB/TB/PB 级数据仓库解决方案。MaxCompute 向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。 本实验实验结合实际数据和案例，深入浅出的演示了如何进行MaxCompute各种客户端的配置。 二、实验目标 本实验讲述如何借助Intellij IDEA开发工具使用 MaxCompute 服务的基础功能。 完成此实验后，可以掌
IntelliJ IDEA连接MaxCompute项目空间
NT0521的博客
04-26 1748
1、安装 在IDEA中File>Settings>Plugins中Browse repositories搜索安装即可：MaxCompute Studio 2、新建MaxCompute Studio项目 3、View > Tool Windows> Project Explorer 4、选择Project Explorer 5、单击左上角的+，选择...
IDEA的Maxcomputer Studio开发
weixin_30535843的博客
12-11 695
一、安装 　　在IDEA中File>Settings>Plugins中Browse repositories搜索安装即可：MaxCompute Studio 二、开发UDF、UDAF、UDTF 　　//开发SQL脚本等暂不赘述，推荐DataWorks 　　1.创建module（project） 　　　　file->new->project，类型选择Maxc...
IntelliJ IDEA（九） ：酷炫插件系列
热门推荐
JaJian的博客
05-18 2万+
最近项目比较忙，很久没有更新IDEA系列了，今天介绍一下IDEA的一些炫酷的插件，IDEA强大的插件库，不仅能给我们带来一些开发的便捷，还能体现我们的与众不同。 1.插件的安装 打开setting文件选择Plugins选项 Ctrl + Alt + S File -> Setting 分别是安装JetBrains插件，第三方插件，本地已下载的插件包。详情见往期关于settin...
Python实现MaxCompute UDF/UDAF/UDTF
weixin_34233421的博客
12-20 2792
MaxCompute 的 UDF 包括：UDF，UDAF 和 UDTF 三种函数，本文将重点介绍如何通过 Python实现这三种函数。 参数与返回值类型 参数与返回值通过如下方式指定： @odps.udf.annotate(signature) Python UDF目前支持ODPS SQL数据类型有：bigint, string, double,...
idea集成Maven
最新发布
09-08
在使用IDEA集成Maven时，可以按照以下步骤进行操作： 1. 打开IDEA，点击顶部菜单栏的"File"，选择"Settings"。 2. 在弹出的窗口中，选择"Build, Execution, Deployment"，然后选择"Maven"。 3. 在"Maven"设置页面中...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值