天天看点

阿里云Dataworks RestAPI数据源离线数据同步Quick Start

Step By Step

主要操作步骤

1、Open API中快速测试接口;

2、创建独享数据集成资源组;

3、Dataworks创建离线数据集成任务;

4、测试运行,查看写入表的情况。

一、Open API中快速测试接口

1、OnsRegionList

API说明

2、Open API快速测试

地址
阿里云Dataworks RestAPI数据源离线数据同步Quick Start

二、创建独享数据集成资源组

1、独享数据集成资源组的创建参考下面链接资源组创建部分

Dataworks实时数据同步(Kafka -> maxcompute)
注意: 因为是通过公网访问API,本部分不对VPC做特殊限制。

三、Dataworks创建离线数据集成任务

1、配置RestApi数据源

阿里云Dataworks RestAPI数据源离线数据同步Quick Start

2、创建maxcompute数据表

CREATE TABLE IF NOT EXISTS from_restapi(key1 STRING,key2 STRING,key3 STRING);

3、配置离线数据同步任务

1、配置数据源 + 字段映射

阿里云Dataworks RestAPI数据源离线数据同步Quick Start

2、提取Json结果示例

阿里云Dataworks RestAPI数据源离线数据同步Quick Start

四、测试运行,查看写入表的情况

阿里云Dataworks RestAPI数据源离线数据同步Quick Start

更多参考

配置RestAPI数据源 RestAPI Reader