MaxCompute
MaxCompute 是阿里云上的企业级 SaaS(Software as a Service)模式云数据仓库。
连接 Max Compute
CREATE CATALOG mc PROPERTIES (
"type" = "max_compute",
"mc.region" = "cn-beijing",
"mc.default.project" = "your-project",
"mc.access_key" = "ak",
"mc.secret_key" = "sk"
);
-
mc.region
:MaxCompute 开通的地域。可以从 Endpoint 中找到对应的 Region,参阅 Endpoints 。 -
mc.default.project
:MaxCompute 项目。可以在MaxCompute 项目列表中创建和管理。 -
mc.access_key
:AccessKey。可以在 阿里云控制台 中创建和管理。 -
mc.secret_key
:SecretKey。可以在 阿里云控制台 中创建和管理。 -
mc.public_access
: 当配置了"mc.public_access"="true"
,可以开启公网访问,建议测试时使用。
限额
连接 MaxCompute 时,按量付费的 Quota 查询并发和使用量有限,如需增加资源,请参照 MaxCompute 文档。参见 配额管理 .
列类型映射
和 Hive Catalog 一致,可参阅 Hive Catalog 中 列类型映射 一节。
自定义服务地址
默认情况下,Max Compute Catalog 根据 region 去默认生成公网的 endpoint。
除了默认的 endpoint 地址外,Max Compute Catalog 也支持在属性中自定义服务地址。
使用以下两个属性:
-
mc.odps_endpoint
:Max Compute Endpoint。 -
mc.tunnel_endpoint
: Tunnel Endpoint,Max Compute Catalog 使用 Tunnel SDK 获取数据。
Max Compute Endpoint 和 Tunnel Endpoint 的配置请参见各地域及不同网络连接方式下的 Endpoint
示例:
CREATE CATALOG mc PROPERTIES (
"type" = "max_compute",
"mc.region" = "cn-beijing",
"mc.default.project" = "your-project",
"mc.access_key" = "ak",
"mc.secret_key" = "sk"
"mc.odps_endpoint" = "http://service.cn-beijing.maxcompute.aliyun-inc.com/api",
"mc.tunnel_endpoint" = "http://dt.cn-beijing.maxcompute.aliyun-inc.com"
);