EMR Workflow 开启公测,100%兼容开源 Apache DolphinScheduler

简介: EMR Workflow 是一个全托管的工作流和任务调度服务,100%兼容开源 Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建数据仓库,并为生产任务的稳定运行提供保障。

产品介绍

EMR Workflow 产品简介

EMR Workflow 是一个全托管的工作流和任务调度服务,100%兼容开源 Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建数据仓库,并为生产任务的稳定运行提供保障。


EMR Workflow 产品优势

  • 即开即用,免部署、免运维。
  • 基于阿里云基础设施提供稳定可靠的云原生Serverless服务。
  • 与阿里云 RAM 账号体系兼容,提供企业级的安全和隔离能力。
  • 无缝对接 EMR 资源集群和各种大数据计算存储引擎,例如Hive、Spark和Flink等。
  • 提供与 Apache DolphinScheduler 兼容的接口和使用体验,支持开源DolphinScheduler 和 EMR 旧版数据开发作业的一键迁移。


EMR Workflow 产品功能

EMR Workflow 具有如下功能:

  • 支持多种任务类型:例如 Shell、Spark、HIVECLI 等多种类型的任务调度。
  • 可视化的任务流程编辑:支持通过可视化的方式创建任务流程。
  • 实时监控:提供实时的任务监控和日志查看
  • 定时任务管理:支持定时任务的创建和管理。
  • 异常告警:支持异常告警和通知,保障任务调度的及时响应
  • 管理文件:支持可视化创建文件、上传文件等操作



公测说明

公测时间说明

EMR Workflow 公测已于2023年6月29日开启,预计于2023年9月30日结束。公测面向所有用户开放,您可以在E-MapReduce控制台,选择EMR Studio > Workflow,进入EMR Workflow页面创建项目并进行测试。

image.png

重要

公测期间您可以免费试用 EMR Workflow 服务,但 EMR Workflow 工作流运行时需要关联 EMR 集群,创建或使用已有的 EMR 集群会产生 EMR 和 ECS 等费用,详情请参见计费项


公测限制

公测期间,有以下限制:

  • 免费提供1CU调度资源,建议并发执行任务数不超过10个。
  • 资源中心上传文件总量不超过5 GB。
  • 不保障服务等级协议SLA,但服务不降级。

说明

如果使用过程中遇到任何疑问,可以钉钉搜索钉钉群号加入钉钉群31675206进行咨询。


更多 EMR Workflow  点此了解>>

相关实践学习
数据湖构建DLF快速入门
本教程通过使?数据湖构建DLF产品对于淘宝用户行为样例数据的分析,介绍数据湖构建DLF产品的数据发现和数据探索功能。
快速掌握阿里云 E-MapReduce
E-MapReduce 是构建于阿里云 ECS 弹性虚拟机之上,利用开源大数据生态系统,包括 Hadoop、Spark、HBase,为用户提供集群、作业、数据等管理的一站式大数据处理分析服务。 本课程主要介绍阿里云 E-MapReduce 的使用方法。
目录
相关文章
|
5天前
|
消息中间件 Kafka Apache
Apache Flink 是一个开源的分布式流处理框架
Apache Flink 是一个开源的分布式流处理框架
722 5
|
5天前
|
算法 Java Go
Apache Zeppelin 番外篇——参与开源的得与失
Apache Zeppelin 番外篇——参与开源的得与失
45 0
|
6月前
|
数据采集 分布式计算 Hadoop
开源数据质量解决方案——Apache Griffin入门宝典(上)
开源数据质量解决方案——Apache Griffin入门宝典
193 0
|
4天前
|
Kubernetes Cloud Native API
欢迎报名 Apache Seata (incubating) 开源之夏
Apache Seata (incubating) 邀请学生参加 2024 年开源之夏活动,报名时间为 4 月 30 日至 6 月 3 日。该项目旨在培养分布式事务领域的开发者,参与者将远程协作并有机会获得奖金。
281 12
|
5天前
|
存储 缓存 安全
阿里云EMR数据湖文件系统: 面向开源和云打造下一代 HDFS
本文作者详细地介绍了阿里云EMR数据湖文件系统JindoFS的起源、发展迭代以及性能。
71960 2
|
5天前
|
存储 SQL 分布式计算
使用Amazon EMR和Apache Hudi在S3上插入,更新,删除数据
使用Amazon EMR和Apache Hudi在S3上插入,更新,删除数据
150 0
|
5天前
|
分布式计算 Java 数据管理
使用Apache Hudi + Amazon EMR进行变化数据捕获(CDC)
使用Apache Hudi + Amazon EMR进行变化数据捕获(CDC)
108 0
|
5天前
|
监控 Java Apache
|
5天前
|
SQL 数据可视化 大数据
【开源项目推荐】Apache Superset——最优秀的开源数据可视化与数据探索平台
【开源项目推荐】Apache Superset——最优秀的开源数据可视化与数据探索平台
157 1
|
5天前
|
Apache 调度 数据库
Apache DolphinScheduler VS WhaleScheduler
Apache DolphinScheduler VS WhaleScheduler
186 2

推荐镜像

更多
http://www.vxiaotou.com