国内有没有可以部署 Spark 的云服务？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

Recommended Services

› Amazon Web Services

› LeanCloud

› New Relic

› ClearDB

这是一个创建于 3288 天前的主题，其中的信息可能已经有所发展或是发生改变。

亚马逊的 EMR 好像可以方便部署 Spark ，但是节点都不在国内。
请问国内有没有类似的提供商

Spark

emr

部署

国内

15 条回复 • 2015-12-22 14:21:34 +08:00

ericson

2015-11-10 12:20:07 +08:00

青云有

liprais

2015-11-10 12:42:46 +08:00

百度

loveltyoic

2015-11-10 16:44:13 +08:00

多谢上面的回答。
AWS 现在注册可以免费用一年，已经注册了一个账号，先试试。

ligyxy

2015-11-10 20:06:31 +08:00

spark-ec2 已经足够方便灵活，对我来说

arronliu

2015-11-10 22:06:27 +08:00

青云有啊，

loveltyoic

2015-11-11 10:38:21 +08:00

@ligyxy 就是 spark 自带的部署脚本吗？昨天刚刚试了一下，还没深入使用。另外你用的也是免费 1 年的吗

ligyxy

2015-11-11 10:49:56 +08:00

@loveltyoic 我们用在产品上。我的意思是 EMR 和 EC2 还是得根据需求挑选一下，如果你以后部署在 AWS 上的话

zhique

2015-11-12 16:20:19 +08:00

AWS 国内有 EMR 服务啊

loveltyoic

2015-11-12 18:25:59 +08:00

@zhique 有国内节点吗？好像最近就是东京和新加坡

loveltyoic

2015-11-12 18:27:21 +08:00

@ligyxy EC2 是不是就是虚拟机，而 EMR 直接有现成的 hadoop 环境了？

zhique

2015-11-13 06:52:09 +08:00

@loveltyoic AWS 有中国 region ，不过据说还没完全 public ，需要申请。最新的 EMR 自带 Hadoop 2.6.0, Hive 1.0.0, Hue 3.7.1, Mahout 0.11.0, Pig 0.14.0, and Spark 1.5.0

MOS

2015-11-16 15:53:10 +08:00

美团云提供 Spark 服务，当前处于免费公测阶段，您可以前往 https://mos.meituan.com/products/bds 申请免费试用。美团云大数据分析服务 MDS （ MOS Data Services ）包含 Spark 、 HDFS 、 Yarn 、 Hive 、 Hbase 等组件，是根据美团自身大数据分析架构与技术实践，将美团内部使用磨合多年的数据分析平台整合剥离出来的产品。

loveltyoic

2015-11-17 17:47:23 +08:00

@MOScloud 谢谢，申请一个试试

linjuyx

2015-11-17 23:21:55 +08:00

@loveltyoic 阿里云今天推出了 E-MapReduce ，你可以看看

min

2015-12-22 14:21:34 +08:00

azure 有