如何设置星火集群在Windows机器上?(How to set up Spark cluster o

2019-10-18 07:58发布

我试图建立在Windows机器上一个Spark集群。
去这里的方法是使用独立模式,对不对?
什么是不使用Mesos或纱线的具体缺点是什么? 而且那会是多么的痛苦,以使用其中的任何一个? 有没有人有一定的经验吗?

Answer 1:

仅供参考,我得到了用户组中的答案: https://groups.google.com/forum/#!topic/spark-users/SyBJhQXBqIs

单机模式确实是要走的路。 Mesos无法在Windows和纱线下工作可能都不是。



Answer 2:

快速笔记,纱最终应该会在Windows上通过Hortonworks数据平台工作(2.0版公测纱线,但它只有在这个时候是在Linux上)。 另一个潜在的路线是有它的Hadoop对抗1.1(Hortonworks数据平台为Windows 1.1)工作 - 但是你有它在单机模式下运行的做法肯定是最容易得到地面。



文章来源: How to set up Spark cluster on Windows machines?