cluster-computing

0热度

1回答

我想就如何在HA中使用带RED HAT Linux OS的虚拟机的PHP应用程序设置服务器Web提供一些建议。这个想法是让两个虚拟服务器Web共享一个共同的文档根目录，使用NFS或iSCSI加上其他两个复制数据的MariaDB数据库。我有一些文档，无论如何，我想知道你的意见，特别是如何应对数据库的复制必须是多余的。非常感谢里卡多

1热度

1回答

将本地python脚本连接到远程spark主模块

我正在使用python 2.7与spark独立群集。当我在运行python脚本的同一台机器上启动master时。它工作顺利。当我在远程计算机上启动主服务器并尝试启动本地计算机上的spark上下文以访问远程spark主服务器时。没有任何反应，我得到一个按摩，说任务没有得到任何资源。当我访问主人的用户界面。我看到这份工作，但没有任何反应，它只是在那里。如何通过本地python脚本访问远程spa

-2热度

1回答

HPC集群极其缓慢

我已经建立了一个具有1个头节点和3个计算节点的小型集群。我的客户机是用于提交工作簿卸载作业的Windows 2016 Server。我的问题 - HPC非常缓慢;如果我在本地计算机上运行作业，则运行速度比HPC群集上的速度快10倍左右！我节点的配置如下： Headnode：2vCPU和8GB内存计算节点：1vCPU和4GB内存的每个我有一个可疑的问题可能是与节点之间的通信网络。或者完全不同的东

1热度

1回答

Apache Spark：MesosClusterDispatcher可以在Docker容器中运行执行程序吗？

我正在构建一个运行Apache Spark的Mesos集群。我更喜欢为我的Spark执行者使用Docker容器，我可以使用spark-submit的客户端模式（使用--master mesos://mesosmaster:5050和--conf spark.mesos.executor.docker.image=myimage:latest）执行此操作，但我希望能够在集群模式下执行相同的操作。我

-3热度

1回答

使用计算节点上的所有核心是否合理？

我有一个小问题。计算节点具有2个插槽，每个插槽12芯。所以它有24个核心（在我的情况下是24 cpu）。当我运行并行计算，我可以使用所有CPU？换句话说，我们是否需要为后台程序腾出几个cpus？顺便说一句，我认为使用相同的芯片（同一插槽）上的CPU可避免插座之间的commmunication，这可能会加速运行。那么如何确定应该使用多少cpus来产生最快的运行？在这个问题上的任何一般性的建议

0热度

1回答

如何在DTWCLUST库R中计算质心

我在r中使用DTWCLUST包。这是我的代码。 library(dtwclust) sc1 <- read.table("D:/handling data/confirm4.csv", header=T, sep=",") hc_sbd <- dtwclust(sc1, type = 'h', k=5L, method = 'ward.D', preproc = zscore,

0热度

1回答

Docker容器中的ntpd服务已死，无法重新启动

我正在尝试使用docker和ambari装入本地hadoop群集，im问题是ambari安装检查显示NTP未运行，需要知道如果安装了ambari的服务正在运行。我在集装箱检查NTPD，并试图发动他们，但失败了 [[email protected] ~]# service ntpd start Starting ntpd: [ OK ] [[email protected]

1热度

1回答

在集群环境中使用Springboot的Websocket

我们希望在Spring引导集群环境中实现websocket。我们正在使用JWT进行身份验证。我明白我们可以使用ActiveMQ或RabbitMQ作为脚踏代理。但是我们已经在使用redis了，我们可以如何使用redis，因为我们不想增加维护另一个消息服务的额外开销？

0热度

1回答

春点燃不同的节点上集成

考虑这种情况： Spring应用程序启动其中加入一些点燃集群Ignite节点。在这个节点上开始点燃注入@SpringResource的singleton服务（并且根据点火文档，这个变量必须标记为transient）。现在这个节点停止运行，服务的副本在不知道Spring的其他节点上恢复。所以问题是：如何将春豆注入这个恢复的服务？ Thanx提前。

2热度

2回答

火花主控连接正在关闭一个请求待定从火花从属

我想设置一个2机器火花集群。我在Windows主机上使用两个VirtualBox Ubutnu 16.04访客机器进行设置。 Master是Windows 10主机上的Ubuntu 16.04 Guest，而Slave是Windows 7 Host上的Ubuntu 16.04 Guest。我也做了以下几件事：在两台机器上设置密码的ssh少。安装Java和星火两种机器上在两台机器上安装路径