distributed-computing

0热度

1回答

任务分配在豆荚中

有没有任何方法可以在kubernetes中的豆荚之间分配任务。我在HDFS上有一堆文件，我想将它们分发到我的应用程序窗口中。像Helix分区分布功能也适用于我。

1热度

2回答

可以使用tensorflow将word2vec算法分布在多台计算机上吗？

我想在非常大的语料库上训练word2vec模型，以便嵌入的单词不能分配给RAM。我知道现有的算法并行解决方案，例如Spark implementation，但我想使用tensorflow库。可能吗？

0热度

1回答

用于做一个庞大的多维数组的n维FFT的资源

我有一个50维的数组，其维数为255 x 255 x 255 x ...（50倍）.. x255。所以它总共有50^255个浮点数。它只是在范围之外，甚至想到装入RAM中。此外，我需要对此阵列进行50维快速傅立叶变换（DFT）。我无法在普通PC上使用python。我甚至不能想象在GPU上做它。所以我猜我必须借助硬盘内存，但即使这样也太大了。我实时不需要这些，我甚至可以负担得起的日子。我不知道我需要

0热度

2回答

事件采购是否适用于批量输入？

我有一个用例，其中应用程序的输入分批进入XML文件。例如，每晚的一批银行交易。我正在尝试查看是否可以使用事件采购创建事件日志。根据我目前阅读的内容，这些示例似乎基于用户驱动的输入（点击流，来自用户界面的更新等）。使用分布式日志机制（如Kafka）的事件采购是基于批处理/文件的输入的有效方法吗？下面是我想采取的方法：接受输入的文件/ XML 运行在内存的一些基本验证了一批。将批量输入转换为一系

1热度

1回答

什么是前端车队？

我偶然发现了这个术语，读取AWS文档，建议一些实例用于构建车队，但我不知道那是什么。什么是前端舰队？

0热度

1回答

模拟单个主机上的很多客户端套接字

这是应用程序出现的方式：UI Chat socket java application 嗨，大家好！我写了这个FXML java应用程序，这是一个简单的聊天。我想测试许多客户端模拟消息发送的并发性。换句话说，我想编写一个运行客户机类（扩展应用程序）和服务器之一的许多接口的代码。此时，客户端必须自动同时发送消息来测试并发性。我知道我不能在同一个JVM上执行许多客户端程序，所以还有另一种方法。这

1热度

2回答

为什么直接路由不能用于具有二级索引的分布式数据？

我读了下面的文章：Elements of Scale: Composing and Scaling Data platforms 我卡上理解下面的句子：的第二个指标是不是主键索引。这意味着数据将不会被索引中的值分区。通过哈希函数定向路由不再是一种选择。我们必须向所有机器广播请求。任何人都可以解释为什么这种情况？我是数据平台的初学者，但已经得到了很多，并且理解了这篇文章。具体来说，为什么我们不

-2热度

1回答

最好的情况

我想询问有关回答以下问题对于通过使每个进程发送一个值执行通信此MPI程序段，正，以环形模式转到其旁边的过程。也就是说，如果有N个进程，则进程0 将发送值为1，进程1将发送到2，依此类推。最后一个进程将其值发送到0.这些消息将全部并行发生。 if (my_rank%2 == 0) { MPI_SEND(msg,size,MPI_INT,(my_rank+1)%comm_sz,0,comm);

2热度

1回答

如何将事件分发到（Wildfly）集群中的所有节点？

我想在一个集群通知所有节点时，较长的运行过程中我JavaEE 7 Web应用程序的状态发生变化，让每一个节点都可以反过来有关变化通过WebSocket的通知他们的客户。我与Wildfly 10在集群环境中工作。什么JavaEE 7 API /编程模型或Wildfly服务将实现，今天的最佳做法？

0热度

1回答

代码如何更改（例如新功能）以部署比特币等应用程序，以及兼容性如何维持？

比特币如何部署新功能并管理不同版本的兼容性？例如，如果将新功能添加到比特币，那么如何部署和管理它？也就是说，当新版本可用时，网络上的每个人都不会被迫升级？如果不强制升级/更新，比特币如何在网络上管理不同版本的比特币？网络中是否有最低要求的版本？