performance - 构建高性能计算系统

As it currently stands, this question is not a good fit for our Q&A format. We expect answers to be supported by facts, references, or expertise, but this question will likely solicit debate, arguments, polling, or extended discussion. If you feel that this question can be improved and possibly reopened, visit the help center获取指导。

已关闭8年。

假设问题：

假设您有大量的数据和离线的算法过程，并且想要优化硬件。

假设您有50k可以处理。

什么是构建内部堆栈的最佳硬件设置，以最大程度地提高计算能力并为您提供灵活的内存来存储大型稀疏矩阵？

项目背景：科学研究，在大型数据集上进行机器学习，我希望获得最大的收益。

最佳答案

50K =不相关（除非这是政府拨款，您必须花这笔钱）。

了解确切问题=无价。

您想对稀疏矩阵执行运算，最好是尽可能快地执行。

您将用于对内存中的稀疏矩阵进行编码/解码的算法，将要对它们执行的操作以及诸如“是否可以一次将整个矩阵都放入内存中”之类的问题将使所有世界的差异。

除了稀疏数据外，您对进入这些矩阵的数据了解什么？您知道数据/空数据的比率吗？您知道最大尺寸的矩阵有多大，一次需要多少个最大存储空间？

您是否知道可以对矩阵算术进行任何优化？

我所知道的是，对典型PC上的内存中数据进行精心编写的哈希或二进制搜索-可能会胜过大型机上较少的磁盘绑定搜索算法。

您越了解数据，就越能优化使用数据。购买硬件以支持您所做的最后工作-首先分析并了解数据...

关于performance - 构建高性能计算系统，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/7032279/

上一篇：.net - 您可以在运行时更改ConnectionString配置值吗？

下一篇：emacs - 使用ELPA安装后，如何在Emacs中设置Clojure类路径？

相关文章：

performance - 最小化 Three.js 绘制的次数

javascript - jQuery - 脚本在 IE6 中应用缓慢 : Can anything be done?

mysql - 日期范围搜索

C - 未分配被释放的指针

C++ 参数更改为垃圾，即使使用常量调用也是如此

memory - 有理数向量的位编码

java - 使用Stack查看多行代码的余额

C++:在函数中使用调用者的局部变量是否安全？

performance - 无法写入散列连接临时文件 : No space left on device

flutter - 如何在 flutter 中将 child 定位在堆栈中？