如何模拟工作负载

Question

我必须编写一个程序（perl、python 或 java）来模拟服务器上的工作负载，这样它需要 2 个参数：

1. Memory

2. Time

并且基于这些参数应该启动一个进程，在指定的时间内消耗指定的内存量。内存的最大值可以高达 50-100GB，时间可以长达 12-24 小时。

我不能使用 fork 或多线程，这个进程应该是单线程并且应该连续执行操作（如整数/浮点等）。我也不想进行任何 I/O 操作。

我能想到的最简单的方法是：

 1. while(timeSpent < timeLimit || memoryConsumed < memorySpecified){
 2.           if(memoryConsumed < ){
 3.                Add random number to ArrayList 
 4.           }else{
 5.                Multiply all numbers (Do some exception handling to prevent this from overflowing) 
 6.           }
 7. }

如果有更好的方法，请告诉我。

谢谢，

阿米特

Answer 1

像这样的 python 代码不适合您的需求吗？

import argparse
import datetime

def main():
    parser = argparse.ArgumentParser(description = "Consume memory and time.")
    parser.add_argument('memory', metavar = 'M', type=int, help = "memory (in megabytes) to consume")
    parser.add_argument('time', metavar = 'H', type=int, help = "time (in hours) to consume")
    args = parser.parse_args()

    data = bytearray(args.memory * 1000000)
    now = datetime.datetime.today()
    finish = now + datetime.timedelta(hours = args.time)
    while now < finish:
        for i in xrange(args.memory * 1000000):
             data[i] = now.second
        now = datetime.datetime.today()


if __name__ == '__main__':
    main()

Answer 2

我正在使用实用程序stressweather.ou.edu/~apw/projects/stress...尽管对其进行了一些调整以扩展我想要的功能..

感谢你们的帮助。

Answer 3

你的例子看起来很合理，至少第一步是这样。然而，有很多小细节需要正确处理：

• 你说你不想进行 I/O，这很好，但是在
  在现代机器中分配 50-100 GB，无论您是否会进行 I/O
  不管你想要与否（通过页面错误），所以你可能想要重新定义
  你的规格在那里。
• 另外，请考虑“对象”的粒度，许多
  科学计算应用程序无法摆脱“许多小物体”
  范例。您可能希望有一些参数来平衡
  “许多小物体”和“几个大物体”。
• 另外，通过乘法或相加或其他方法，将您的所有数据点相乘或相加
  容器中，您可能会生成一系列页面错误，这些错误可能
  操作系统很容易预测，因此在
  现实世界中，您可能想添加一些随机性
  遍历它。

这是一个比看起来更微妙的问题，很多人都想从简单的甚至标准的测试开始，例如：SETI 或光线追踪器。