适用于 Linux 和 Windows 的共享内存 IPC 解决方案

Question

下面是 Windows 上具有共享内存的 IPC 的简单而完美的解决方案，无需使用网络/套接字（具有 Windows 上烦人的限制）。 唯一的问题是它在 Linux 上不可移植：

避免使用标签参数将有助于保持代码在 Unix 和 Windows 之间可移植。

问题：Python 中是否有一种内置的简单方法，无需条件分支“如果平台是 Windows，如果平台是 Linux”即可拥有共享内存 mmap？

类似的东西

mm = sharedmemory(size=2_000_000_000, name="id1234")  # 2 GB,  id1234 is a global
                                                      # id available for all processes
mm.seek(1_000_000)
mm.write(b"hello")

在 Windows 上内部默认为 mmap.mmap(..., tagname="id1234") 并在 Linux 上使用 /dev/shm （甚至可能我不知道更好的解决方案？），以及Mac 上可能有其他东西，但不必为每个不同的操作系统手动处理这个问题。

---

仅适用于 Windows 的解决方案：

#server
import mmap, time
mm = mmap.mmap(-1, 1_000_000_000, tagname="foo")
while True:
    mm.seek(500_000_000)
    mm.write(str(time.time()).encode())
    mm.flush()
    time.sleep(1)
# client
import mmap, time
mm = mmap.mmap(-1, 1_000_000_000, tagname="foo")
while True:
    mm.seek(500_000_000)
    print(mm.read(128))
    time.sleep(1)

Answer 1

就我个人而言，这对我来说效果很好

选项 1： http://www.inspirel.com/yami4/

用于通用计算的YAMI4套件是一个多语言和多平台包。

几种操作系统：

示例代码

Microsoft Windows、POSIX（Linux、Max OS X、FreeBSD...）、QNX（具有本机 IPC 消息传递）、FreeRTOS、ThreadX、TI-RTOS。编程语言：C++、Ada、Java、.NET、Python、Wolfram。

选项 2：ZeroMq https://zeromq .org/

Answer 2

最简单的方法是使用版本>=3.8的python，它添加了内置的共享内存抽象，
它适用于 Windows 和 Linux
https://docs.python.org/3.10/library/multiprocessing.shared_memory。 html

代码看起来像这样：

Process #1:

  from multiprocessing import shared_memory
  # create=true to create a new shared memory instance, if it already exists with the same name, an exception is thrown
  shm_a = shared_memory.SharedMemory(name="example", create=True, size=10)
  shm_a.buf[:3] = bytearray([1, 2, 3])
  while True:
      do_smt()
  shm_a.close()

Process #2:

  from multiprocessing import shared_memory
  # create=false, use existing
  shm_a = shared_memory.SharedMemory(name="example", size=10)
  print(bytes(shm.buf[:3]))
  # [0x01, 0x02, 0x03]
  while True:
      do_smt()
  shm_a.close()

否则，我认为没有通用的好的解决方案，您将需要重新发明轮子:)