掘金 后端 ( ) • 2021-06-22 15:28
.markdown-body{word-break:break-word;line-height:1.75;font-weight:400;font-size:15px;overflow-x:hidden;color:#333}.markdown-body h1,.markdown-body h2,.markdown-body h3,.markdown-body h4,.markdown-body h5,.markdown-body h6{line-height:1.5;margin-top:35px;margin-bottom:10px;padding-bottom:5px}.markdown-body h1{font-size:30px;margin-bottom:5px}.markdown-body h2{padding-bottom:12px;font-size:24px;border-bottom:1px solid #ececec}.markdown-body h3{font-size:18px;padding-bottom:0}.markdown-body h4{font-size:16px}.markdown-body h5{font-size:15px}.markdown-body h6{margin-top:5px}.markdown-body p{line-height:inherit;margin-top:22px;margin-bottom:22px}.markdown-body img{max-width:100%}.markdown-body hr{border:none;border-top:1px solid #ddd;margin-top:32px;margin-bottom:32px}.markdown-body code{word-break:break-word;border-radius:2px;overflow-x:auto;background-color:#fff5f5;color:#ff502c;font-size:.87em;padding:.065em .4em}.markdown-body code,.markdown-body pre{font-family:Menlo,Monaco,Consolas,Courier New,monospace}.markdown-body pre{overflow:auto;position:relative;line-height:1.75}.markdown-body pre>code{font-size:12px;padding:15px 12px;margin:0;word-break:normal;display:block;overflow-x:auto;color:#333;background:#f8f8f8}.markdown-body a{text-decoration:none;color:#0269c8;border-bottom:1px solid #d1e9ff}.markdown-body a:active,.markdown-body a:hover{color:#275b8c}.markdown-body table{display:inline-block!important;font-size:12px;width:auto;max-width:100%;overflow:auto;border:1px solid #f6f6f6}.markdown-body thead{background:#f6f6f6;color:#000;text-align:left}.markdown-body tr:nth-child(2n){background-color:#fcfcfc}.markdown-body td,.markdown-body th{padding:12px 7px;line-height:24px}.markdown-body td{min-width:120px}.markdown-body blockquote{color:#666;padding:1px 23px;margin:22px 0;border-left:4px solid #cbcbcb;background-color:#f8f8f8}.markdown-body blockquote:after{display:block;content:""}.markdown-body blockquote>p{margin:10px 0}.markdown-body ol,.markdown-body ul{padding-left:28px}.markdown-body ol li,.markdown-body ul li{margin-bottom:0;list-style:inherit}.markdown-body ol li .task-list-item,.markdown-body ul li .task-list-item{list-style:none}.markdown-body ol li .task-list-item ol,.markdown-body ol li .task-list-item ul,.markdown-body ul li .task-list-item ol,.markdown-body ul li .task-list-item ul{margin-top:0}.markdown-body ol ol,.markdown-body ol ul,.markdown-body ul ol,.markdown-body ul ul{margin-top:3px}.markdown-body ol li{padding-left:6px}.markdown-body .contains-task-list{padding-left:0}.markdown-body .task-list-item{list-style:none}@media (max-width:720px){.markdown-body h1{font-size:24px}.markdown-body h2{font-size:20px}.markdown-body h3{font-size:18px}}

SharedMemory是python3.8新增加的特性,主要使用内存共享,使用非常方便

使用文档链接:docs.python.org/zh-cn/3/lib…

我们可以先新建一个对象试试:

from multiprocessing import shared_memory
shm_a = shared_memory.SharedMemory(create=True, size=10)
复制代码

这个方法新开辟一个空间储存内存块,我们还可以看看里面的内容:

>>> shm_a
SharedMemory('psm_d5082db5', size=10)
复制代码

我们可以看到实际上是建立一个大小为10的共享内存卡,名字为psm_d5082db5

当然名字我们可以直接打印:

>>> shm_a.name
'psm_b370a3a5'
复制代码

我们还可以看看究竟这个内存块里面存的什么内容,使用buf就行,里面的内容实际初始化全为0

>>> shm_a.buf

>>> list(shm_a.buf)
[0, 0, 0, 0, 0, 0, 0, 0, 0, 0]
复制代码

我们接下来,我们还可以直接新建一个一样的的内存块:

shm_b = shared_memory.SharedMemory(shm_a.name)
复制代码

现在我们思考一个问题,这两个内存块是同一个内存块吗?

我们可以看看答案:

>>> shm_a is shm_b
False
>>> shm_a==shm_b
False
复制代码

答案居然是不是同一个内存块,但是现在我们可以看看里面存的内容是不是一样的呢:

>>> shm_b.buf is shm_b.buf
True
>>> shm_b.buf==shm_b.buf
True
复制代码

现在内容又是一样的了,这是怎么一回事呢?

我们可以看一个实验:

>>> id(shm_a)
139891162754352
>>> id(shm_b)
139891162754496
复制代码

结果是shm_a和shm_b本来就是不同的东西,地址都不同

那为啥内容是一样的呢,我们可以画一张图:

image.png

 我们从图上看出,shm_a和shm_b是共用的一份数据,并不是是一个东西,因为他们三者的地址根本不是一样的,但是shm_a和shm_b使用的是一个内存块

我们再看看shm_a到底是什么类型,虽然看起来很像list,但是并不是:

>>> type( shm_a.buf)

复制代码

跟list类似,我们还有使用切片的方式获取数据:

>>> shm_a.buf[-1]
0
>>> shm_a.buf[-1]=2
>>> list(shm_a.buf)
[0, 0, 0, 0, 0, 0, 0, 0, 0, 2]
>>> list(shm_b.buf)
[0, 0, 0, 0, 0, 0, 0, 0, 0, 2]
复制代码

至此,我们还没将共享的概念使用出来,因为我们我们最终需要在另外的进程使用这个数据,假如你在一个终端新建这些数据,但是你可以直接在另外一个终端拿到这个数据

我们可以示例一下:

我们在另外一个终端使用之前建立的内存块:

>>> existing_shm = shared_memory.SharedMemory('psm_b370a3a5')
>>> list(existing_shm.buf)
[0, 0, 0, 0, 0, 0, 0, 0, 0, 0]
复制代码

可以看到,我们可以直接拿到