WebAssembly核心编程[4]: Memory

Artech2024-02-05 9:56

由于Memory存储的是单纯的二进制字节，所以原则上我们可以用来它作为媒介，在wasm模块和数组程序之间传递任何类型的数据。在JavaScript API中，Memory通过WebAssembly.Memory类型表示，我们一般将它内部的缓冲区映射相应类型的数组进行处理。WebAssembly也提供了相应的指令来提供针对Memory的读、写、扩容等操作（源代码从这里下载）。

一、容量限制与扩容

二、内容的读写

三、内容初始化

四、多Memory支持

五、批量内存处理

一、容量限制与扩容

Memory本质上一个可以扩容的内存缓冲区，在初始化的时候我们必需指定该缓冲器的初始大小，单位为Page（64K）。如果没有指定最大允许的大小，意味着它可以无限"扩容"。WebAssembly.Memory的实例方法grow用来扩容，作为参数的整数表示扩大的Page数量，其返回值表示扩容之前的容量。在如下这个演示实例中，我们在一个Web页面index.html初始化的时候创建了一个WebAssembly.Memory对象，并将其初始和最大尺寸设置为1和3。

<html>
    <head></head>
    <body>
        <script>
            var memory= new WebAssembly.Memory({ initial: 1,  maximum: 3});
            var grow = (size) => {
                try{
                    console.log(`memory.grow(${size}) = ${memory.grow(size)}`);
                }
                catch(error){
                    console.log(error);
                }
            };
            grow(1);
            grow(1);
            grow(1);
        </script>
    </body>
</html>

grow函数对这个WebAssembly.Memory试试扩容。我们先后3次调用次函数（增扩的容量为1），并将其返回值打印到控制台上。从如下的输出可以看出，创建的Memory的初始容量为1，经过两次扩容后，它的容量达到运行的最大容量3，进而导致第三次扩容失败。

image

针对Memory的扩容也利用利用wasm的memory.grow指令来完成，该指令的输入参数依然是扩大的容量，返回的依然是扩容前的大小。如果超过设定的最大容量，该指令会返回-1。wasm还提供了memory.size指令返回Memory当前的容量。在如下这个wat文件（app.wat）中，我们依然定义了一个初始和最大容量为1和3的Memory，两个导出的函数size和grow分别返回它当前容量和对它实施扩容。

(http://search.microsoft.com/default.asp?so=RECCNT&siteid=us%2Fdev&p=1&nq=NEW&qu=module&IntlSearch=&boolean=PHRASE&ig=01&i=09&i=99
   (memory 1 3)
   (func (export "size") (result i32)
      (memory.http://search.microsoft.com/default.asp?so=RECCNT&siteid=us%2Fdev&p=1&nq=NEW&qu=size&IntlSearch=&boolean=PHRASE&ig=01&i=09&i=99)
   )
   (func (export "grow") (param $http://search.microsoft.com/default.asp?so=RECCNT&siteid=us%2Fdev&p=1&nq=NEW&qu=size&IntlSearch=&boolean=PHRASE&ig=01&i=09&i=99 i32) (result i32)
      (memory.grow (http://search.microsoft.com/default.asp?so=RECCNT&siteid=us%2Fdev&p=1&nq=NEW&qu=local&IntlSearch=&boolean=PHRASE&ig=01&i=09&i=99.http://search.microsoft.com/default.asp?so=RECCNT&siteid=us%2Fdev&p=1&nq=NEW&qu=get&IntlSearch=&boolean=PHRASE&ig=01&i=09&i=99 $http://search.microsoft.com/default.asp?so=RECCNT&siteid=us%2Fdev&p=1&nq=NEW&qu=size&IntlSearch=&boolean=PHRASE&ig=01&i=09&i=99))
   )
)

在作为宿主的index.html页面中，我们调用导出的grow函数（增扩的容量为1）对Memory实施3次扩容，并调用size函数输出它当前的容量。

<html>
    <head></head>
    <body>
        <script>
            var memory= new WebAssembly.Memory({ initial: 1,  maximum: 3});
            WebAssembly
                .instantiateStreaming(fetch("app.wasm"))
                .then((results) => {
                    var exports = results.instance.exports;
                    var grow = (size)=> console.log(`memory.grow(${size}) = ${exports.grow(size)}`);
                    grow(1);
                    grow(1);
                    grow(1);
                    console.log(`memory.size() = ${exports.size()}`);
        });
        </script>
    </body>
</html>

从如下的输出可以看出，前两次成功扩容将Memory的容量增扩到最大容量3，导致最后一次扩容失败，返回-1。

image

二、内容的读写

我们利用Memory对其管理的缓冲区按照纯字节的形式进行读写。WebAssembly针对具体的数据类型（i32/i64/f32/f64）提供一系列的load和store指令读写Memory的内容，具体的指令如下（8/16/32代表读写位数，s和u分别表示有符号和无符号整数）：

  • {i32|i64|f32|f64}.load
  • {i32|i64}.load8_s
  • {i32|i64}.load8_u
  • {i32|i64}.load16_s
  • {i32|i64}.load16_u
  • {i32|i64}.load32_s
  • {i32|i64}.load32_u
  • {i32|i64|f32|f64}.store
  • {i32|i64}}.store8
  • {i32|i64}.store16
  • i64.store32

如下所示的WAT程序(app.wat)文件利用两个导出的函数store和load对导入的Memory实施写入和读取。我们假设存储的数据类型均为i32，所以store函数在执行i32.store指令的时候，代表写入序号的第一个参数需要乘以4，作为指令的第一个参数（代表写入的起始位置）。load函数在执行i32.load指令的时候也需要做类似的处理。

`(module
   (memory (`import` "`imports`" "`memory`") 1)
   (func (export "`store`") (param $index i32) (param $value i32)
      (i32.store (i32.`mul` (local.get $index) (i32.`const` 4)) (local.get $value))
   )
   (func (export "`load`") (param $index i32) (result i32)
      (i32.load (i32.`mul` (local.get $index) (i32.`const` 4)))
   )
)`

作为数组应用的JavaScript程序可以将Memory对象的缓冲区映射为指定元素类型的数组，并以数组的形式对其进行读写。在我们的演示实例中，作为宿主应用的index.html页面调用构造函数创建了一个WebAssembly.Memory对象，并将其buffer属性对应的缓冲区映射成一个Int32Array对象，并将前三个元素赋值为1、2和3。我们将Memory对象导入到加载的app.wasm模块中后，调用导出的load函数以i32类型将Memory中存储的12个字节读出来。

复制代码 
``<html>
    <head></head>
    <body>
        <script>
            ``var`` memory= ``new`` WebAssembly.Memory({ initial: 1,  maximum: 3});
            ``var`` array = ``new`` Int32``Array``(memory.buffer);``
``            array[0] = 1;
            array[1] = 2;
            array[2] = 3;
            WebAssembly
                .instantiateStreaming(fetch("``app.wasm``"), {"``imports``":{"``memory``":memory}})
                .then((results) => {
                    ``var`` exports = results.instance.exports;


                    console.log(`load (0) = ${exports.load(0)}`);
                    console.log(`load (1) = ${exports.load(1)}`);
                    console.log(`load (2) = ${exports.load(2)}`);
        });
        </script>
    </body>
</html>``

从如下所示的三个输出结果可以看出，wasm模块中读取的内容与宿主应用设置的内容是一致的。

image

上面演示了wasm模块读取宿主应用写入Memory的内容，我们接下来通过修改index.html的内容调用导出的store函数往Memory中写入相同的内容，然后在宿主JavaScript程序中利用映射的数组将其读出来。

``<html>
    <head></head>
    <body>
        <script>
            ``var`` memory= ``new`` WebAssembly.Memory({ initial: 1,  maximum: 3});
            ``var`` array = ``new`` Int32``Array``(memory.buffer);
            WebAssembly
                .instantiateStreaming(fetch("``app.wasm``"), {"``imports``":{"``memory``":memory}})
                .then((results) => {
                    ``var`` exports = results.instance.exports;
                    exports.store(0, 1);
                    exports.store(1, 2);
                    exports.store(2, 3);

                    console.log(`array[0] = ${array[0]}`);
                    console.log(`array[1] = ${array[0]}`);
                    console.log(`array[2] = ${array[0]}`);
        });
        </script>
    </body>
</html>``

宿主程序从Memory中读取的内容体现在如下的输出结果中。

image

三、内容初始化

store指令一次只能往Memory对象的缓存区写入指定数据对象承载的全部或者部分字节，如果需要在初始化一长串字节（比如一大段文本），可以将其存储到data section中，data section会与Memory对象自动关联。在如下所示的WAT程序中（app.wat），我们声明了一个data section，并用它来存储一段文本（Hello World!），文本经过UTF-8编码后的字节将存储在此区域中。data指令的第一个参数 （i32.const 0）表示存储的起始位置。

`(module
   (data (i32.`const` 0) "`Hello, World!`")
   (memory (export "`memory`") 1)
)`

上面的WAT程序还定义并导出了一个Memory对象，利用它与data section的自动映射机制，我们可以利用Memory来读取存储的文本。在如下所示作为宿主应用的index.html中，我们提取出导出的Memory对象，并将其缓冲区映射为一个Int8Array对象，然后利用TextDescorder将其解码成文本并输出。

`<html>
    <head></head>
    <body>
        <script>
            WebAssembly
                .instantiateStreaming(fetch("`app.wasm`"))
                .then((results) => {
                    `var` exports = results.instance.exports;
                    `var` array = `new` Int8Array(exports.memory.buffer, 0, 13);`
`                    console.log(`new` TextDecoder().decode(array))
        });
        </script>
    </body>
</html>`

从如下所示的输出结果可以看出，我们利用Memory成功读取了存储在data section的文本。

image

四、多Memory支持

WebAssembly目前的正式版本只支持"单Memory模式"，也就是说一个wasm只维护一个单一的Memory对象。虽然"多Memory"目前还处于实验阶段，但是目前主流的浏览器还是支持的，WAT程序中针对多Memory的程序又如何编写呢？在如下这个演示程序中，我们定义了4个Memory，并分别将其命名为$m0、$m1、$m2和$m3，其中前两个为导入对象，后两个为导出对象。我们将这4个Memory对象的初始化容量分别设置为1、2、3、4，导出的size函数用来返回指定Memory对象当前的容量。

`(module
  (memory $m0 (`import` "`imports`" "`memory1`") 1)
  (memory $m1 (`import` "`imports`" "`memory2`") 2)
  (memory $m2 (export "`memory3`") 3)
  (memory $m3 (export "`memory4`") 4)

  (func (export "`size`") (param $memory i32) (result i32)
      (local $size i32)
      (local.set $size (memory.size `$m0`))

      (i32.eq (local.get $memory) (i32.`const` 1))
      if
         (local.set $size (memory.size `$m1`))
      end

      (i32.eq (local.get $memory) (i32.`const` 2))
      if
         (local.set $size (memory.size `$m2`))
      end

      (i32.eq (local.get $memory) (i32.`const` 3))
      if
         (local.set $size (memory.size `$m3`))
      end

      (local.get $size)
  )
)`

size函数利用第一个参数（0、1、2、3）来确定具体的Memory对象，在执行memory.size的时候， 我们会附加上Memory的命名（默认为第一个Memory）。除了指定给定的别名，也可以按照如下的方式使用Memory的序号（0、1、2和3），其他指令的使用与之类似。

`(module
  (memory (`import` "`imports`" "`memory1`") 1)
  (memory (`import` "`imports`" "`memory2`") 2)
  (memory (export "`memory3`") 3)
  (memory (export "`memory4`") 4)

  (func (export "`size`") (param $memory i32) (result i32)
      (local $size i32)
      (local.set $size (memory.size `0`))

      (i32.eq (local.get $memory) (i32.`const` 1))
      if
         (local.set $size (memory.size `1`))
      end

      (i32.eq (local.get $memory) (i32.`const` 2))
      if
         (local.set $size (memory.size `2`))
      end

      (i32.eq (local.get $memory) (i32.`const` 3))
      if
         (local.set $size (memory.size `3`))
      end

      (local.get $size)
  )
)`

在执行wat2wasm对app.wat进行编译的时候，我们需要手工添加命令行开关--enable-multi-memory以提供针对"多Memory"的支持（wat2wasm app.wat -o app.wasm --enable-multi-memory）。

``<html>
    <head></head>
    <body>
        <``div`` id="``container``"></``div``>
        <script>
           var memory1 = new WebAssembly.Memory({initial:1});
           var memory2 = new WebAssembly.Memory({initial:2});
            WebAssembly
                .instantiateStreaming(fetch("``app.wasm``"), {"``imports``":{"``memory1``":memory1, "``memory2``":memory2}})
                .then((results) => {
                    var exports = results.``instance``.exports;

                    console.log(`memory1.size = ${exports.size(1)}`);
                    console.log(`memory2.size = ${exports.size(2)}`);
                    console.log(`memory3.size = ${exports.size(3)}`);
                    console.log(`memory4.size = ${exports.size(4)}`);
        });
        </script>
    </body>
</html>``

在如上所示的作为宿主的index.html中，我们利用调用导出的size函数将四个Memory的初始容量输出到控制台上，具体的输出结果如下所示。

image

利用data section对Memory的填充同样也支持多Memory模式。如下面的代码片段所示，我们在app.wat中定义并导出了三个Memory，随后定义的三个data section通过后面指定的序号（默认为0）。我们将三个data section填充为对应的文本"foo"、"bar"和"baz"。

`(module
  (memory (export  "`memory1`") 1)
  (memory (export  "`memory2`") 1)
  (memory (export  "`memory3`") 1)
  (data (i32.`const` 0) "`foo`")
  (data 1 (i32.`const` 0) "`bar`")
  (data 2 (i32.`const` 0) "`baz`")
)`

作为宿主的index.html在获得导出的Memory对象后，同样将它们的缓冲区映射为Int8Array对象，并将其解码成字符串并输出到控制台上。

<html>``
    ``<head></head>``
    ``<body>``
        ``<div`` ``id``=``"container"></div>``
        ``<script>``
            WebAssembly
                .instantiateStreaming(fetch("app.wasm"))
                .then((results) => {
                    var exports = results.instance.exports;
                    var decoder = new TextDecoder();

                    var array = new Int8Array(exports.memory1.buffer, 0, 3);
                    console.log(`memory1: ${decoder.decode(array)}`);

                    array = new Int8Array(exports.memory2.buffer, 0, 3);
                    console.log(`memory2: ${decoder.decode(array)}`);

                    array = new Int8Array(exports.memory3.buffer, 0, 3);
                    console.log(`memory3: ${decoder.decode(array)}`);
        });
        ``</script>``
    ``</body>``
``</html>

从三个导出的Memory中得到的字符串按照如下的形式输出到控制台上，可以看出它们与三个data section存储的内容是一致的。

image

五、批量缓冲处理

针对Memory的操作本质上就是针对字节缓冲区的操作，但是就目前发布的正式版本来说，相关的缓冲区操作还有待完善，不过很多都在"提案"里面了，其中就包括针对bulk memory operations。其中涉及如下一些有用的指令，它们已经在Web Assembly最新的spec草案里了，而且主流的浏览器也提供了部分支持。

  • memory.init: 从指定的data section中指定一段内存片段来初始化Memory；
  • memory.fill: 利用指定的字节内容来填充Memory的一段连续的缓冲区；
  • memory.copy：连续内存片段的拷贝；

接下来我们来演示一下针对memory.fill指令的应用。在如下所示的WAT程序中（app.wat），我们定义并导出了一个Memory对象。导出的fill函数调用memory.fill指令往导出的这个Memory指定的位置填充指定数量（$count）的值（$value）。

`(module
  (memory (export "`memory`") 1)
  (func (export "`fill`") (param $offset i32) (param $value i32)  (param $count i32)
    (memory.fill (local.get $offset) (local.get $value) (local.get $count))
  )
)
`

在作为宿主的index.html页面中，我们两次调用导出的fill函数从Memory缓冲区的初始位置开始填充两个值255和266。

``<html>
    <head></head>
    <body>
        <div id="``container``"></div>
        <script>
            WebAssembly
                .instantiateStreaming(fetch("``app.wasm``"))
                .then((results) => {
                    var exports = results.instance.exports;

                    exports.fill(0,255,2);
                    var array = ``new`` Int8Array(exports.memory.buffer, 0, 8);
                    array.forEach((``value``, index, _)=> console.log(`[${index}] = ${``value``}`));

                    exports.fill(0,256,2);
                    var array = ``new`` Int8Array(exports.memory.buffer, 0, 8);
                    array.forEach((``value``, index, _)=> console.log(`[${index}] = ${``value``}`));
        });
        </script>
    </body>
</html>``

我们将缓冲区映射为一个Int8Array对象，并将其前8个字节输出到控制台上。作为memory.fill指令的第二个参数，表示填充值得数据类型应该是Byte，但是wasm支持的整数类型只有i32和i64，所以这里的参数类型只能表示为i32，但是该指令只会使用指定值的低8位。这一点可以从输出结果得到印证：第一次调用指定的值是255（00 00 00 FF，转换成Int8就是-1），最终只会填充前面2个字节（FF FF）。第二次调用指定的值为256（00 00 01 00），所以填充的前两个字节为00 00。

image
相关推荐
亚瑟-灰太狼11 天前
scudo基础学习
内存·memory
m0_7482384212 天前
【Vue3】前端使用 FFmpeg.wasm 完成用户视频录制，并对视频进行压缩处理
前端·ffmpeg·wasm
芭拉拉小魔仙19 天前
浏览器数据存储方法深度剖析：LocalStorage、IndexedDB、Cookies、OPFS 与 WASM - SQLite
数据库·sqlite·wasm
wjcroom22 天前
【Rust在WASM中实现pdf文件的生成】
rust·pdf·wasm
小诸葛的博客24 天前
istio结合wasm插件的实际应用
云原生·wasm·istio
小诸葛的博客24 天前
istio中wasm插件是做什么的？
云原生·wasm·istio
Huazzi.1 个月前
区块链中的wasm合约是什么？
区块链·wasm
Liigo1 个月前
初次体验Tauri和Sycamore（1）
rust·electron·gui·tauri·wasm·sycamore
tackchen1 个月前
使用 WebWorker 和 Rust WebAssembly 构建的生命游戏
游戏·rust·wasm
得物技术1 个月前
基于IM场景下的Wasm初探：提升Web应用性能｜得物技术
rust·web·wasm
热门推荐
01〔AI 绘画〕Stable Diffusion 之 解决绘制多人或面部很小的人物时面部崩坏问题 篇02ARM学习（31）编译器对overlay方式的支持03玄机平台应急响应—webshell查杀04DisplayPort AltMode On Type-c协议_Ver2.0(学习笔记)05校验 GPT-4 真实性的三个经典问题：快速区分 GPT-3.5 与 GPT-4，并提供免费测试网站06Docker 夺命连环 15 问076个主流的工业3D管道设计软件08基于大语言模型（LLM）的合成数据生成、策展和评估的综述09(欧拉)openEuler系统添加网卡文件配置流程、(欧拉)openEuler系统手动配置ipv6地址流程、(欧拉)openEuler系统网络管理说明10树莓派 5 AI 套件（Hailo-8L）使用教程