深入了解以太坊虚拟机
朋友一起走
发表于 2022-12-23 04:07:17
179
0
0
string, bytes32, byte[], bytes之间的区别是什么?
该在什么地方使用哪个类型?
将 string 转换成bytes时会怎么样?可以转换成byte[]吗?
( T* F' v1 [+ @& D& c9 p3 G
它们的存储成本是多少?2 Q' l4 w) u' V8 B1 K; E; [& r
EVM是如何存储映射( mappings)的?
为什么不能删除一个映射?6 Z+ t7 s J; ?: \/ j% c% {
/ H6 I! w9 Y* w- b& [
可以有映射的映射吗?(可以,但是怎样映射?)
+ L2 }- N4 c1 t2 [% u( K& Z1 Q
为什么存在存储映射,但是却没有内存映射?5 ^% b9 L$ @6 R% S0 M; G% n
编译的合约在EVM看来是什么样子的?
合约是如何创建的?$ e+ \; D& C1 W- K- ~$ C* v, V G
. G& I! M9 U8 h. q
到底什么是构造器?
什么是 fallback 函数?, t {8 j5 T- I+ X& f
( F' Z. m; l+ X+ Q
, Z3 U) v5 z/ A, t U
我觉得学习在以太坊虚拟机(EVM)上运行的类似Solidity 高级语言是一种很好的投资,有几个原因:
Solidity不是最后一种语言。更好的EVM语言正在到来。(拜托?)EVM是一个数据库引擎。要理解智能合约是如何以任意EVM语言来工作的,就必须要明白数据是如何被组织的,被存储的,以及如何被操作的。知道如何成为贡献者。以太坊的工具链还处于早期,理解EVM可以帮助你实现一个超棒的工具给自己和其他人使用。智力的挑战。EVM可以让你有个很好的理由在密码学、数据结构、编程语言设计的交集之间进行翱翔。在这个系列的文章中,我会拆开一个简单的Solidity合约,来让大家明白它是如何以EVM字节码(bytecode)来运行的。) ^- l. t" Y4 V* v0 I6 |* t; i. c
我希望能够学习以及会书写的文章大纲:
EVM字节码的基础认识不同类型(映射,数组)是如何表示的当一个新合约创建之后会发生什么当一个方法被调用时会发生什么ABI如何桥接不同的EVM语言我的最终目标是整体的理解一个编译的Solidity合约。让我们从阅读一些基本的EVM字节码开始。
1 m+ _- t7 A* {: c; t7 @3 `8 y7 V
EVM指令集将是一个比较有帮助的参考。
一个简单的合约
我们的第一个合约有一个构造器和一个状态变量:4 g9 ~3 t& ^/ x1 ?# y
// c1.sol/ b' a" g% s5 e+ K
pragma solidity ^0.4.11;, C$ V! c2 A+ a4 u( M4 b
contract C {
uint256 a;7 e' w9 m% ` e) I# h3 A
function C() {
a = 1;
}
}3 u3 \+ n# O; T d5 A3 D) _: k
用solc来编译此合约:* {) L& n' A3 l: _7 o2 g% z
$ solc --bin --asm c1.sol
======= c1.sol:C =======
EVM assembly:: L, g0 }1 y" |9 w: j* ^1 ~8 w" Q
/* "c1.sol":26:94 contract C {... */
mstore(0x40, 0x60): B# L3 D, C$ M) `( ^. b# {
/* "c1.sol":59:92 function C() {... */: ~7 v$ J" H# J- K. S$ X5 t& q
jumpi(tag_1, iszero(callvalue))- j2 Y) |: ]" ^1 A% ^
0x0# U/ S R! Z$ D/ O
dup1# u: J* {8 a7 t7 \ u
revert
tag_1:
tag_2:6 I- I- r5 s7 Y7 V2 r1 Z! ~
/* "c1.sol":84:85 1 */
0x17 k6 w; f( s- E$ k5 D' X) w+ u3 d
/* "c1.sol":80:81 a */% ?/ v1 N' c2 A0 z( [2 y. _
0x0
/* "c1.sol":80:85 a = 1 */7 x8 c) {' a' Y# v( b
dup2
swap12 Q$ i& U; W) b( e+ z
sstore
pop; G$ p# ~6 _$ U
/* "c1.sol":59:92 function C() {... */
tag_3:
/* "c1.sol":26:94 contract C {... */
tag_4:# L1 Q3 t( U- [' i6 I* i H# i
dataSize(sub_0)
dup1# @# R& n: E% v! R5 n% r7 v+ k' c
dataOffset(sub_0) M$ |6 e0 z! j& S
0x0) ^. Z9 x. V. ~
codecopy
0x0
return
stop% I* [6 [- r Y. U, y
sub_0: assembly {
/* "c1.sol":26:94 contract C {... */2 W% r2 G% y: o! _$ J" {
mstore(0x40, 0x60)/ g# a/ U5 e- P& L) Z
tag_1:
0x0
dup1
revert# k: }$ T2 Z7 n
auxdata: 0xa165627a7a72305820af3193f6fd31031a0e0d2de1ad2c27352b1ce081b4f3c92b5650ca4dd542bb770029
}
Binary:
60606040523415600e57600080fd5b5b60016000819055505b5b60368060266000396000f30060606040525b600080fd00a165627a7a72305820af3193f6fd31031a0e0d2de1ad2c27352b1ce081b4f3c92b5650ca4dd542bb770029) n- p2 T( C: |' c* ^7 {* e3 r
6060604052...这串数字就是EVM实际运行的字节码。
一小步一小步的来6 N/ R) [0 X" h( y$ I# Z
上面一半的编译汇编是大多数Solidity程序中都会存在的样板语句。我们稍后再来看这些。现在,我们来看看合约中独特的部分,简单的存储变量赋值:
a = 1' E6 [! W5 `+ n$ z( z: s# p
代表这个赋值的字节码是6001600081905550。我们把它拆成一行一条指令:) ` t5 t6 b+ Z& e- p, Q0 a
60 01
60 003 S* b/ }/ ~# F4 |* ]0 v
81
90
553 x( [( L8 A! `. a. l' ^
50
EVM本质上就是一个循环,从上到下的执行每一条命令。让我们用相应的字节码来注释汇编代码(缩进到标签tag_2下),来更好的看看他们之间的关联:
tag_2:! ]% F; t4 F' \; g% r* P
// 60 01" P& N( b2 X0 p% r
0x1
// 60 002 P9 w, ^/ D5 T- M
0x0& ?+ U* b+ r4 b0 ^5 c
// 81
dup2
// 90- R6 V( o9 q1 V0 m
swap1, V) O. p+ ?+ A, T
// 55 M3 Z' A& w1 E& S
sstore/ G" n0 N) ]2 z! G- _1 j/ F
// 50
pop
注意0x1在汇编代码中实际上是push(0x1)的速记。这条指令将数值1压入栈中。" x0 p5 L) O6 r+ `; k9 ~2 r! `8 F
只是盯着它依然很难明白到底发生了什么,不过不用担心,一行一行的模拟EVM是比较简单的。6 O' \& l& [( A/ d2 x- b- ?
模拟EVM
EVM是个堆栈机器。指令可能会使用栈上的数值作为参数,也会将值作为结果压入栈中。让我们来思考一下add操作。
假设栈上有两个值:
[1 2]
当EVM看见了add,它会将栈顶的2项相加,然后将答案压入栈中,结果是:
[3]1 c& y e% {1 J3 }$ q
接下来,我们用[]符号来标识栈:( F$ Y, u7 G# S( A6 W* d* f
// 空栈) i) ~& Z/ H8 w
stack: []# D0 ^- Q3 T+ U+ A
// 有3个数据的栈,栈顶项为3,栈底项为1
stack: [3 2 1]
用{}符号来标识合约存储器:+ {/ n* v/ ?8 b9 ~2 L
// 空存储
store: {}: e) Z9 ?, G) r% W
// 数值0x1被保存在0x0的位置上
store: { 0x0 => 0x1 }
现在让我们来看看真正的字节码。我们将会像EVM那样来模拟6001600081905550字节序列,并打印出每条指令的机器状态:% A3 J; `6 H2 f* ~; X; V5 M5 d
// 60 01:将1压入栈中2 D8 q& U2 g: a
0x19 n- [ w/ f6 d t+ y
stack: [0x1]
// 60 00: 将0压入栈中! J. b9 Q) E( M) r( ?! q
0x0
stack: [0x0 0x1]
// 81: 复制栈中的第二项8 m# l* x+ q4 o2 [: @/ {
dup2
stack: [0x1 0x0 0x1]' D6 D. }( V5 c( [) [, {8 [! c4 [
// 90: 交换栈顶的两项数据
swap1
stack: [0x0 0x1 0x1]
// 55: 将数值0x01存储在0x0的位置上/ N) ]0 r+ `* P$ M% x9 ^8 s8 x
// 这个操作会消耗栈顶两项数据
sstore
stack: [0x1] a4 {2 H6 v+ J! R
store: { 0x0 => 0x1 }+ z% ]9 x0 c' k
// 50: pop (丢弃栈顶数据)0 _2 g* m* C" h, E5 M& w* D" W. Z
pop/ f# O2 e. _+ | W+ B/ T* _* J b
stack: []& W a% J# h4 ?
store: { 0x0 => 0x1 }
最后,栈就为空栈,而存储器里面有一项数据。
值得注意的是Solidity已经决定将状态变量uint256 a保存在0x0的位置上。其他语言完全可以选择将状态变量存储在其他的任何位置上。+ L5 ]) w" F8 a. n' Z
6001600081905550字节序列在本质上用EVM的操作伪代码来表示就是:
// a = 1% }$ m9 H/ B. _! ]
sstore(0x0, 0x1) G7 Q! M; U; r$ G" ~, ^* ]
仔细观察,你就会发现dup2,swap1,pop都是多余的,汇编代码可以更简单一些:: L' X2 ^; p# d, ~+ L
0x1
0x0
sstore
你可以模拟上面的3条指令,然后会发现他们的机器状态结果都是一样的:
stack: []/ e9 u7 Q1 H$ m, j
store: { 0x0 => 0x1 }
两个存储变量3 m% a* l" K) ^
让我们再额外的增加一个相同类型的存储变量:1 T; n5 \: B3 v7 S) O
// c2.sol9 I# i) M1 W& D3 [1 L& `+ Y; C
pragma solidity ^0.4.11;2 I+ v4 ]$ G1 w; b
contract C {
uint256 a;
uint256 b;
function C() {
a = 1;
b = 2;
}
}
编译之后,主要来看tag_2:
$ solc --bin --asm c2.sol
//前面的代码忽略了
tag_2:
/* "c2.sol":99:100 1 */+ @! E( v+ o1 A. g, Y
0x1
/* "c2.sol":95:96 a */. G% u" J- o& f9 C
0x0
/* "c2.sol":95:100 a = 1 */$ W' Q; [4 N7 Y! n9 t
dup22 v1 o+ ~; p8 \% P( [9 {
swap1% A: _3 y( {* w" C' p- [
sstore
pop
/* "c2.sol":112:113 2 */# X9 |' [* T1 }& t: d
0x22 ]3 _' K. }( G' W
/* "c2.sol":108:109 b */
0x1
/* "c2.sol":108:113 b = 2 */ ?7 D# b9 S$ N3 p5 S9 [0 j: x
dup2
swap1
sstore; z% ]& X$ z$ h+ [* e1 \7 _* K4 d4 m2 c
pop
汇编的伪代码:4 R5 r2 q5 ~* S% t' K% W
// a = 12 r0 d% F6 w: [, g1 |
sstore(0x0, 0x1)
// b = 27 n4 ?4 Q1 w6 U
sstore(0x1, 0x2)
我们可以看到两个存储变量的存储位置是依次排列的,a在0x0的位置而b在0x1的位置。8 ~( X( a% z" U% `# M
存储打包
每个存储槽都可以存储32个字节。如果一个变量只需要16个字节但是使用全部的32个字节会很浪费。Solidity为了高效存储,提供了一个优化方案:如果可以的话,就将两个小一点的数据类型进行打包然后存储在一个存储槽中。2 c' x# i/ ]4 g- C9 O/ V8 f# x
我们将a和b修改成16字节的变量:/ ]2 \6 g, s- i" e
pragma solidity ^0.4.11;
contract C {" u9 {6 m8 T8 a* s$ T1 ]3 Q
uint128 a;
uint128 b;
function C() {
a = 1;
b = 2;; ^; D7 M; c+ t* b# T0 \( u' q
}' e& ]- F+ E! ]
}4 a* @& v g" V$ R; h$ u& w7 e
编译此合约:
$ solc --bin --asm c3.sol
产生的汇编代码现在更加的复杂一些:
tag_2:- S* u/ J" J1 z, B5 I# }9 b
// a = 1( E$ B" g+ Q) B. l5 j, \8 x' A
0x1
0x0! s f: N! C( O9 P: u
dup1
0x100
exp
dup23 K4 ]) E" s" }
sload: R) B0 X/ W, H9 Q
dup2: y+ b6 Q2 @& n% G
0xffffffffffffffffffffffffffffffff
mul: E! Y' k C, z* {3 w- e/ x
not1 ?# A, B1 d; _1 q7 D
and/ w+ A- u8 E1 _" j& F% {+ T. y
swap1
dup41 ~; p7 z8 O! Z: q& e7 I
0xffffffffffffffffffffffffffffffff( C& A7 l6 H! g) I2 _
and, _- c; m9 N/ ?5 Y
mul) `0 r8 y# y8 k* h
or, q5 [- V1 ^+ i: ^" M1 t
swap1
sstore. X a: @: u B/ g4 ^
pop" r, \# L r+ _/ l" k9 v8 A
// b = 2! q g7 G! @) C; i9 M& A- Y
0x2+ w. D8 h0 h6 W! I% x
0x0
0x10
0x100' B( r! @0 h3 y: ~: I; T
exp
dup2
sload9 f2 O3 z$ U" {
dup2* E4 I; G* A3 H9 B: I* }) t2 w
0xffffffffffffffffffffffffffffffff
mul
not
and
swap1! G; G. \! d( Z0 e: K
dup4 P1 G. p7 Y$ Y% b. W1 r4 J; `
0xffffffffffffffffffffffffffffffff
and. [8 H% R4 ]1 i1 x& Q3 [
mul
or7 t: m7 ]" r$ {* W e2 Z5 Y5 t
swap1
sstore
pop; P2 n. F# R$ h. L9 T$ D
面的汇编代码将这两个变量打包放在一个存储位置(0x0)上,就像这样:
[ b ][ a ]: @. X# D5 |/ C5 T7 M
[16 bytes / 128 bits][16 bytes / 128 bits]5 F- ^) v( [& C
进行打包的原因是因为目前最昂贵的操作就是存储的使用:9 @& O/ x. G4 F8 D& m9 E) \& ?# j8 o
sstore指令第一次写入一个新位置需要花费20000 gassstore指令后续写入一个已存在的位置需要花费5000 gassload指令的成本是500 gas大多数的指令成本是3~10 gas
通过使用相同的存储位置,Solidity为存储第二个变量支付5000 gas,而不是20000 gas,节约了15000 gas。3 x; U6 j! D/ c+ y4 [/ ~
更多优化7 n2 t& R8 S7 L2 Q, ^
应该可以将两个128位的数打包成一个数放入内存中,然后使用一个sstore指令进行存储操作,而不是使用两个单独的sstore命令来存储变量a和b,这样就额外的又省了5000 gas。
你可以通过添加optimize选项来让Solidity实现上面的优化:5 N' p7 q1 M8 t2 }& n) N3 ~
$ solc --bin --asm --optimize c3.sol
这样产生的汇编代码只有一个sload指令和一个sstore指令:
tag_2:
/* "c3.sol":95:96 a */& \" N, e- P: G; M
0x0$ D7 y8 y) [- i& k+ ~+ G7 t3 b
/* "c3.sol":95:100 a = 1 */
dup1
sload
/* "c3.sol":108:113 b = 2 */
0x200000000000000000000000000000000
not(sub(exp(0x2, 0x80), 0x1))
/* "c3.sol":95:100 a = 1 */
swap1
swap2
and3 ~; P5 q1 T2 M/ q2 u
/* "c3.sol":99:100 1 */
0x16 c, ~) g/ T4 G2 X) t5 ^3 c- d
/* "c3.sol":95:100 a = 1 */9 E& p. ]) F) @: x3 T
or/ R# C, P$ E, N% T2 Q7 g
sub(exp(0x2, 0x80), 0x1)9 D) d: V* N/ T
/* "c3.sol":108:113 b = 2 */
and
or) J: s# X3 o6 L! ?
swap1
sstore
字节码是:
600080547002000000000000000000000000000000006001608060020a03199091166001176001608060020a0316179055
将字节码解析成一行一指令:4 s4 j( L; v' a4 G w
// push 0x0
60 003 U% H( k2 j& }2 J% [6 `" c* |
// dup1" W, H) K9 ~3 a6 T$ \( P, w
80
// sload
54$ S5 N8 v3 Z- o8 w9 f' p2 ]& M, F$ ^
// push17 将下面17个字节作为一个32个字的数值压入栈中
70 02 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00& f0 m. b; ]9 I
/* not(sub(exp(0x2, 0x80), 0x1)) */
// push 0x1' D( P6 C8 z" d& M( B
60 01' W, y8 d/ S$ {+ t( f
// push 0x80 (32)
60 809 C5 U; _) T. N( S# d3 j9 {
// push 0x80 (2); T- k+ m. E. ~& l, h; l. V
60 02
// exp
0a5 v+ c- S- T7 T& z
// sub
03' E+ n, N; |9 U5 [. r0 v# |
// not
193 W6 ~2 m. P( a. O
// swap19 N/ x! k8 n* C, V9 V
90+ B6 O5 r6 f1 c- D
// swap2
91
// and: h8 c7 j2 A0 y m6 L' w
16
// push 0x1
60 01, d' H, y3 q2 C3 S! A! z
// or; a" f6 ?+ b% I& Z% }! c4 }4 T
17- T/ ?! ^/ q" A) A% T0 ]) a/ a5 V
/* sub(exp(0x2, 0x80), 0x1) */4 w* ?) O0 @7 ]) |: a, p
// push 0x1: Z( @7 n0 p. O; t* k# F, e P
60 01
// push 0x80$ O5 n* M0 ]; y4 Z9 M. @% H# N" Q
60 80/ B9 Z% o3 [, k v/ b8 B
// push 0x02
60 02! {7 c! z3 z$ Z, L
// exp
0a2 r9 `3 Y- i% m
// sub: V. B+ `/ r1 ^: q
03
// and& k) N$ ` ]3 T6 X/ p( Q
16
// or
17* Y8 g3 n- W3 t) V
// swap1
90 l7 t& z+ r: v4 A. d' r
// sstore8 t) x, U5 u4 o# b& y j9 p
55& }3 G _9 z5 S- U, ?
上面的汇编代码中使用了4个神奇的数值:3 z9 j. D7 D/ F9 P
0x1(16字节),使用低16字节
// 在字节码中表示为0x01
16:32 0x00000000000000000000000000000000
00:16 0x00000000000000000000000000000001: ^8 @, U7 j1 [0 O: J8 Q
0x2(16字节),使用高16字节
//在字节码中表示为0x200000000000000000000000000000000 ( `5 G5 o3 z" N! d' N
16:32 0x00000000000000000000000000000002; I! b- }9 t- x" E! V
00:16 0x00000000000000000000000000000000
not(sub(exp(0x2, 0x80), 0x1))4 i( N- ]& ^7 o7 I F$ y
// 高16字节的掩码
16:32 0x00000000000000000000000000000000 . C7 x- d# a- y" h0 ^
00:16 0xFFFFFFFFFFFFFFFFFFFFFFFFFFFFFFFF- A' I7 Z" V, N: p- H. V2 W; V
sub(exp(0x2, 0x80), 0x1)& `7 @" y8 C4 ~
// 低16字节的掩码4 u/ j; E# R$ m
16:32 0x00000000000000000000000000000000
00:16 0xFFFFFFFFFFFFFFFFFFFFFFFFFFFFFFFF
代码将这些数值进行了一些位的转换来达到想要的结果:3 x D) f6 Q, ?* @( c; Z
16:32 0x00000000000000000000000000000002 * R4 V5 x. T; H# K( M% x* j
00:16 0x000000000000000000000000000000019 Y! W: a7 l5 N* I8 y" A
最后,该32字节的数值被保存在了0x0的位置上。: g( F* M: d/ W! l9 r! J
Gas 的使用7 \! K; r, M0 ?5 _ S) ?' s
600080547002000000000000000000000000000000006001608060020a03199091166001176001608060020a0316179055' ^# j* s6 B7 d8 R( A" f0 u$ L
注意0x200000000000000000000000000000000被嵌入到了字节码中。但是编译器也可能选择使用exp(0x2, 0x81)指令来计算数值,这会导致更短的字节码序列。8 W' y1 k/ I, ?9 z/ J% v# d b6 o
但结果是0x200000000000000000000000000000000比exp(0x2, 0x81)更便宜。让我们看看与gas费用相关的信息:; f6 e! i$ ?2 s# H/ ^+ n; N
一笔交易的每个零字节的数据或代码费用为 4 gas
一笔交易的每个非零字节的数据或代码的费用为 68 gas/ m8 \9 l3 c' P2 I/ V( Q% b8 g
来计算下两个表示方式所花费的gas成本:! O6 b- V8 W, g
0x200000000000000000000000000000000字节码包含了很多的0,更加的便宜。2 O2 `: g1 y# C& k6 N/ y
(1 68) + (32 4) = 196
608160020a字节码更短,但是没有0。
5 * 68 = 340
更长的字节码序列有很多的0,所以实际上更加的便宜!* E) O/ \ m0 v6 N2 B- S
总结/ G; ~& C' b h0 q
EVM的编译器实际上不会为字节码的大小、速度或内存高效性进行优化。相反,它会为gas的使用进行优化,这间接鼓励了计算的排序,让以太坊区块链可以更高效一点。
我们也看到了EVM一些奇特的地方:8 P( s' ~- T8 ^
EVM是一个256位的机器。以32字节来处理数据是最自然的持久存储是相当昂贵的Solidity编译器会为了减少gas的使用而做出相应的优化选择1 G9 g2 g$ [+ C
Gas成本的设置有一点武断,也许未来会改变。当成本改变的时候,编译器也会做出不同的优化选择。
成为第一个吐槽的人