第8章:客户端和实用工具程序 / 8.2. myisampack:生成压缩、只读MyISAM表

myisampack工具可以压缩MyISAM.MYIsampack分别压缩表中的每一列。通常,myisampack可以将数据文件压缩到40%-70%

当以后使用表时,解压缩列需要的信息被读入内存。当访问具体的记录时性能会更好,因为你只需要解压缩一个记录。

MySQL使用mmap()对压缩的表进行内存映射。如果mmap()不工作,MySQL返回到普通读/写文件操作。

请注意:

·         如果用--skip-external-locking选项调用mysqld服务器,如果在压缩过程中表可能被更新,调用myisampack不是一个好注意。

·         表压缩后,它变为只读。这是故意的(例如当访问CD上的压缩的表时)。允许写入到压缩的表位于我们的TODO列表中,但优先级较低。

·         myisampack可以压缩BLOBTEXT列。旧版本ISAM表的pack_isam程序不可以。

调用myisampack的方法:

shell> myisampack [options] filename ...

文件名应为索引(.MYI)文件的文件名。如果不在数据库目录,应指定文件的路径名。允许忽略.MYI扩展名。

myisampack支持下面的选项:

·         --help-

显示帮助消息并退出。

·         --backup-b

使用tbl_name.OLD名备份表数据文件。

·         ---debug[=debug_options]-# [debug_options]

写调试日志。debug_options字符串通常为'd:t:o,file_name'

·         --force-f

产生一个压缩的表,即使它比原始表大,或如果以前调用myisampack的中间文件存在。(myisampack压缩表时在数据库目录中创建一个名为tbl_name.TMD的中间文件。如果杀掉myisampack.TMD文件会被删除)通常情况,如果myisampack发现tbl_name.TMD存在则退出并提示错误。用--forcemyisampack则一定压缩表。

·         -join=big_tbl_name-j big_tbl_name

将命令行中的所有表联接为一个表big_tbl_name。将要连接的所有表必须有相等的结构(相同的列名和类型,相同的索引等等)

·         --pack length=len-p len

指定记录长度存储大小,以字节计。值应为12或者3myisampack保存所有长度指针为12或者3字节的行。在大多数正常情况下,myisampack在开始压缩文件前可以确定准确的长度值,但在压缩过程中它可以提示它可能已经使用了一个短的长度。在这种情况下,myisampack输出一条提示,下次你压缩同一文件时,你可以使用更短的记录长度。

·         --silent-s

沉默模式。只有发生错误时才写输出。

·         --test-t

没有实际地压缩表,只是测试压缩。

·         --tmpdir=path-T path

使用myisamchk创建临时文件的目录。

·         --verbose-v

冗长模式。写压缩操作过程相关信息和其结果。

·         --version-V

显示版本信息并退出。

·         --wait-w

如果表正使用则等待并重试。如果用--skip-external-locking选项调用了mysqld服务器,如果在压缩过程中表可能被更新,调用myisampack不是一个好注意。

下面的顺序命令说明了典型的表压缩会话:

shell> ls -l station.*
-rw-rw-r--   1 monty    my         994128 Apr 17 19:00 station.MYD
-rw-rw-r--   1 monty    my          53248 Apr 17 19:00 station.MYI
-rw-rw-r--   1 monty    my           5767 Apr 17 19:00 station.frm
 
shell> myisamchk -dvv station
 
MyISAM file:     station
Isam-version:  2
Creation time: 1996-03-13 10:08:58
Recover time:  1997-02-02  3:06:43
Data records:              1192  Deleted blocks:              0
Datafile parts:            1192  Deleted data:                0
Datafile pointer (bytes):     2  Keyfile pointer (bytes):     2
Max datafile length:   54657023  Max keyfile length:   33554431
Recordlength:               834
Record format: Fixed length
 
table description:
Key Start Len Index   Type                 Root  Blocksize    Rec/key
1   2     4   unique  unsigned long        1024       1024          1
2   32    30  multip. text                10240       1024          1
 
Field Start Length Type
1     1     1
2     2     4
3     6     4
4     10    1
5     11    20
6     31    1
7     32    30
8     62    35
9     97    35
10    132   35
11    167   4
12    171   16
13    187   35
14    222   4
15    226   16
16    242   20
17    262   20
18    282   20
19    302   30
20    332   4
21    336   4
22    340   1
23    341   8
24    349   8
25    357   8
26    365   2
27    367   2
28    369   4
29    373   4
30    377   1
31    378   2
32    380   8
33    388   4
34    392   4
35    396   4
36    400   4
37    404   1
38    405   4
39    409   4
40    413   4
41    417   4
42    421   4
43    425   4
44    429   20
45    449   30
46    479   1
47    480   1
48    481   79
49    560   79
50    639   79
51    718   79
52    797   8
53    805   1
54    806   1
55    807   20
56    827   4
57    831   4
 
shell> myisampack station.MYI
Compressing station.MYI: (1192 records)
- Calculating statistics
 
normal:     20  empty-space:   16  empty-zero:     12  empty-fill:  11
pre-space:   0  end-space:     12  table-lookups:   5  zero:         7
Original trees:  57  After join: 17
- Compressing file
87.14%
Remember to run myisamchk -rq on compressed tables
 
shell> ls -l station.*
-rw-rw-r--   1 monty    my         127874 Apr 17 19:00 station.MYD
-rw-rw-r--   1 monty    my          55296 Apr 17 19:04 station.MYI
-rw-rw-r--   1 monty    my           5767 Apr 17 19:00 station.frm
 
shell> myisamchk -dvv station
 
MyISAM file:     station
Isam-version:  2
Creation time: 1996-03-13 10:08:58
Recover time:  1997-04-17 19:04:26
Data records:               1192  Deleted blocks:              0
Datafile parts:             1192  Deleted data:                0
Datafile pointer (bytes):      3  Keyfile pointer (bytes):     1
Max datafile length:    16777215  Max keyfile length:     131071
Recordlength:                834
Record format: Compressed
 
table description:
Key Start Len Index   Type                 Root  Blocksize    Rec/key
1   2     4   unique  unsigned long       10240       1024          1
2   32    30  multip. text                54272       1024          1
 
Field Start Length Type                         Huff tree  Bits
1     1     1      constant                             1     0
2     2     4      zerofill(1)                          2     9
3     6     4      no zeros, zerofill(1)                2     9
4     10    1                                           3     9
5     11    20     table-lookup                         4     0
6     31    1                                           3     9
7     32    30     no endspace, not_always              5     9
8     62    35     no endspace, not_always, no empty    6     9
9     97    35     no empty                             7     9
10    132   35     no endspace, not_always, no empty    6     9
11    167   4      zerofill(1)                          2     9
12    171   16     no endspace, not_always, no empty    5     9
13    187   35     no endspace, not_always, no empty    6     9
14    222   4      zerofill(1)                          2     9
15    226   16     no endspace, not_always, no empty    5     9
16    242   20     no endspace, not_always              8     9
17    262   20     no endspace, no empty                8     9
18    282   20     no endspace, no empty                5     9
19    302   30     no endspace, no empty                6     9
20    332   4      always zero                          2     9
21    336   4      always zero                          2     9
22    340   1                                           3     9
23    341   8      table-lookup                         9     0
24    349   8      table-lookup                        10     0
25    357   8      always zero                          2     9
26    365   2                                           2     9
27    367   2      no zeros, zerofill(1)                2     9
28    369   4      no zeros, zerofill(1)                2     9
29    373   4      table-lookup                        11     0
30    377   1                                           3     9
31    378   2      no zeros, zerofill(1)                2     9
32    380   8      no zeros                             2     9
33    388   4      always zero                          2     9
34    392   4      table-lookup                        12     0
35    396   4      no zeros, zerofill(1)               13     9
36    400   4      no zeros, zerofill(1)                2     9
37    404   1                                           2     9
38    405   4      no zeros                             2     9
39    409   4      always zero                          2     9
40    413   4      no zeros                             2     9
41    417   4      always zero                          2     9
42    421   4      no zeros                             2     9
43    425   4      always zero                          2     9
44    429   20     no empty                             3     9
45    449   30     no empty                             3     9
46    479   1                                          14     4
47    480   1                                          14     4
48    481   79     no endspace, no empty               15     9
49    560   79     no empty                             2     9
50    639   79     no empty                             2     9
51    718   79     no endspace                         16     9
52    797   8      no empty                             2     9
53    805   1                                          17     1
54    806   1                                           3     9
55    807   20     no empty                             3     9
56    827   4      no zeros, zerofill(2)                2     9
57    831   4      no zeros, zerofill(1)                2     9

myisampack显示下面的各种信息:

·         normal

不需要进行额外压缩的列的数量。

·         empty-space

只包含空格的列的数量;占一个比特。

·         empty-zero

只包含二进制零的列的数量;占一个比特。

·         empty-fill

不占该类全字节范围的整数列的数量;这些列被改为较小的类型。例如,如果所有值的范围为从-128127BIGINT(8个字节)可以保存为TINYINT(1个字节)

·         pre-space

用引导空格保存的十进制列的数量。在这种情况下,每个值包含一个引导空格的数量计数。

·         end-space

有大量结尾空格的列的数量。在这种情况下,每个值包含一个结尾空格的数量计数。

·         table-lookup

该列只有少量的不同的值,在进行哈夫曼压缩前被转换为一个ENUM

·         zero

所有值为零的列的数量。

·         Original trees

哈夫曼树的最初数量。

·         After join

联接树以节省一些头空间之后留下的哈夫曼树的数量。

表被压缩后,myisamchk -dvv为每列输出详细信息:

·         Type

列的类型。该值可以包含下面的任何描述符:

o        constant

所有行具有相同的值。

o        no endspace

不保存结尾空格。

o        no endspacenot_always

不保存结尾空格并且对于所有的值不压缩结尾空格。

o        no endspaceno empty

不保存结尾空格。不保存空值。

o        table-lookup

列被转换为一个ENUM

o        zerofill(n)

值中最有意义的n字节总为0,并且不保存。

o        no zeros

不保存零。

o        always zeros

用一个位保存零值。

·         Huff tree

列相关的哈夫曼树的数量。

·         Bits

哈夫曼树使用的位数。

运行myisampack后,必须运行myisamchk以重新创建索引。此时,你也可以排序索引块并创建MySQL优化器需要的统计信息以更有效地工作:

shell> myisamchk -rq --sort-index --analyze tbl_name.MYI

将压缩的表安装到MySQL数据库目录中后,应执行mysqladmin flush-tables以强制mysqld使用新的表。

要想解压缩一个压缩的表,使用myisamchkisamchk--unpack选项。