测试比json更快更小的二进制数据传输格式Msgpack [pythono MessagePack 版本]

2022-10-19 11:43:20

MessagePack简称msgpack，官方网站是http://msgpack.org/ ,代码可以在github上查看 https://github.com/msgpack。

官方介绍是“Extremely efficient object serialization library for cross-language communication.It's like JSON, but very fast and small.”，是一种跨语言的基于二进制的数据格式。

msgpack完全兼容json的数据格式

比json的序列化更省时间和空间

支持很多种语言（python，java，ruby，c，golang。。。。）

从官方的介绍来看，它能够比

google protocol buffers快4倍，比json快10倍多。

好多项目都开始用他，咱们ops界流行的saltstack mq的传输也是用msgpack来搞的~

最近看到golang群里的兄弟们说，msgpack要比json更好更快。。。这东西我以前用过，但是因为给别人提供http接口的话，用js不好解析。所以。。。。我也就放弃使用了。

我的测试服务器：

PowerEdge R720 16G Xeon E5-2603 1.8GHz

我的测试代码：

大量数据下的压力测试的结果~

我把结果重定向到一个文件里面！！！

看到了吧，是14MB左右 ~

我们打开看看 ~

都是二进制的文件 ~

下面我们再解析json的数据 ~

测试的结果是：

json生成的数据要比msgpack大的多，大整整一倍左右,但是至于时间，真心没看到啥优势。

#让我们来测试json吧~   呼呼

import msgpack

import json

import time

import random

import string

import os

ISOTIMEFORMAT='%Y-%m-%d %X'
print time.strftime(ISOTIMEFORMAT, time.localtime())
data={}

for i in range(1000000):

    salt = ''.join(random.sample(string.ascii_letters + string.digits, 8))

    data[i]=salt
d=json.dumps(data)
d1=json.loads(d)
d2=json.dumps(d)

fileHandle = open( 'timejson.txt', 'w' )
fileHandle.write(d2)
fileHandle.close()
print time.strftime(ISOTIMEFORMAT, time.localtime())

这是一个老外的平均测试下的结果~

源地址：http://rfyiamcool.blog.51cto.com/1030776/1303868

官网是用c，java做的测试，他们是编译语言，肯定要比python这类的测试压力更大更精准。虽然没有强十倍，哪怕一倍的结果，但是好在他的数据量是可以缩小的。

在cs 模式下，用这个来解决文件大小的传输算是不错的方案。

本文转自 rfyiamcool 51CTO博客，原文链接：http://blog.51cto.com/rfyiamcool/1303868，如需转载请自行联系原作者

码农公寓

PowerEdge R720 16G Xeon E5-2603 1.8GHz

相关文章