Azure强大的数据压缩背后的微软开源技术

国际数据公司(International Data Corp.)估计，全球数字信息总量将从今天的33兆字节（万亿千兆字节）激增到2025年的175兆字节。 微软(Microsoft Corp.)等云提供商尤其强烈地感受到这种快速增长，它们不仅拥有自己的信息，而且拥有无数其他组织的信息。

为了减轻基础设施的压力，该公司开发了一个用于压缩数据的切割边缘系统。 微软今天上午发布了该系统的规范，这是一个开源项目，名为Zipline。

该公司称其技术比当今业界常用的压缩软件强大得多。 Azure硬件基础设施团队的总经理Kushagra Vaid在宣布Zipline的博客文章中使用了流行的Zlib工具作为参考点。

Zlib是一个行业标准的压缩库，可以在Linux内核、iOS和其他基础软件平台中找到。 Vaid写道，Zipline提供的数据压缩率是Zlib提供的数据压缩率的两倍。 此外，该系统被描述为能够这样做，同时提供更好的吞吐量和较低的延迟比其他几个流行的压缩工具。

在实践中，这意味着Zipline可以将工作负载缩小到它们大小的一小部分。 微软声称，该系统将存储在Azure上的应用程序数据的存储占用压缩高达92%。 Zipline为其他类型的数据提供了更大的减少，比如来自连接设备的机器生成的日志。

微软正在公开采购系统用于执行压缩的算法，以及该算法设计用于运行的自定义硬件的规范。 这些规范包括低级寄存器传输语言，其中Zipline表示数据操作。

微软的Vaid写道：“随着时间的推移，我们预计Zipline压缩技术将进入几个细分市场和使用模型，如网络数据处理、智能SSD、档案系统、云设备、通用微处理器、物联网和边缘设备。

Zipline不是Azure的第一个组成部分，该公司为开源社区做出了贡献。 此前，微软公司发布了支持云平台部分服务的人工智能引擎代码。 它还共享了一个名为Cerberus的国产芯片的原理图，该芯片可以保护服务器的固件免受篡改尝试。

　　免责声明：本文由用户上传，与本网站立场无关。财经信息仅供读者参考，并不构成投资建议。投资者据此操作，风险自担。 如有侵权请联系删除！