数据压缩算法的实现研究

浙江大学硕士学位论文摘要 数据的无损压缩在通信、航天、医疗等各个方面获得了普遍的应用。基于ＶＬｓｌ实现的压缩器由于其速度快、处理能力强而获得人们的重视，成为一个热门的研究领域。 本文提出了一种基于ＬＺＷ算法的硬件实现的无损压缩器。根据ＬＺｗ算法的特点提出了无损压缩器的体系结构。该体系结构采用了一种并行的字典搜索策略，极大的提高了字串的搜索速度。同时字典被拆分，字典宽度变长，从而节省了存储空间，减少了芯片面积。在此体系结构的基础上用Ｃ什实现了一个仿真模型，以此模型证明了功能的正确性。然后压缩器被细分到模块级，并用ＲＴＬ（ｖｅｒｉｌｏｇ）描述了各个模块。其中层次化的字典模块设计策略使得字典结构清晰合理，并大大减少了代码量。在压缩器的设计中采用了可配置的寄存器来控制压缩器的功能，使得控制部分和数据处理部分明确分工，并且有利于功能的扩展。同时该压缩器体现了ＤＦＴ的设计思想，提出了一种基于ＣＲＣ１６比较的ｆｏｇｉｏＢｌｓＴ设计策略，有利于功能的全速测试。 在设计完成后以ｖｃｓ基础建立仿真环境，将本压缩器的ｖｅｒｉｌｏｇ代码进行了仿真。仿真结果显示，该设计的压缩器可以正确地以ＬＺＷ算法实现数据的压缩。用Ｓｙｎｐｌｉｆｙ以Ｘｉｌｉｎｘ的Ｖｉｒｔｅｘ４为目标器件综合了本设计的ＲＴＬ代码，证明资源占用情况是可以接受的。并且压缩器工作频率达到了ＺＩＯＭＨｚ，总的数据处理能力达到７５０入Ｉｂｐｓ。处理性能比软件实现的处理能力快了２０多倍，可以同市面上主流的硬件压缩器相媲美。

关键词：无损压缩ＶＬｓｌ硬件字典压缩Ｄ叮—１—浙江大学硕士学位论文Ａｂｓｔｒａｃｔ ＴｈｅａＰＰｌｉｃａｔｉｏｎｓｏｆｆｏｓｌｅｓｓｄａｔａｃｏｍＰｎ绍ｓｉｏｎ印ｒｅａｄ俪ｄｅｌｙｉｎｃＯ］吐ｔｎｕｎｌｃａｔｌ叽即朗ｅｆｌｉ沙ｔ，咖ｄｉｃａｉ加曲力ｅｎｔａｎｄｓｏｒｎｅｏｔｈｅｒｆｉｅｌｄｓ．ＮｏｗｔｈｅｃｏｍＰｒｅｓｓｌｏｎ如ｐｌｅｍｅｎｔａｔｉｏＯｒｅ叭１刀沮勿ＶＬＳｌｔｅｃｈａｏｌｏｇｙｉｓｇ‘ｔｉｎｇｍｏｒｅａｎｄｍｏ二ｓｉｇｈｔｓｄ阴ｔｏｉｔｓｍｏｒｅｐｏ训划过扒沉翻铝ｍｇ咖１ｉｔｙ．ＡｎｄｔｈｅｒｅｓｅａｒｃｈｏｎＶＬｓＩＣＯｍＰｒｅｓｓｉ０ｎｔｅｃｂｎｏｌｏｇｙｉｓ卜沈ｏｍｉｎｇｂｏｔ． 丁瓦ｓｔｈｅｓｉｍ苗川ｙｄｅａｌｓ俪ｔｈｔｈｅｄｅｓｌｇｎａｎｄ汕Ｐｌｅｍｅｎｔａｔｌｏｎｏｆａｆｏｓｌｅｓｄａｔａ印ｍｐｒｅｓｓｉｏｎｃｏｒｅｉｎｈａｒｄｗ别笼ＴｂｅｃｏｍＰｒｅｓｌｏｎｃｏｒｅｉｓｂ肠ｅｄｏｎＬＺＷａｉｇｏｒｉｔｈｍ．Ｔ五ｅｔｈｅｓｉｓ面ｓｅｓａ解ｃｉ习别陀抽ｔｅＣｔｏｒｅｏｆｔｈｅｆｏｓｓｌｅｓｓｄａｔａｃｏｍｐ优ｓｓｉｏｎ价ａｃ伪ｒｄｉｎｇｔｏｃｈ脚ｔ晰ｓｔｉｃｏｆｔｈｅＬＺＷａｌｇｏ巧血队叨云５峨址加ｃ加玲眯ｓａＰａｒａｌｌｅｌｄｉｃｔｌｏｎａｒｙｓｅ肚ｃｈｉｎｇ目ＬｒａｔｅｇｙｗｂｌｃｈｓｐｅｅｄｓｕＰｔｈｅ劝俪ｇｓｅ副比瓦ｎｇｉｎｄｉｃｔｉｏｎａＪ了ｑｕｉｔｅｌｙ．Ｍｅ助ｌｗｌｈｉｌｅ，ａｂｉｇ由比皿田李ｉｓｓＰｌｉｔｌｎｉｏｓｄｉ比。口耐ｅｓ幼ｔｈ由价代口ｔｓｉＺｅ，认七１比ｓａｖｅｓｔｈｅｍｅｏｒｙｓＰａｃｅａｎｄ比ｄｕｃｅｓｔｈｅｃｈｉｐａ叮ｅａ．Ａｓｉｍｕ】掀１０ｎｍｏｄｅＬｗ瓦比１５理记ｄｔｏＰｒｏｖｅｔｈｅ￣ｃ切ｅｓｓｏｆ阮丘口以１叽ｉｓｄｅｓｉｇｎｅｄ初ｔｈＣ什ｂａｓｅｄｏｎｔｈｅ肛ｃｈｉ重ｅｃｔｕｒｅ，丁ｂ叨伪。伪ｍＰｒｅｓｓｉｏｎｃｏｒｅｉｓｄｉｖｉｄｅｄｔｏｍ司ｕｌｅｌｅｖｅｌ幼ｄｅｖｅｒｙｍｏｄｕｌｅｉｓｄｅＳＣｒｉｂｅｄｗｉｔｈＲＴＬ】ａｎｇｌ坦ｇｅｏ／ｅ川０９）．ｈｉｔｈｅｄｅｓｉｇｎｏｆｔｈｅｄｉｃｔｌｏｎａＪ了ｍＯｄｕｌｅ，ｉｔｕｓｅａｈｉｅｒａｒｃｂｌ以ｄｅｓｉｇｎｍｅｔｈｏｄｏｌｏｇｙｗｈｉｃｈｍａｋｅｔｈｅｄｉｃｔｉｏｎａｒｙｄｅａｉｇｎｑｕｉｔｅｄｅａｒａｎｄｓａｖｅｍｕｃｈｃｏｄｉｎｇｅ月七ｒｔ．了ｂｅｃｏｎｆｉｇ帅ｂｌｅｃｏｎｔｒｏｌｒｅｇｉｓ“江ｍｏｄｕｌｅｉｓｄｅｓｉ，目ｔｏｃｏｎｔｒｏｌ￣丘ｍｄｌｏｎｏｆｔｈｅｃｏｍ衅ｓｓｉｏｎｃｏｒｅ．Ｔｂｅ二加。６９叮ａｂ】ｅ比ｇｉｓｔｅＩ’Ｓｍａｌ泌ｔｈｅｃｏｎｔｒｏｌｓｕｂ卿ｓｔｅｍａｎｄｄａ恤ｐ到ｘ笼５５吨别ｂｓｙｓ忱ｍａ详时阴ｄａｌｓｏｉｓｈｅｌＰ佃ｆｏｒ脉．双ｅ拙ｉｏｎｏｆｔｈｅｆｏｎｃｔｌｏ几了ｋｄｅｓｉｇｎｏｆｔｈｅｃｏ口Ｐｎ活ｓｉｏｎｃｏｒ。玲月ｅｃ招ｔｈｅＤ盯面汕幼９．Ｉｔｄｅａｉｇ招ａｌｏｇｉｃＢＩｓＴｓｔｒＵｄ卫ｒｅｗｈｉｃｈｂ巴犯ｄｏｎ奴ＣＲＣ１６ｃｈｅｃｋｅｒｌ七ｌｓｆｏｇｌｃＢＩＳＴｃａｎｈｅＩＰｔｈｅｆｕ朗ｔｌｏｎｔｅｓｔａｔ细ＩＳＩｘ对月 Ａ五ｅｒｔｈｅｄｅｓｉｇｎｏｆｌｈｅｃｏｍｐｒｅｓｃｏｒｅｉｓ６劝ｉｓｂｅｄ，脉ｓｉｍｕｌａｔｉｏｎｅｎｖ如曲ｅｎ‘ｗ肠ｃｈｉｓｂ韶ｅｄｏｎｔｈｅＶＣＳｓ如ｕｌａｔｏｒ，ｉｓｅ引旧ｂｌｉｓｈｅｄ．ＴｂｏｄｅｓｉｇｎｏｆｔｈｅｃｏｍＰ比ｓｓｉｏｎ。。茂ｉｓｓｉｍｕｌａｔｅｄｉｎｔｈｅｓ加川ａｔｉｏｎｅｎｖｌｒＤ侧口即Ｌｌ七ｅｓｉｍｕｌａｔｉｏｎ碑ｓｕｌｔ抢ｖｅａｌｓｔｈａｔ比ｅＣＯｍＰ比ｓｓｌｏｎｃｏｒｅｃａｎｃＯｌｍＰｒｅｓｓ己时ａｃｏ讹ｃｔ】ｙａｃｃｏｒｄｉｎｇｔｏｔｈｅＬｚｗａｉｇｏｒｉｔｈｍ．ＴｂｅＳ扣Ｐｌｉ斤ｔｏｏｌｉｓｌｌｓｅｄｔｏｓｙｎｔｈｅｓｉｓｔｈｅＲＴＬｃｏｄｅｏｆ奴叨ｍＰ代ｓｓｉｏｎｃｏｒｅ，芜ｌｉｎｘ巧ｎｅ笼４ＦＰＧＡａｓｔｈｅｔａｒｇｅｔＦＰＧＡ声了ｂ．５卿址５１５此ｓｕｌｔ卿司ｓｔｈａｔｔｈｅ卿。也ｃｅｉｓ．“ｅｐｔ曲ｌｅ，ｔｈｅ二触ｑｕｅｎｃｙｉｓＺ１０ＭＦ比ＳｏｔｈｅｔｏｔａｌｄａｔａＰｒＯＣ已”Ｉｎｇａｂｉｌｉｔｙ化ａ比韶ｔｏ７５０ＭｂＰｓ，ｗｈｉｃｂｉｓｔｗｅｎｔｙｔｉｍｅＳＩ断ｇｅｒｔｈａｎｓｏｆｔｗａｒｅｉｍｐ化ｍｅｎｔａｉｏｎａｎｄｃａｎｃｏｍＰ瞬ｔｏｔｈｅｏｔｈｅｒｂ盯ｄｗａｒｅｃｏｍＰｒｅＳＳｌｏｎｃｏｒｅｉｎｍ出滋ｅｔ．

Ｋ．，。ｒｄｓ：ｌｏｓｌｅｓｓ伪ｍＰ代５９１０皿，ＶＬＳＩ，ｈａｒｄｗ，瑞ｄｉＣｔｉｏｎａ叮ｃｏｍｐ脚ｓｉｏｎ，ＤＦＴ

一ｎ一浙江大学硕士学位论文表格索引表格２一１几种无损压缩算法性能对比…，’…．””“．””．．…．…。二”…．”．”：．””二１４表格３一１一个通用存储体的输入输出列表．”二“：．“““””““”““．．。二“…．”…２０表格３－２一个存储页端口列表．“：．”“…．””“”““．”“．．…．”．“．．”“““．．“““．．“．…．２表格３一３一组四位地址和匹配信号的对应关系．“．．”“““…．“，．”…．””…”二２７表格３一ｇｅｎ－列ｄ口ｏｗ信号列表…“一“．．…．“．．．．．．……”……“…”…．””：．””．２８表格３一５ｄｉｃ２５６－．ｉｎｄｅｘ少川ｄｒ模块的端口信号列表．，．．，．．““．．－…．。：’”…．”二２８表格３一６ｃｏｍｐｒｅｓｉｏｎＲａｔｉｏｎ田１倒ＣｈａｒＣｔｅｒ）１１９．”“““．”“”“．…’。”“．”…．，３１表格３一７可配置寄存器列表二”…．”．”二‘，””．…”．”二”．．．…””．”“．…”““…．”“．３表格今ＩＣ＋＋模型的文件列表．”“二”．”…”””…．””．”．”””””””””“．．”“““”“““．３６表格村ｄｉｃｔ１Ｏｎａ叮ｄ留ｓｍｅｍｂ二ｖ颐ａｂｌｅｓ．”“…，．““．””．“．．”二””“…”．””．＿￣．３６表格今３ｄｉｃｔｉｏｎａＪ，ｃｌａｓｓｍｅｍｈ沈瓦砚ｔｉｏｎｓ．。．．…．“．”。：．“．．“．”：．“．”．“．”．３７表格月闷ＩＫ地址空间的几种典型划分方式．““二“．．“二，．““二。．“…．。．“．．……．４１表格今５１ｋ－１划分方式的压缩效果”…．”“”””“：．““，．“”“““：．“．．”．．“…．…．４１表格４巧Ｉｋ．２划分方式的压缩效果…“…”…．…．“．’。”．．““一”．．…“”…．”：．“一”．４１表格今７１ｋ－３划分方式的压缩效果二”．．．．．……．““一“…．，“．…．“．．“”．．一４２表格今８１ｋ礴划分方式的压缩效果．”：’””“”．．”“…．”“：．”“”．．””．．“．．”…．””。４２表格今９１卜５划分方式的压缩效果．．．．．…．…．，’．““．．”“““：．。“…．。：．”．．“”“４２表格今１０１ｋ一划分方式的压缩效果”．”””…”…”二””“…”““””．”“．””“．．”“．４２表格今１ｌｌｋ．７划分方式的压缩效果．”…．””…．。”．．“．．”．．…””“．．”””．．”””…．４３表格今１２１ｋ－８划分方式的压缩效果…．”．．”““””…．””．。．．”…．”“：．“…．“：．４３表格５一１时序分析…”．．“．．．．…．…”．“二”．．“．……“，．二“．．．．．．．．．……”：．“二”．…．…５３表格５－２一组基于软件的处理能力数据．”“．．”．．“：．””．．“”．．““““．．“‘…．…．“二５６表格５一同其他硬件压缩器的对比．””“．“”．．…’”””．，””“．．”：．”““．．“．．““．．“二５６

－Ｖ－浙江大学硕士学位论文 图表索引图表２一ＩＬｚＷ算法流程图阴…“．“。“……”一””二“，．二”．．．……“…．“二“．．，．．“．８图表２一ＪＰＥＧ一ＬＳ编码流程１１司…””二”．．”．“”””．’…．”…．”．．”“．”．．…．，．．，．“．１３图表３一１总体框图ｄｉｃｉ一第１个字典．”．”“…””“：．””””．’”…．“……．“．．．…’…巧图表３一数据输入框图二””““”．．““：’”“：．”“．．“””““．．”．．“．．“：．“．．“：．“““…．１８图表３一字典框图．”“““二”““：．”““．．…“：．”“．．，．”“．．一”“．．．．．．．．…．…．”“…．１９图表３礴一个通用ｅ址叮ＲｒＬ网表图．””“，．．“．““，．“．…．”“．．“”．“”二”．．”“．”二２１图表３石一个存储页ｍＪ昭ｅ的结构图示．”””“．”“”“，．””“．…”””．”””二“．２３图表３一２５６ｘ２字典的图示一”””二，”．”：．”．””…”．”．．”．．…“．…””，．．’”””．．……”．２４图表３一７地址编码流水线示意图…”““…．”…’“．”：．””：．”．““…””：．“…”…．２９图表３一８编码状态转换图．“．．．…“．．“．．“““．”。．…．””二“：．““．．…“．““．．”二”．“．．，２９图表３一９字典序及以月ｅ生成图示…，．……．”：．“””．“‘，．．．……’“．．“：．”“．．’…３０图表３一１０可配置寄存器模块框图．”．．…””…．”””…．””一”““…．”．””．．”“””．３２图表今１用Ｃ＋＋模型进行功能正确性测试二”””：．”””“：．”“：．”””：．。”””二４０图表４．２压缩比与字典划分方法的关系图．“：．”．．．…．”“．．…”．．…．，．…．“…．４图表今３资源占用与字典划分方法的关系图．…．。．…．“．．”””．“”．”“．“．．””””．科图表４４ＬＦＳＲ电路结构二“…”．．…”””…”””．．…”…．…””．’．…””…，．．”．．……４６图表４．ＳＢＩＳＴ在系统中的位置及其构架．“．’”．“．…．…”…”．…“““．．…．“……－４７图表４．６并行算法生成ＣＲＣ１６原理框图１２３１．”．．”：．，．．”…’”””…－”．．。．．“””．４９图表５一１验证环境结构图．”．．”“．．”“．．“：．“：．”…．。…．“．．”：．“，．．’…．…．”二“：．５０图表５一Ｄｅｂｕｓｓｙｏｖｅｒｖｉｅ俨，１二”．“一”：．”．．”…’”…’””．“．…．“…．”“．．…．５１图表５一３仿真波形１二”“一，．．“““．．“．．“．．…“．．．．……”…．“，．，．…“：．“．．…．“．“．．，５２图表５４仿真波形２．“…．”一”．．．…”．．“：．””一”…．”．．””“”““”…．”：．”“二５２图表５一５仿真波形３．”“二”……””“．…”．．．．．．．．……””“．．．…’“…””““．．’．…’…”．５２图表５石综合后得到的顶层ＲＴＬ视图…“一“：．“．．“．．…．““．…”““：．““…．５