找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。
找到11项技术成果数据。
找技术>-
一种基于可扩展标记语言的无线传感器网络数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于可扩展标记语言的无线传感器网络数据压缩方法。传统的无线传感器网络数据管理主要采用简单数据结构作为数据交换格式以减少无线传感器网络中因为数据交换带来的能量损耗,但这些简单数据结构不能有效地处理大型异构网络数据集合;当前的互联网数据传输标准XML适用于处理大型异构网络数据,但由于XML本身的自描述性,其数据格式的冗余度很大,对于能量有限的传感器节点来说是一个有待解决的问题。本发明提出了一种基于XML节点树结构的无线传感器网络数据压缩方法,简称TXC压缩方法,本方法适用于无线传感器网络并能有效支持动态查询,可以得到较好的压缩效率,在支持异构网络互连的同时有助于延长无线传感器网络的寿命。
-
网络数据压缩方法和系统
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
采用本发明提供了一种网络数据压缩方法和系统。所述方法包括:通过数据发送端判断网络数据对应的类型是否属于预设的网络流量类型,若是,则采用网络代理缓存实现网络数据的压缩得到所述网络数据对应的标识信息,并传输所述标识信息,若否,则采用网络冗余删除处理来实现网络数据的压缩得到所述网络数据对应的指纹信息,并传输所述指纹信息;通过数据接收端接收所述指纹信息和标识信息,并根据所述标识信息提取曾缓存于所述数据接收端的网络数据,根据所述指纹信息恢复网络冗余处理前的网络数据;汇聚所述标识信息对应的网络数据和指纹信息对应的网络数据。采用本发明能降低计算开销同时不减少网络数据去冗率。
-
一种基于改进 EZW 的声纳图像数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种基于改进 EZW 的声纳图像数据压缩方法,包括步骤:1)采集声纳图像信号,分析其统计特性和能量分布特点;2)对声纳图像进行整数提升小波变换,建立小波系数树结构;3)将小波变换后图像的低频子带经过调整后直接存储;4)将高频部分应用改进的嵌入式零树编码(EZW);5)合并低高频数据,实现声纳数据的压缩。本发明的优点在于:采用小波变换对声纳图像信号进行处理,使其幅值分布相对集中,更利于压缩编码;采用整数提升小波变换进行声纳图像处理,可有效地提高运算效率,实现图像的无损压缩;压缩声纳数据其压缩速度和 PSNR 值均优于传统的 EZW 算法。
-
一种分布式实时监控信源的数据压缩编码与可靠传输方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明公开了一种分布式实时监控信源的数据压缩编码与可靠传输方法。旨在降低采样信息在传输时对网络带宽及吞吐量需求,提高分布式信源在受限空间中信息传输有效性和可靠性,延长资源受限传感器节点寿命。编码时,每个节点无需与其他节点进行通信,直接根据参数分布的相关性对本地采集数据进行抗干扰压缩编码;解码时,以能够获得的最可靠采集数据(如有线传感器、信息汇聚节点采集的信息)作为边信息,采用簇间级联解码方法,逐级将每个簇恢复出一个边信息,再使用簇内联合解码方法,将全部节点的采集数据恢复。
-
一种可变步长的矿井环境实时监测数据的动态压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
一种可变步长的矿井环境实时监测数据动态压缩方法,属于时序数据压缩方法。该方法是针对矿井水文传感器监测数据所具有的实时性、时效性、多源性和海量性而设计的可变步长的数据压缩方法。分析矿井环境监测数据样本特征计算实时矿井环境预警级别分割点,综合计算矿井环境事件预警级别,分别计算实时和历史监测数据压缩步长,设计历史和实时监测数据压缩算法。可变步长的矿井环境实时监测数据动态压缩方法,可动态调整矿井环境监测数据样本计算矿井环境事件预警级别,实现可变压缩步长的监测数据压缩功能,该方法能够尽可能反映监测数据的变化趋势,在保留监测时序数据特征的同时,能够精简数据存储空间和时间,提高监测数据查询与显示效率。
-
一种故障录波数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种故障录波数据的压缩方法。该方法为:对录波数据采用二阶差分算法压缩;对产生的差分值使用改进的二进制编码,有效地减少了二进制的冗余位。该方法缩小了数据规模,提高了压缩效率,有利于录波数据的存储和传输。
-
一种数据压缩装置
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明提供了一种数据压缩装置,包括与外部主机相连接的PCIe控制器、与SATA硬盘相连接的SATA主机接口、用于数据压缩或者解压缩的数据处理模块以及与数据处理模块、PCIe控制器和SATA主机接口相连接的微控制器;当数据压缩装置接收从主机发来的信息时,PCIe控制器接收该信息并发送给数据处理模块,数据处理模块启动其中的压缩模块进行信息压缩,再通过SATA主机接口将压缩后的信息发送给SATA硬盘;当数据压缩装置向主机发送信息时,SATA主机接口从SATA硬盘中获取信息并将该信息发送给数据处理模块,数据处理模块启动其中的解压模块进行信息解压缩,再通过PCIe控制器将解压缩后的信息发送给主机。采用本发明的技术方案,大大提高现有存储卡的存储性能,同时也提升了存储信息的安全性。
-
一种具有压缩功能的固态存储系统FTL写入及读取方法
成熟度:正在研发
技术类型:发明
应用行业:信息传输、软件和信息技术服务业
技术简介
本发明提供一种具有压缩功能的固态存储系统FTL写入方法,该固态存储系统包括压缩前缓存、数据压缩单元、压缩后缓存、地址映射表、数据压缩FTL,以及存储单元,该写入方法包括步骤:固态存储系统接收并解析写入指令;固态存储系统将待写入数据缓存到压缩前缓存中;数据压缩单元将压缩前缓存中的数据进行数据压缩,并将压缩完的数据存入压缩后缓存中;数据压缩FTL能够将压缩后具有可变长度的数据块完成地址映射管理、垃圾收集、损耗均衡等功能;固态存储系统将该压缩后缓存中的数据写入该存储单元中。本发明能够使固态存储系统内置压缩能力且具备支持压缩功能的FTL,并能够提高固态存储系统的存储空间利用率,避免存储空间的浪费。
-
一种基于数据压缩和数据去冗协同的存储优化方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
本发明提出了一种基于数据压缩和数据去冗协同的存储优化方法。本方法会在数据压缩机制起作用之前判断是否需要进行数据去冗余。给定一批需要压缩的数据块,本方法首先会基于采样来估算性能开销较高的数据去冗余机制的收益,并判断是否值得进行数据去冗余如果值得,就对全部给定数据块先进行去冗余,然后再压缩,否则就直接进行压缩。本发明通过协同原本独立的两套减少数据存储量的机制,能够最大化数据存储的效率。
-
一种基于GPU和CPU混合平台的高速无损数据压缩方法
成熟度:正在研发
技术类型:发明
应用行业:制造业
技术简介
摘要:本发明公开了一种基于GPU和CPU混合平台的高速无损数据压缩方法,包括:CPU读取待压缩数据文件,将该待压缩数据文件从内存拷贝到GPU的全局存储器中,设置GPU上的线程块组bk[a],每个线程块中的线程个数b,设置压缩字典窗口的长度为c,并设置指向第一个压缩字典窗口的头部指针为p_dic_h,设置预读窗口大小为d,指向第一个预读窗口的指针p_pre_r,该指针的初始值设置为p_dic_h-c,初始化工作线程组threads[a*b],以及(a*b/2)/c个gMatrix矩阵,其大小为c*d,调用工作线程组threads[a*b]中的(a*b/2)个线程处理待压缩数据文件中q=(a*b/2)/c个长度为c+d的数据,在q个结果矩阵gMatrix的每一个中寻找具有最多连续1的斜线段,确定每个结果矩阵的三元结果数组locations[p]。本发明能够大大提高海量数据的压缩速率。

