文件名称:data-merge:对大量数据进行合并处理,优化性能
文件大小:9KB
文件格式:ZIP
更新时间:2024-05-02 11:55:56
JavaScript
dataMerge 对大量数据进行合并处理,优化性能。 主旨是对某一时间段里的数据进行合并,重复的记录进行去重,只取最新的记录。比如一秒钟来了1000条数据,其中有500条是重复的,那这一秒钟应该只返回500条结果。 两种模式 de-duplication 一种是合并去重模式,把某一时间段内的内容合并后进行去重再返回结果集 merge只作合并,只对时间段内的内容合并返回结果集 范例 let d1 = new DataMerge(); d1.init({ data:[], time:10000, mergeKey:['id'], // mode:'merge', mode:'de-duplication', callback:function(data,count,mergecount){ console.log(+new Da
【文件预览】:
data-merge-master
----example()
--------index.js(2KB)
--------test.js(748B)
--------test.html(757B)
----.babelrc(157B)
----index.js(7KB)
----package.json(870B)
----src()
--------index.js(5KB)
----.gitignore(901B)
----README.md(2KB)
----.vscode()
--------launch.json(451B)