文件名称:MatchModels:2019中国高校计算机大赛-大数据挑战赛第15名WriteUp
文件大小:1.17MB
文件格式:ZIP
更新时间:2024-03-29 23:05:59
JupyterNotebook
2019中国高校计算机大赛-大数据挑战赛WriteUp 赛题: 我们是最终排名第15名的改革春风吹满地队伍,对方法和模型进行了简单的整理。 传统模型 查询和标题去重 训练词向量以及词频统计是query和title需做去重处理 图特征 计划生成无向图以及权重图。无向图规模最大建立一亿三千万数据量的图,生成图的过程把query和title都转换成一个Int32的ID值,减少内存消耗。 技巧:利用Pickle保存,读取图是加速的,文件的体积也是最小的。 无向图特征-最大完全子图max_clique :最大完全子图的大小(特征效果提升不明显,舍弃!)。 无向图特征-边连接数max_degrees :统计每个字节的边连接数 无向图特征-最大连通子图规模max_components :统计每个实例最大连通子图规模 无向图特征——pagerank值:根据Google的pagerank算法计算每个节点
【文件预览】:
MatchModels-master
----lstm-dssm.py(3KB)
----images()
--------mvlstm.png(69KB)
--------arcii.png(101KB)
--------lstm-dssm.png(246KB)
--------cnn-dssm.png(449KB)
--------params.png(17KB)
--------textcnn.png(551KB)
--------Code.png(51KB)
----readme.md(6KB)
----textcnn.py(4KB)
----cnn-dssm.py(8KB)
----mvlstm.py(1001B)
----arcii.py(7KB)
----Feature.ipynb(112KB)