WordVectorModel加载巨慢

load一个大约1.5GB的词向量文件,非常慢。之前是很快的,问一下大家有遇到吗?

wordVectorModel = new WordVectorModel(“data/wiki.zh.text.vector”);

2个小时了还没完成,进去打断点看,还是在工作的。

文件太大了吧,我加载腾讯的词向量库10几分钟才能加载完。

加载太慢我的思路是写个脚本,设置缓存,把加载到的w2v转成numpy,tf,或者torch向量保存,这样第一次加载慢后面加载缓存文件就超快了