是什么阻止您以文本格式保存word2vec(C程序)输出,然后使用Java代码读取文件并将字符串加载的字符串中加载矢量?

一些代码片段:

// Class to store a hashmap of wordvecs

public class WordVecs {

HashMap wordvecmap;

....

void loadFromTextFile() {

String wordvecFile = prop.getProperty("wordvecs.vecfile");

wordvecmap = new HashMap();

try (FileReader fr = new FileReader(wordvecFile);

BufferedReader br = new BufferedReader(fr)) {

String line;

while ((line = br.readLine()) != null) {

WordVec wv = new WordVec(line);

wordvecmap.put(wv.word, wv);

}

}

catch (Exception ex) { ex.printStackTrace(); }

}

....

}

// class for each wordvec

public class WordVec implements Comparable {

public WordVec(String line) {

String[] tokens = line.split("\\s+");

word = tokens[0];

vec = new float[tokens.length-1];

for (int i = 1; i < tokens.length; i++)

vec[i-1] = Float.parseFloat(tokens[i]);

norm = getNorm();

}

....

}

如果要获取给定单词的最近邻居,可以保留与每个WordVec对象关联的N个最近预先计算的邻居的列表.

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐