文件名称：GPT-3-Encoder:适用于GPT-2 GPT-3的Javascript BPE编码解码器
文件大小：602KB
文件格式：ZIP
更新时间：2024-06-03 02:45:21
JavaScript
适用于GPT-2 / GPT-3的GPT-3-Encoder Javascript BPE编码解码器 关于 GPT-2和GPT-3使用字节对编码将文本转换为一系列整数以输入模型。 这是OpenAI原始python编码器/解码器的javascript实现，可在找到 用npm安装 npm install gpt-3-encoder 用法 兼容Node> = 12 const {encode, decode} = require('gpt-3-encoder') const str = 'This is an example sentence to try encoding out on!' const encoded = encode(str) console.log('Encoded this string looks like: ', encoded) console.log('We
【文件预览】：
GPT-3-Encoder-master
----.github()
--------workflows()
----example.js(431B)
----Encoder.js(4KB)
----LICENSE(1KB)
----encoder.json(1018KB)
----jest.config.js(422B)
----README.md(845B)
----encoder.py(4KB)
----vocab.bpe(446KB)
----Encoder.test.js(936B)
----.gitignore(13B)
----package-lock.json(174KB)
----package.json(577B)