1 Star 1 Fork 0

modelee / pythia-1b

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
tokenizer_config.json 396 Bytes
一键复制 编辑 原始数据 按行查看 历史
Hailey Schoelkopf 提交于 2023-03-12 18:01 . Upload tokenizer_config.json
{
"add_prefix_space": false,
"bos_token": "<|endoftext|>",
"eos_token": "<|endoftext|>",
"name_or_path": "EleutherAI/gpt-neox-20b",
"special_tokens_map_file": "/admin/home-hailey/.cache/huggingface/hub/models--EleutherAI--gpt-neox-20b/snapshots/4e49eadb5d14bd22f314ec3f45b69a87b88c7691/special_tokens_map.json",
"tokenizer_class": "GPTNeoXTokenizer",
"unk_token": "<|endoftext|>"
}
马建仓 AI 助手
尝试更多
代码解读
代码找茬
代码优化
1
https://gitee.com/modelee/pythia-1b.git
git@gitee.com:modelee/pythia-1b.git
modelee
pythia-1b
pythia-1b
main

搜索帮助

344bd9b3 5694891 D2dac590 5694891