跳到内容
//
AI RESOURCE
HUB
资源索引
用途
合集
对比
提示词
教程
术语表
English
简体中文
日本語
Español
Français
Deutsch
한국어
[菜单]
首页
/
术语表
/
分词器(Tokenizer)
分词器(Tokenizer)
将原始文本拆分为模型可处理的词元、并能反向还原的组件。
相关资源
Hugging Face Transformers 教程
学习使用 Hugging Face Transformers 库进行 NLP 和 CV 任务。
OpenAI API 完全指南
从零开始学习 OpenAI API 的使用,包括 GPT-4、DALL·E、Whisper 等模型的调用方法和最佳实践。