# 【tokenizers-***.jar***文档.zip】 中包含：
***文档：【tokenizers-***-javadoc-API文档-中文(简体)版.zip】
jar包下载地址：【tokenizers-***.jar下载地址(官方地址+国内镜像地址).txt】
Maven依赖：【tokenizers-***.jar Maven依赖信息(可用于项目pom.xml).txt】
Gradle依赖：【tokenizers-***.jar Gradle依赖信息(可用于项目build.gradle).txt】
源代码下载地址：【tokenizers-***-sources.jar下载地址(官方地址+国内镜像地址).txt】
# 本文件关键字：
tokenizers-***.jar***文档.zip,java,tokenizers-***.jar,ai.djl.huggingface,tokenizers,***,ai.djl.engine.rust,jar包,Maven,第三方jar包,组件,开源组件,第三方组件,Gradle,djl,huggingface,中文API文档,手册,开发手册,使用手册,参考手册
# 使用
方法：
解压 【tokenizers-***.jar***文档.zip】，再解压其中的 【tokenizers-***-javadoc-API文档-中文(简体)版.zip】，双击 【index.html】 文件，即可用浏览器打开、进行查看。
# 特殊说明：
·本文档为人性化翻译，精心制作，请放心使用。
·只翻译了该翻译的内容，如：注释、说明、描述、用法讲解 等；
·不该翻译的内容保持原样，如：类名、
方法名、包名、类型、关键字、代码 等。
# 温馨提示：
（1）为了防止解压后路径太长导致浏览器无法打开，推荐在解压时选择“解压到当前文件夹”（放心，自带文件夹，文件不会散落一地）；
（2）有时，一套Java组件会有多个jar，所以在下载前，请仔细阅读本篇描述，以确保这就是你需要的文件；
# Maven依赖：
```
<dependency>
<groupId>ai.djl.huggingface</groupId>
<artifactId>tokenizers</artifactId>
<version>***</version>
</dependency>
```
# Gradle依赖：
```
Gradle:
implementation group: 'ai.djl.huggingface', name: 'tokenizers', version: '***'
Gradle (Short):
implementation 'ai.djl.huggingface:tokenizers:***'
Gradle (Kotlin):
implementation("ai.djl.huggingface:tokenizers:***")
```
# 含有的 Java package（包）：
```
ai.djl.engine.rust
ai.djl.engine.rust.zoo
ai.djl.huggingface.tokenizers
ai.djl.huggingface.tokenizers.jni
ai.djl.huggingface.translator
ai.djl.huggingface.zoo
```
# 含有的 Java class（类）：
```
ai.djl.engine.rust.RsEngine
ai.djl.engine.rust.RsEngineProvider
ai.djl.engine.rust.RsModel
ai.djl.engine.rust.RsNDArray
ai.djl.engine.rust.RsNDArrayEx
ai.djl.engine.rust.RsNDArrayIndexer
ai.djl.engine.rust.RsNDManager
ai.djl.engine.rust.RsSymbolBlock
ai.djl.engine.rust.RustLibrary
ai.djl.engine.rust.zoo.RsModelZoo
ai.djl.engine.rust.zoo.RsZooProvider
ai.djl.huggingface.tokenizers.Encoding
ai.djl.huggingface.tokenizers.HuggingFaceTokenizer
ai.djl.huggingface.tokenizers.HuggingFaceTokenizer.Builder
ai.djl.hu
