POST https://ark.cn-beijing.volces.com/api/v3/tokenization [运行](https://api.volcengine.com/api-explorer/?action=Tokenization&data=%7B%7D&groupName=%E5%88%86%E8%AF%8D&query=%7B%7D&serviceCode=ark&version=2024-01-01) 本文介绍分词 API 的输入输出参数，供您使用接口时查阅字段含义。当前接口只支持文本信息。 ```mixin-react return ( ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_a5fdd3028d35cc512a10bd71b982b6eb.png =20x) [模型计费](https://www.volcengine.com/docs/82379/1099320#%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B) ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_afbcf38bdec05c05089d5de5c3fd8fc8.png =20x) [API Key](https://console.volcengine.com/ark/region:ark+cn-beijing/apiKey?apikey=%7B%7D) ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_f45b5cd5863d1eed3bc3c81b9af54407.png =20x) [接口文档](https://www.volcengine.com/docs/82379/1526787) ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_1609c71a747f84df24be1e6421ce58f0.png =20x) [常见问题](https://www.volcengine.com/docs/82379/1359411) ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_bef4bc3de3535ee19d0c5d6c37b0ffdd.png =20x) [开通模型](https://console.volcengine.com/ark/region:ark+cn-beijing/openManagement?LLM=%7B%7D&OpenTokenDrawer=false) `}> `}>); ``` --- ## 请求参数 > 跳转 [响应参数](#Qu59cel0) ### 请求体 --- **model** `string` `必选` 本次请求使用模型的 Model ID 或[推理接入点](https://www.volcengine.com/docs/82379/1099522) (Endpoint ID)。 --- text string / string[] `必选` 需要分词的内容，支持字符串或字符串列表。 --- ## 响应参数 > 跳转 [请求参数](#RxN8G2nH) --- **id** `string` 本次请求的唯一标识。 --- **model** `string` 本次请求实际使用的模型 ID （模型名称-版本）。 doubao 1.5 代模型的模型名称格式为 doubao\-1\-5\-\*\*。如调用部署doubao\-1.5\-pro\-32k 250115模型的推理接入点，返回model字段信息doubao\-1\-5\-pro\-32k\-250115。 --- **created** `integer` 本次请求创建时间的 Unix 时间戳（秒）。 --- object `string` 固定为 list。 --- data `object[]` 本次请求的分词的结果。属性 --- data.**index** integer 当前元素在 data 列表的索引。 --- data.object `string` 固定为 tokenization。 --- data.total_tokens integer 对应内容的总 token 数量。 --- data.token_ids integer[] 对文本进行分词后的具体词语在词表中的 id 列表。 --- data.offset_mapping Array> 对文本进行分词后的词语偏移量，列表中每个元素是一个包含两个整数的列表：第一个整数表示词或标记在原始文本中的起始索引（是从0开始），第二个整数表示结束索引（不包括该索引处的字符）。

火山方舟大模型服务平台