[unofficial] OpenAI GPT-4 Tokenizer
收藏RapidAPI2023-11-12 更新2024-05-11 收录
下载链接:
https://rapidapi.com/abdelbeldy/api/unofficial-openai-gpt-4-tokenizer
下载链接
链接失效反馈官方服务:
资源简介:
Takes a prompt of any length and returns the number of tokens
提供机构:
abdelbeldy
创建时间:
2023-11-12
搜集汇总
数据集介绍

背景与挑战
背景概述
该数据集提供了OpenAI GPT-4的非官方分词器,能够处理任意长度的输入提示,并计算其对应的token数量。
以上内容由遇见数据集搜集并总结生成



