728x90

api가 1000토큰에 0.002$라곤 나와있어서 적당히 1토큰이 형태소 정도겠거니로 생각했었다.

검색하다보니 openai 에서 tokenizer를 서비스하고 있어서 소개한다.

https://platform.openai.com/tokenizer

 

OpenAI API

An API for accessing new AI models developed by OpenAI

platform.openai.com

728x90

+ Recent posts