기존 작성된 캐릭터를 전부 한국어로 변경하고 퍼메도 한국어 써서 적용했음.

risuai는 조금전에 새로 받아서 업데이트했는데 토크나이저 계산하고 실제계산이 안맞음

API사용량 측정 결과 실제 사용 토큰은 Input 6401, output 207로 차이가 좀 있었다.

물론 output이야 그냥 최대 토큰 찍어주는거니까 이상할꺼 없지만 input량이 차이남.

그리고 한국어 토큰이 생각외로 1.1배보다는 많이 먹는 것 같긴하다.

정확한 계산이 risu에서 안보여서 확실치는 않지만, 영문 프로필+퍼메+작노가 1000토큰 정도였고, 대화문 진행된게 1000토큰 정도 됨. 프롬은 3200토큰. 2딸깍에 오버헤드가 1000토큰이나 잡아먹는다고 보긴 힘드니 한국어 토큰이 생각보다 조금 더 먹는다고 봐야될것 같다.