改进token计算精度并修复类型错误

- 在 openai_to_claude.ts 中使用 tiktoken 精确计算 token 数量，替代简单的长度估算
- 修复 tiktoken.ts 中的 TypeScript 类型错误，添加类型断言以支持模型参数

Author: CassiopeiaCode

deno-proxy/src/openai_to_claude.ts

@@ -2,6 +2,7 @@ import { ParsedInvokeCall, ParserEvent } from "./types.ts";
 import { SSEWriter } from "./sse.ts";
 import { TextAggregator } from "./aggregator.ts";
 import { ProxyConfig } from "./config.ts";
+import { countTokensWithTiktoken } from "./tiktoken.ts";
 
 function generateToolId(): string {
   // 生成随机 ID：toolu_ + 12位随机字符
@@ -116,8 +117,8 @@ export class ClaudeStream {
   private async flushText(text: string) {
     if (!text) return;
     await this.ensureTextBlock();
-    // 使用 tiktoken 估算 token，然后应用倍数
-    const estimatedTokens = Math.ceil(text.length * 0.25); // 简单估算
+    // 使用 tiktoken 精确计算 token，然后应用倍数
+    const estimatedTokens = countTokensWithTiktoken(text, "cl100k_base");
     this.context.totalOutputTokens += estimatedTokens;
     await this.writer.send({
       event: "content_block_delta",
@@ -167,8 +168,8 @@ export class ClaudeStream {
   private async emitThinking(content: string) {
     if (!content) return;
     await this.ensureThinkingBlock();
-    // 使用 tiktoken 估算 token，然后应用倍数
-    const estimatedTokens = Math.ceil(content.length * 0.25); // 简单估算
+    // 使用 tiktoken 精确计算 token，然后应用倍数
+    const estimatedTokens = countTokensWithTiktoken(content, "cl100k_base");
     this.context.totalOutputTokens += estimatedTokens;
     await this.writer.send({
       event: "content_block_delta",

deno-proxy/src/tiktoken.ts

@@ -21,7 +21,8 @@ function getEncoderForModel(model: string): any {
   let encoder;
   try {
     // 尝试根据模型获取对应的编码器
-    encoder = encodingForModel(model);
+    // 使用类型断言来告诉 TypeScript 这是一个有效的 TiktokenModel
+    encoder = encodingForModel(model as any);
   } catch (error) {
     // 如果模型不支持，回退到 cl100k_base (GPT-4 的编码器)
     console.warn(`Model ${model} not found in tiktoken, falling back to cl100k_base`);