Update app.py

app.py

@@ -7,7 +7,6 @@ import socketio
 import requests
 import logging
 from threading import Event
-import tiktoken  # 使用 tiktoken 库进行 tokenization
 
 app = Flask(__name__)
 logging.basicConfig(level=logging.INFO)
@@ -77,13 +76,10 @@ def normalize_content(content):
 
 def calculate_tokens(text):
     """
-    使用 tiktoken 库来计算输入和输出文本的 token 数量。
-    Claude 模型可能有不同的 tokenization 规则，但 tiktoken 是一个很好的近似工具。
+    使用字符数近似计算 token 数量。
+    这里假设平均每 4 个字符代表 1 个 token。
     """
-    # 使用 tiktoken 的 GPT-3.5 模型进行 tokenization
-    encoding = tiktoken.encoding_for_model("gpt-3.5-turbo")  # 使用 gpt-3.5-turbo 作为近似模型
-    tokens = encoding.encode(text)
-    return len(tokens)
+    return len(text) // 4  # 近似每 4 个字符为 1 个 token
 
 @app.route('/')
 def root():