Update tokenize_and_upload_mistral.py

tokenize_and_upload_mistral.py

@@ -49,7 +49,7 @@ def log(message):
 # === Tokenizer ===
 os.environ["HF_HOME"] = CACHE_DIR
 log(f"🔁 Tokenizer yükleniyor: {MODEL_NAME}")
-tokenizer = AutoTokenizer.from_pretrained(MODEL_NAME, use_fast=True, cache_dir=CACHE_DIR)
+tokenizer = AutoTokenizer.from_pretrained(MODEL_NAME, use_fast=False, cache_dir=CACHE_DIR)
 if tokenizer.pad_token is None:
     log("ℹ️ pad_token tanımlı değil, eos_token atanıyor.")
     tokenizer.pad_token = tokenizer.eos_token