Solid-ALIA / app.py
joackoEsp's picture
Update app.py
8b24bf2 verified
raw
history blame
2.19 kB
import gradio as gr
from transformers import AutoModelForCausalLM, AutoTokenizer
import torch
# Cargar el modelo y el tokenizador solo una vez para evitar recargas
model_name = "BSC-LT/salamandra-2b"
if "tokenizer" not in globals():
tokenizer = AutoTokenizer.from_pretrained(model_name, trust_remote_code=True)
tokenizer.pad_token = tokenizer.eos_token # 🔹 Evita errores de atención
if "model" not in globals():
model = AutoModelForCausalLM.from_pretrained(model_name, torch_dtype=torch.float16)
model.eval() # 🔹 Optimiza la inferencia para que sea más rápida
# Función exclusiva para humanización de texto
def humanize_text(input_text):
system_prompt = (
"Reescribe el siguiente texto para que suene más natural y conversacional. "
"Usa frases más cortas y directas, como si lo explicara alguien en una conversación informal. "
"Evita estructuras rígidas o excesivamente formales. "
"Haz que la lectura sea más fluida sin perder información."
)
prompt = f"{system_prompt}\n\nTexto original: {input_text}\n\nTexto humanizado:"
inputs = tokenizer(prompt, return_tensors="pt", padding=True, truncation=True)
outputs = model.generate(
inputs.input_ids,
attention_mask=inputs.attention_mask,
max_new_tokens=150, # 🔹 Más margen para reformular el texto
do_sample=True, # 🔹 Mantiene variabilidad en la reescritura
temperature=0.85, # 🔹 Permite más fluidez sin inventar datos
top_p=0.9, # 🔹 Mantiene coherencia en la reescritura
repetition_penalty=1.05, # 🔹 Reduce rigidez en la estructura del texto
early_stopping=True,
)
return tokenizer.decode(outputs[0], skip_special_tokens=True)
# Interfaz en Gradio
with gr.Blocks() as demo:
gr.Markdown("# ✍️ Humanización de Texto con ALIA")
input_text = gr.Textbox(label="Pega aquí el texto generado por IA para humanizar")
output_text = gr.Textbox(label="Texto humanizado por ALIA", interactive=False)
submit_button = gr.Button("Humanizar Texto")
submit_button.click(humanize_text, inputs=input_text, outputs=output_text)
demo.launch()