Solid-ALIA / app.py
joackoEsp's picture
Update app.py
5ef6d7c verified
raw
history blame
2.04 kB
import gradio as gr
from transformers import AutoModelForCausalLM, AutoTokenizer
import torch
# Cargar el modelo y el tokenizador solo una vez para evitar recargas
model_name = "BSC-LT/salamandra-2b"
if "tokenizer" not in globals():
tokenizer = AutoTokenizer.from_pretrained(model_name, trust_remote_code=True)
tokenizer.pad_token = tokenizer.eos_token # 馃敼 Evita errores de atenci贸n
if "model" not in globals():
model = AutoModelForCausalLM.from_pretrained(model_name, torch_dtype=torch.float16)
model.eval() # 馃敼 Optimiza la inferencia para que sea m谩s r谩pida
# Funci贸n exclusiva para humanizaci贸n de texto
def humanize_text(input_text):
system_prompt = (
"Reescribe el siguiente texto de manera m谩s natural y humana, "
"manteniendo toda la informaci贸n importante pero con un tono m谩s cercano y fluido."
)
prompt = f"{system_prompt}\n\nTexto original: {input_text}\n\nTexto humanizado:"
inputs = tokenizer(prompt, return_tensors="pt", padding=True, truncation=True)
outputs = model.generate(
inputs.input_ids,
attention_mask=inputs.attention_mask,
max_new_tokens=100, # 馃敼 Se aumenta para evitar cortes en textos largos
do_sample=True, # 馃敼 Mantiene variabilidad en la reescritura
temperature=0.6, # 馃敼 Da un poco m谩s de flexibilidad en la generaci贸n
top_p=0.9, # 馃敼 Mantiene coherencia en la reescritura
repetition_penalty=1.1, # 馃敼 Evita respuestas repetitivas
early_stopping=True,
)
return tokenizer.decode(outputs[0], skip_special_tokens=True)
# Interfaz en Gradio
with gr.Blocks() as demo:
gr.Markdown("# 鉁嶏笍 Humanizaci贸n de Texto con ALIA")
input_text = gr.Textbox(label="Pega aqu铆 el texto generado por IA para humanizar")
output_text = gr.Textbox(label="Texto humanizado por ALIA", interactive=False)
submit_button = gr.Button("Humanizar Texto")
submit_button.click(humanize_text, inputs=input_text, outputs=output_text)
demo.launch()