docs: tokenizer & model

README.md

@@ -40,6 +40,30 @@ print(outputs)
 # [{'generated_text': 'အီတလီနိုင်ငံသည် ဥရောပတိုက်၏ အမျိုးသားရေးရာ ကိစ္စများကို ရပ်ဖက်အာဏာရှိသော စီချလျက်ရှိနေခဲ့ရာ မှတ်တမ်းများပါဝင်ကြသည်။ ထိုခေတ် အခါက ရောမနိုင်ငံတော်၏ အမွေအနှစ်နေရာများတွင် ဥရောပတိုက်တွင် ဥရောပတိုက်တွင် ဥပဒေစနစ်နှစ်ခု အဖြစ် စေလွှတ်သော ပြဋ္ဌာန်းသတ်ရန် ဥပဒေစနစ်ကို ပြန်လည်ပြုစုခြင်းကို '}]
 ```
 
+### alternative ways
+
+```python
+
+model = GPT2LMHeadModel.from_pretrained("jojo-ai-mst/MyanmarGPT")
+tokenizer = GPT2Tokenizer.from_pretrained("jojo-ai-mst/MyanmarGPT")
+
+def generate_text(prompt, max_length=300, temperature=0.8, top_k=50):
+    input_ids = tokenizer.encode(prompt, return_tensors="pt").cuda()
+    output = model.generate(
+        input_ids,
+        max_length=max_length,
+        temperature=temperature,
+        top_k=top_k,
+        pad_token_id=tokenizer.eos_token_id,
+        do_sample=True
+    )
+    for result in output:
+      generated_text = tokenizer.decode(result, skip_special_tokens=True)
+      print(generated_text)
+
+generate_text("အီတလီ ")
+```
+
 
 ## Here are the guidelines for using the MyanmarGPT license,
 - MyanmarGPT is free to use for everyone,