งานวิจัย (Research)

Permanent URI for this community

https://updc.up.ac.th/handle/123456789/13

Browse

Browsing งานวิจัย (Research) by Author "ญภคกร ไชยมงคล"

Now showing 1 - 1 of 1
  • No Thumbnail Available
    Item
    การพัฒนารูปแบบการฝึก AI โดยใช้ Large Language Models (LLM) เพื่อเกษียนหนังสือราชการ กรณีศึกษา สถาบันนวัตกรรมการเรียนรู้ มหาวิทยาลัยพะเยา
    (มหาวิทยาลัยพะเยา, 2025) ญภคกร ไชยมงคล; ปริญาพร สันตะจิตต์
    การวิจัยนี้มีวัตถุประสงค์ เพื่อพัฒนารูปแบบการฝึกปัญญาประดิษฐ์ (AI) โดยใช้แบบจำลองภาษาขนาดใหญ่ (Large Language Models: LLM) และเพื่อศึกษาผลการนำ AI มาใช้เพิ่มประสิทธิภาพในกระบวนการเกษียนหนังสือราชการ กรณีศึกษา สถาบันนวัตกรรมการเรียนรู้ มหาวิทยาลัยพะเยา ระเบียบวิธีวิจัยเป็นการพัฒนาระบบต้นแบบ AI ที่ทำงานบนเซิร์ฟเวอร์ภายในองค์กร (On-premise) เพื่อรักษาความปลอดภัยของข้อมูล โดยใช้แบบจำลองภาษา Llama 3 ผ่านกรอบการทำงาน Ollama ร่วมกับสถาปัตยกรรม Retrieval-Augmented Generation (RAG) ซึ่งดึงข้อมูลจากคลังความรู้ที่สร้างจากเอกสารราชการของสถาบันฯ การประเมินประสิทธิภาพดำเนินการใน 3 มิติ ได้แก่ (1) การประเมินเชิงปริมาณด้วยตัวชี้วัดมาตรฐาน เช่น F1-Score, BLEU, และ ROUGE, (2) การประเมินโดยผู้เชี่ยวชาญ 3 ท่าน เพื่อตรวจสอบความเที่ยงตรงของเครื่องมือวิจัย (IOC) และประเมินประสิทธิภาพของระบบ, และ (3) การประเมินความพึงพอใจโดยกลุ่มผู้ใช้งานจริง ซึ่งเป็นบุคลากรของสถาบันฯ จำนวน 40 คน ผลการวิจัยพบว่า สามารถพัฒนาระบบต้นแบบ AI ได้สำเร็จตามรูปแบบที่วางแผนไว้ ผลการประเมินเชิงปริมาณแสดงให้เห็นถึงประสิทธิภาพในระดับสูง โดยมีคะแนน F1-Score สำหรับการตอบคำถามเชิงข้อเท็จจริงอยู่ที่ 0.85 และคะแนน BLEU สำหรับการร่างข้อความอยู่ที่ 0.60 ด้านการประเมินโดยผู้เชี่ยวชาญ พบว่า เครื่องมือวิจัยมีความน่าเชื่อถือ (ค่า IOC เฉลี่ย 0.82) และระบบต้นแบบมีประสิทธิภาพโดยรวมในระดับมากที่สุด (ค่าเฉลี่ย 4.50 จาก 5) โดยเฉพาะอย่างยิ่งในด้านศักยภาพการนำไปประยุกต์ใช้จริง ขณะที่ผลการประเมินจากผู้ใช้งานจริงมีความพึงพอใจโดยรวมในระดับมาก (ค่าเฉลี่ย 3.88 จาก 5) โดยพึงพอใจสูงสุดในประเด็นที่ระบบช่วยเพิ่มผลงานและลดต้นทุนกำลังคน (ค่าเฉลี่ย 4.00) โดยสรุป รูปแบบการฝึก AI ที่พัฒนาขึ้นสามารถนำมาใช้ในกระบวนการเกษียนหนังสือราชการได้อย่างมีประสิทธิภาพ ช่วยลดระยะเวลาและข้อผิดพลาดเพิ่มประสิทธิผลในการทำงาน และได้รับการยอมรับในเชิงบวกจากทั้งผู้เชี่ยวชาญและผู้ใช้งานจริง ซึ่งชี้ให้เห็นถึงศักยภาพในการนำไปพัฒนาต่อยอดและขยายผลในหน่วยงานอื่นต่อไป