When the RAG we built...Fight life but we fight back! 🦾
A headache with the word "can't find information" when you put it in? 💢
It's not a coincidence, but it's technical!
Today, let's take a look at how to upgrade RAG to be smarter in a leap.
✅ Lost in the middle.
✅ measured with RAGAS to stop thinking that it's accurate.
✅ Upgrade to Modular RAG with a cool Logic Path.
Stack ready tool. The maker is ready (will sleep)! Who uses which one? Comment, let's talk. 👇
# programmer # Developer # selfdevelopment # Data ascience # learnonlemon8
ในการใช้งาน Retrieval-Augmented Generation (RAG) หลายคนอาจเคยเจออาการ "หลงทางตรงกลาง" หรือข้อมูลบางส่วนในบริบทที่ใส่เข้าไปถูกละเลยซึ่งเกิดจาก LLM ไม่สามารถจำข้อมูลในช่วงกลางของบริบทได้อย่างถูกต้อง เทคนิคหนึ่งที่ผมใช้เองคือการเลือกขนาด Chunk ที่เหมาะสม (Small-to-Big Retrieval) โดยการค้นหาด้วยประโยคสั้นๆ แต่ดึงทั้งย่อหน้าของเนื้อหามาใช้ ทำให้ข้อมูลที่ส่งให้โมเดลครบถ้วนและแม่นยำกว่า อีกเทคนิคที่สำคัญคือ Modular RAG ที่เน้นการสร้าง Logical Path ซึ่งทำให้โมเดลสามารถประมวลผลข้อมูลเป็นลำดับขั้นตอน แยกความสำคัญและตรวจสอบข้อมูลได้ด้วยตัวเอง เช่น Self-RAG ที่ให้โมเดลตรวจสอบ context ของตัวเองว่าตอบคำถามได้จริงไหม และถ้ายังไม่พอจะกลับไปค้นหาอีกครั้ง ช่วยเพิ่มความแม่นยำและลดความผิดพลาดจากข้อมูลที่ไม่น่าเชื่อถือ สำหรับผู้ที่ต้องการวัดประสิทธิภาพของ RAG แบบเป็นระบบ การใช้ RAGAS Framework จะช่วยให้เราสามารถประเมินค่า Metrics เช่น Faithfulness, Answer Relevance, และ Context Precision ได้แบบอัตโนมัติ ช่วยลดการมโนว่าผลลัพธ์แม่นยำโดยไม่มีข้อมูลยืนยัน เครื่องมือยอดนิยมที่ผมแนะนำตอนเริ่มต้น เช่น LangChain สำหรับการจัดการ orchestration, LlamaIndex สำหรับการจัดการข้อมูล Retrieval แบบเฉพาะ และ Vector DB อย่าง Pinecone, Milvus และ ChromaDB ที่ช่วยเก็บและดึงข้อมูล vector ได้อย่างรวดเร็วและมีประสิทธิภาพ ด้วยการใช้เทคนิคและเครื่องมือเหล่านี้ร่วมกัน ผมพบว่า RAG ที่พัฒนาขึ้นสามารถตอบโจทย์การดึงข้อมูลจากฐานข้อมูลขนาดใหญ่ได้ดีขึ้นมาก ลดปัญหาการ "ข้อมูลหาไม่เจอ" ที่เคยเจอมา และยังช่วยให้ผู้ใช้งานสามารถพัฒนาระบบตอบคำถามด้วย AI ได้อย่างมั่นใจมากขึ้น ลองปรับใช้เทคนิคเหล่านี้ดูนะครับ จะช่วยให้การพัฒนา RAG ของคุณก้าวกระโดดขึ้นจริงๆ!
