Rag Demystifying Local Knowledge Ai

RAG Demystifying Local Knowledge AI

• Large language models (LLM:s) är dåliga på matematik. Numera hanteras det genom att använda separat funktionalitet när sådana typer av frågor ställs.
• Semantic Kernel nämndes också
• RAG:s kan, och bör, utvärderas. För närvarande är industristandarden Ragas.
• Exempel på vektordatabaser är pgVector.
• Beroende på hur stort datasetet som används för språkmodellens träning är så kan det bli jobbigt att göra om träningen. Så tänk och utvärdera databasen ordentligt innan eftersom det verkar svårt att byta mellan vektordatabaser.

Arbetsgången för en en RAG-utökad LLM består i

1. Ta in ostrukurerad och strukturerad data
2. Dela upp datan i delar (chunks)
3. Spara i en vektordatabas
4. Hämta datan (när behov uppstår)
5. Leverera ett svar