LLM Knowledge Graph Builder este unul dintre instrumentele Ecosistem GraphRAG de la Neo4j, care vă permite să transformați datele nestructurate în grafice dinamice ale cunoștințelor. Este integrat cu un chatbot de generație crescută prin recuperare (RAG), permițând interogări în limbaj natural și informații explicabile asupra datelor dvs.   Începeți cu GraphRAG: Instrumentele ecosistemului Neo4j  Ce este Neo4j LLM Knowledge Graph Builder?  Neo4j   este o aplicație online inovatoare pentru a transforma textul nestructurat într-un grafic de cunoștințe fără cod și fără Cypher, oferind o experiență magică de la text la grafic. Utilizează modele ML (LLM: OpenAI, Gemini, Diffbot) pentru a transforma PDF-uri, pagini web și videoclipuri YouTube într-un grafic de cunoștințe al entităților și al relațiilor lor. LLM Knowledge Graph Builder  Partea frontală este o aplicație React bazată pe   , iar partea din spate este o aplicație Python FastAPI. Utilizează   cu care Neo4j l-a contribuit la LangChain. Needle Starter Kit modulul llm-graph-transformer   Aplicația oferă o experiență perfectă, urmând patru pași simpli:    Acceptă diverse surse de date, inclusiv documente PDF, pagini Wikipedia, videoclipuri YouTube și multe altele. Ingestie de date —    Folosește LLM-uri pentru a identifica și extrage entități și relații din text nestructurat. Recunoașterea entităților —    Convertește entitățile și relațiile recunoscute într-un format grafic, folosind capabilitățile grafice Neo4j. Construcție grafică —    Oferă o interfață web intuitivă pentru ca utilizatorii să interacționeze cu aplicația, facilitând încărcarea surselor de date, vizualizarea graficului generat și interacțiunea cu un agent RAG. Această capacitate este deosebit de interesantă, deoarece permite interacțiunea intuitivă cu datele, asemănătoare cu a avea o conversație cu graficul de cunoștințe în sine - nu sunt necesare cunoștințe tehnice.  Interfață cu utilizatorul —  Să-l încercăm  Oferim aplicația în   fără carduri de credit necesare și fără chei LLM - fără frecări. mediul nostru găzduit de Neo4j,  Alternativ, pentru a-l rula local sau în mediul dvs., vizitați   și urmați instrucțiunile pas cu pas pe care le vom acoperi în această postare. depozitul public GitHub  Înainte să deschidem și să folosim LLM Knowledge Graph Builder, să creăm o nouă bază de date Neo4j. Pentru asta, putem folosi o bază de date AuraDB gratuită urmând acești pași:  Conectează-te sau creează un cont la   . https://console.neo4j.io  Sub Instanțe, creați o nouă bază de date gratuită AuraDB.  Descărcați fișierul de acreditări.  Așteptați până când instanța rulează.  Acum că avem baza de date Neo4j în funcțiune și acreditările noastre, putem deschide LLM Knowledge Graph Builder și faceți clic pe   în colțul din dreapta sus.  Conectare la Neo4j Aruncați fișierul de acreditări descărcat anterior în dialogul de conectare. Toate informațiile trebuie completate automat. Alternativ, puteți introduce totul manual.  Crearea graficului de cunoștințe  Procesul începe cu asimilarea datelor dvs. nestructurate, care sunt apoi trecute prin LLM pentru a identifica entitățile cheie și relațiile lor.  Puteți trage și plasa PDF-uri și alte fișiere în prima zonă de introducere din stânga. A doua intrare vă va permite să copiați/lipiți linkul către un videoclip YouTube pe care doriți să îl utilizați, în timp ce a treia intrare necesită un link către o pagină Wikipedia.  Pentru acest exemplu, voi încărca câteva PDF-uri pe care le am despre o companie din lanțul de aprovizionare numită GraphACME,   și un   despre Directiva de due diligence în materie de durabilitate corporativă (CSDDD), precum și două pagini de pe Wikipedia:   și   . un articol de presă de la Forbes videoclip YouTube Directiva de due diligence privind sustenabilitatea corporativă Bangladesh  În timp ce încarcă fișierele, aplicația va stoca sursele încărcate ca noduri de document în grafic folosind LangChain Document Loaders și parsere YouTube. Odată ce toate fișierele au fost încărcate, ar trebui să vedeți ceva similar cu acesta:   Tot ce trebuie să facem acum este să selectăm modelul de utilizat, să facem clic pe   și să lăsăm magia să facă restul pentru tine! Generare grafic  Dacă doriți doar să generați o selecție de fișiere, puteți selecta mai întâi fișierele (cu caseta de selectare din prima coloană a tabelului) și faceți clic pe   . Generare grafic   ⚠️  Rețineți că, dacă doriți să utilizați o schemă grafică predefinită sau propria dvs., puteți să dați clic pe pictograma de setare din colțul din dreapta sus și să selectați o schemă predefinită din meniul derulant, să utilizați propria dvs. notând etichetele și relațiile nodurilor, extrageți schema existentă dintr-o bază de date Neo4j existentă sau copiați/lipiți text și cereți LLM să o analizeze și să vină cu o schemă sugerată.  În timp ce vă procesează fișierele și vă creează Knowledge Graph, permiteți-mi să rezumam ce se întâmplă sub capotă:  Conținutul este împărțit în bucăți.  Bucățile sunt stocate în grafic și conectate la nodul document și unele la altele pentru modele RAG avansate.  Bucățile foarte similare sunt conectate cu o relație SIMILĂ pentru a forma un grafic K-Nearest Neighbors.  Înglobările sunt calculate și stocate în bucăți și index vectorial.  Folosind llm-graph-transformer sau diffbot-graph-transformer, entitățile și relațiile sunt extrase din text.  Entitățile sunt stocate în grafic și conectate la bucățile originare.  Explorați graficul dvs. de cunoștințe  Informațiile extrase din documentul dvs. sunt structurate într-un format grafic, unde entitățile devin noduri, iar relațiile se transformă în margini care conectează aceste noduri. Frumusețea utilizării Neo4j constă în capacitatea sa de a stoca și interoga eficient aceste rețele de date complexe, făcând graficul de cunoștințe generat imediat util pentru o varietate de aplicații.  Înainte de a folosi agentul RAG pentru a pune întrebări despre datele noastre, putem selecta un document (sau mai multe) cu caseta de selectare și faceți clic pe   . Aceasta va afișa entitățile create pentru documentele pe care le-ați selectat; De asemenea, puteți afișa documentul și nodul de bucăți în acea vizualizare:  Afișare grafic  Butonul   va deschide   pentru a vă ajuta să vizualizați și să navigați în graficul de cunoștințe nou creat. Următoarea acțiune —   șterge documentele și bucățile selectate din grafic (și entitățile dacă le selectați în opțiuni). Open Graph with Bloom Neo4j Bloom Ștergeți fișierele —  Vorbește cu cunoștințele tale  Acum vine ultima parte: agentul RAG pe care îl puteți vedea în panoul din dreapta.  Procesul de recuperare – Cum funcționează?  Imaginea de mai jos prezintă o vedere simplificată a procesului GraphRAG.   Când utilizatorul pune o întrebare, folosim indexul vectorial Neo4j cu o interogare de recuperare pentru a găsi cele mai relevante bucăți pentru întrebare și entitățile lor conectate până la o adâncime de 2 hop. De asemenea, rezumăm istoricul chatului și îl folosim ca element pentru a îmbogăți contextul.  Diferitele intrări și surse (întrebarea, rezultatele vectorului, istoricul chatului) sunt toate trimise modelului LLM selectat într-un prompt personalizat, solicitând să furnizeze și să formateze un răspuns la întrebarea adresată pe baza elementelor și contextului furnizat. Desigur, promptul are mai multă magie, cum ar fi formatarea, solicitarea de a cita surse, pentru a nu specula dacă un răspuns nu este cunoscut etc. Promptul complet și instrucțiunile pot fi găsite ca   în   . FINAL_PROMPT QA_integration.py  Puneți întrebări legate de datele dvs  În acest exemplu, am încărcat documente interne despre o companie falsă numită GraphACME (cu sediul în Europa), producând și documentând întreaga strategie și produse pentru lanțul de aprovizionare. Am încărcat, de asemenea, un articol de presă și un videoclip YouTube care explică noul CSDDD, impactul și reglementarea acestuia. Acum îi putem adresa chatbot-ului întrebări despre cunoștințele noastre interne (false) ale companiei - întrebări despre legea CSDDD sau chiar întrebări despre ambele, cum ar fi solicitarea listei de produse pe care le produce GraphACME, dacă acestea vor fi afectate de regulamentul CSDDD și dacă da, cum va afecta compania.   Funcții de chat  În partea dreaptă a ecranului de start, veți observa trei butoane atașate ferestrei de chat:    va închide interfața chatbot. Închidere    va șterge istoricul de chat al sesiunii curente. Ștergeți istoricul de chat    va deschide interfața chatbot în modul ecran complet. Fereastra Maximizați  Pe răspunsurile agentului RAG, veți găsi trei caracteristici după răspuns:    vor deschide o fereastră pop-up de recuperare a informațiilor care arată modul în care agentul RAG a colectat și utilizat surse (documente), fragmente și entități. Sunt incluse și informații despre modelul utilizat și consumul de token. Detaliile    va copia conținutul răspunsului în clipboard. Copiere    va citi conținutul răspunsului cu voce tare.  Text-to-Speech  Învelire  Pentru a aprofunda în LLM Knowledge Graph Builder,   oferă o mulțime de informații, inclusiv cod sursă și documentație. În plus,   noastră oferă îndrumări detaliate cu privire la început, iar   oferă mai multe informații despre instrumentele și aplicațiile mai largi disponibile. Depozitul GitHub documentația GenAI Ecosystem  Ce urmează — Capacități de contribuție și extindere  Experiența dumneavoastră cu LLM Knowledge Graph Builder este neprețuită. Dacă întâmpinați erori, aveți sugestii pentru noi funcții, doriți să contribuiți sau doriți să vedeți anumite îmbunătățiri, platforma comunității este locul perfect pentru a vă împărtăși gândurile. Pentru cei adepți în codificare, contribuția directă pe GitHub poate fi o modalitate plină de satisfacții de a ajuta la dezvoltarea proiectului. Contribuțiile și contribuțiile dvs. nu numai că ajută la îmbunătățirea instrumentului, ci și la stimularea unei comunități colaborative și inovatoare:   Comunitatea online Neo4j   Alăturați-vă serverului Neo4j Discord!  Resurse  Aflați mai multe despre noile resurse pentru aplicațiile GenAI:   . Aceste instrumente open-source facilitează începerea cu aplicațiile GenAI bazate pe grafice de cunoștințe, care ajută la îmbunătățirea calității răspunsului și explicabilitatea și accelerează dezvoltarea și adoptarea aplicațiilor. Neo4j GraphRAG Ecosystem Tools  Video   https://youtu.be/Z42VVH9qngo?si=lfu3ie5zS9woQ8h9&embedable=true  Legături   Începeți cu GraphRAG: Instrumentele ecosistemului Neo4j   GitHub – neo4j-labs/llm-graph-builder: construcția graficului Neo4j din date nestructurate   Neo4j LLM Knowledge Graph Builder – Extrageți noduri și relații din text nestructurat (PDF, YouTube, pagini web) – Neo4j Labs   Ecosistemul GenAI – Laboratoarele Neo4j   Needle StarterKit 2.0: Șabloane, Chatbot și multe altele!

This story contains new, firsthand information uncovered by the writer.

This writer has a vested interest be it monetary, business, or otherwise, with 1 or more of the products or companies mentioned within.

Acest audio este produs în limba originală a poveștii!

Stăpânirea graficelor de cunoștințe LLM: construiți și implementați GraphRAG în doar 5 minute

About Author

COMENTARII

Etichete suspendate

ACEST ARTICOL A FOST PREZENTAT IN

Related Stories

The World is Finally Ready for a New Internet

The Spacecoin Writing Contest by Spacecoin and HackerNoon: Round 2 Results 🎉

How Soon Can Google Investors Make Bank?

The Spacecoin Writing Contest by Spacecoin and HackerNoon: Round 1 Results 🎉

The World is Finally Ready for a New Internet

The Spacecoin Writing Contest by Spacecoin and HackerNoon: Round 2 Results 🎉

How Soon Can Google Investors Make Bank?

The Spacecoin Writing Contest by Spacecoin and HackerNoon: Round 1 Results 🎉

Light-Mode

Classic

Newspaper

Minty

Dark-Mode

Neon Noir

Minty

HN StartUps