Izvor istine izvan RAG-a: istraživanje vođeno dokazima, sledljivost i poslovna vrednost
Source of Truth (SoT) je platforma za donošenje odluka zasnovana na dokazima, dizajnirana da distribuirano znanje preduzeća pretvori u sledljive, pregledne i ponovo upotrebljive zaključke. Ona kombinuje kontrolisano prikupljanje izvora, pretraživanje, istraživačke agente, odnose između dokaza, poreklo podataka, rukovanje protivrečnostima, zaključivanje, kontrolu pristupa i ljudsku proveru, tako da odgovor ne bude samo generisan, već potkrepljen vidljivim putem odlučivanja.
Centralna vrednost nije bolji chatbot. Vrednost je vođeni put od pitanja → dokaza → odnosa → zaključka → provere. Relevantne informacije se mogu brzo pronaći, ali svaka važna tvrdnja može ostati povezana sa svojim izvorom, kontekstom, konkurentskim dokazima i statusom provere.
Model može pomoći u istraživanju i zaključivanju. Struktura dokaza održava kontrolu u rukama organizacije.— Princip dizajna Source of Truth
Šta Source of Truth stvara za organizaciju
Organizacijama retko nedostaju informacije. Veći izazov je što su informacije raspoređene po dokumentima, bazama podataka, izveštajima, timovima i sistemima, dok važne odluke zahtevaju više od jednog rezultata pretrage. SoT stvara kontrolisani sloj inteligencije u kojem se relevantni dokazi mogu locirati, povezati, proceniti i sačuvati.
| Potreba | SoT mogućnost | Praktična vrednost |
|---|---|---|
| Pronalaženje relevantnog znanja | Indeksirani odobreni izvori i pretraživanje | Manje vremena utrošenog na pretragu kroz nepovezane sisteme |
| Razumevanje zašto je zaključak donet | Odnosi između dokaza i poreklo podataka | Vidljiv put od tvrdnje nazad do izvora |
| Rukovanje konfliktnim informacijama | Praćenje protivrečnosti i alternativnih dokaza | Razlike ostaju vidljive umesto da budu tiho spojene |
| Rad sa nepotpunim dokazima | Otvorene tačke i granice važenja | Neizvesnost postaje eksplicitna i pregledna |
| Bezbedna upotreba AI u timovima | RBAC, imenski prostori i ograničeni tokovi rada | AI pristup prati organizacione dozvole i kontekst |
| Ponovna upotreba prethodnog istraživanja | Pregledano znanje i trajna struktura dokaza | Važni nalazi ne nestaju u jednokratnim razgovorima |
| Promena modela bez gubitka znanja | Sloj dokaza nezavisan od modela | Struktura znanja ostaje stabilna dok se AI komponente razvijaju |
DAG je strukturna srž — RAG je jedan sloj pretraživanja
RAG je koristan za razumevanje jednog dela sistema jer pronalazi relevantni izvorni materijal i dostavlja ga kao kontekst AI modelu. U SoT je, međutim, važnija struktura DAG — usmereni aciklični graf. DAG predstavlja kako dokazi, tvrdnje, međunalazi i zaključci zavise jedni od drugih bez stvaranja kružnog opravdanja.
RAG tok odgovara na pitanje: Koji odlomci su relevantni za ovaj upit? SoT graf dokaza odgovara na šire pitanje: Koje tvrdnje zavise od kojih dokaza, koji zaključci zavise od kojih tvrdnji, gde postoje alternative ili protivrečnosti i kako se put zaključivanja može pratiti unazad?
RAG i SoT graf dokaza rešavaju različite delove problema
| RAG | Graf dokaza u SoT | |
|---|---|---|
| Primarna svrha | Pronalaženje relevantnog konteksta za upit | Predstavljanje zavisnosti između dokaza, tvrdnji, nalaza i zaključaka |
| Glavna jedinica | Pronađeni odlomci ili dokumenti | Čvorovi i usmereni odnosi između dokaza |
| Sledljivost | Može citirati pronađene izvore | Može pratiti zaključak kroz lanac koji ga podržava |
| Protivrečnosti | Može pronaći protivrečne odlomke | Može sačuvati konflikt kao eksplicitan odnos ili alternativni put |
| Struktura zaključivanja | Obično se sastavlja u trenutku upita | Čuva se kao eksplicitna struktura zavisnosti |
| Ponovna upotreba | Pretraživanje se ponavlja za svaki upit | Pregledani odnosi mogu postati ponovo upotrebljivo organizaciono znanje |
Od pretraživanja do odlučivanja zasnovanog na dokazima
Dokaz je više od citata
Citat pokazuje odakle informacija dolazi. SoT ide dalje čuvajući odnos između izvora, konkretnog odlomka ili zapažanja, tvrdnje koja iz njega proizlazi, puta zaključivanja koji ga koristi i zaključka koji od njega zavisi.
Ta razlika je važna kada istraživanje ima posledice. Donosilac odluke može želeti da zna ne samo koji dokument je citiran, već i da li citirani materijal zaista podržava tvrdnju, da li se drugi izvor ne slaže, da li je izvor još uvek važeći za trenutni slučaj i da li zaključak ostaje unutar svojih granica dokaza.
| Sloj | Uloga u SoT |
|---|---|
| Izvor | Originalni dokument, skup podataka, zapis ili odobreni spoljni unos |
| Dokaz | Konkretan odlomak, vrednost, zapažanje ili izdvojeni nalaz |
| Tvrdnja | Izjava koju dokaz može podržati, oslabiti ili opovrgnuti |
| Odnos | Podrška, zavisnost, alternativa, protivrečnost ili druga eksplicitna veza |
| Zaključak | Sinteza izvedena iz podržanih puteva |
| Status provere | Da li je rezultat privremen, pregledan, prihvaćen ili zamenjen |
| Istorija revizije | Kako su se znanje i njegova struktura podrške menjali tokom vremena |
Istraživački agenti proširuju istragu, ne autoritet
Neka pitanja se ne mogu rešiti u jednom koraku pretrage. Istraživački agenti stoga mogu da planiraju i izvršavaju više ograničenih operacija: pretragu, pregled izvora, upoređivanje dokaza, identifikovanje praznina, formulisanje dodatnih upita i prikupljanje dodatnih nalaza.
Agent ubrzava istragu, ali autoritet ostaje u strukturi dokaza i procesu pregleda. Izlaz agenta može postati kandidat za nalaz; on ne postaje automatski organizaciona istina.
Protivrečnosti, alternative i otvorene tačke ostaju vidljive
Jedna od najjačih razlika između sistema vođenog dokazima i konvencionalnog generativnog interfejsa je to što SoT ne mora da sakrije neslaganje. Dva izvora mogu podržavati različite tvrdnje. Obavezni dokument može nedostajati. Zaključak može biti valjan samo pod određenim uslovima. Ta stanja mogu ostati eksplicitna u grafu umesto da budu spljoštena u jedan tečan odgovor.
Svaki zaključak ima granicu dokaza
Zaključak je jak onoliko koliko je jaka putanja dokaza koja ga podržava. SoT stoga tretira granicu valjanosti odgovora kao arhitektonsku brigu: koji dokazi su bili dostupni, koje pretpostavke su korišćene, koje alternative su razmatrane, šta ostaje nerešeno i pod kojim uslovima zaključku treba i dalje verovati.
To omogućava kasniji pregled. Kada se izvor promeni, kada stigne novi dokument ili kada se prethodno otvoreno pitanje reši, pogođena putanja zavisnosti može se ponovo proceniti bez rekonstruisanja celokupnog istraživačkog procesa iz sećanja.
RBAC, imenski prostori i obim slučaja drže istraživanje unutar organizacionih granica
Preduzetnička inteligencija mora poštovati organizacione granice. SoT kombinuje obim slučaja, imenske prostore i kontrolu pristupa zasnovanu na ulogama tako da istraživanje može biti ograničeno na ispravan domen znanja, projekat, zakupca, odeljenje ili korisničku ulogu.
- Obim slučaja: definiše koje pitanje i prostor dokaza pripadaju aktivnom istraživačkom zadatku.
- Imenski prostori: razdvajaju domene znanja i pružaju strukturnu osnovu za politike pristupa i životnog ciklusa.
- RBAC: kontroliše koji korisnici i uloge mogu pristupiti funkcijama, izvorima i rezultatima.
- Granice podataka: drže pretragu i zaključivanje usklađenim sa odobrenim informacionim prostorima.
- Radni tokovi pregleda: razdvajaju generisani ili privremeni izlaz od prihvaćenog organizacionog znanja.
Modeli se mogu menjati bez postajanja sistema znanja
Različiti zadaci mogu koristiti različite AI sposobnosti: lokalne modele, cloud modele, modele za ekstrakciju, modele za zaključivanje ili specijalizovane agente. SoT drži te izbore modela odvojenim od sloja dokaza. Model pomaže u obradi znanja; on ne poseduje znanje.
Ovo razdvajanje stvara praktičnu fleksibilnost. Model se može zameniti, nadograditi ili drugačije usmeriti dok osnovni izvori, tvrdnje, odnosi dokaza, stanja pregleda i istorija revizije ostaju netaknuti.
Ljudski pregled ostaje konačni autoritet
SoT može automatizovati istraživačke korake, prikupljanje dokaza, upoređivanje i sintezu, ali prihvatanje sa posledicama ostaje odluka upravljanja. Odgovorni recenzent ili definisani organizacioni radni tok odlučuje da li se zaključak prihvata, objavljuje, revidira ili odbija.
Automatizujte istraživačku putanju, ne organizacioni autoritet.— Princip upravljanja izvora istine
Gde ovo stvara praktičnu vrednost
Arhitektura je korisna svuda gde odluke zavise od distribuirane evidencije, ponovljenog istraživanja ili objašnjivih zaključaka. Najjači slučajevi upotrebe nisu definisani samo industrijom, već potrebom za sledljivošću, kontrolisanim pristupom i znanjem koje se može ponovo koristiti.
| Slučaj upotrebe | Šta SoT doprinosi |
|---|---|
| Istraživanje politika i usklađenosti | Sledljiva evidencija, suprotstavljena tumačenja i istorija pregleda |
| Podrška tehničkim odlukama | Arhitektonska evidencija, alternative, zavisnosti i obrazloženje odluke |
| Due diligence i pregled dokumenata | Strukturirani nalazi kroz velike skupove izvora sa poreklom |
| Istraživanje internog znanja | Pretraga plus zaključci koji se mogu ponovo koristiti umesto jednokratnih odgovora u četu |
| Analiza incidenata i uzroka | Putevi evidencije koji povezuju zapažanja, hipoteze i verifikovane uzroke |
| Inteligencija o proizvodima i tržištu | Više izvora, poređenje tvrdnji i eksplicitna neizvesnost |
| Regulisani ili osetljivi domeni | RBAC, imenski prostori, statusi pregleda i revizorski putevi odlučivanja |
Šta SoT jeste — i šta nije
Granice Source of Truth
SoT jeste
- Sloj za donošenje odluka zasnovan na evidenciji
- Strukturirani tok istraživanja i znanja
- Trajni graf evidencije i zavisnosti
- Kontrolisana tačka integracije za RAG, agente i modele
- Sistem za poreklo, kontradikcije, pregled i reviziju
- Osnova organizacionog znanja koja se može ponovo koristiti
SoT nije
- Chatbot koji postaje autoritativan generisanjem tečnih odgovora
- Zamena za kvalitet izvora ili stručnu procenu
- Vektorska baza podataka predstavljena kao kompletan sistem znanja
- Arhitektura jednog modela
- Mehanizam koji automatski rešava svaku kontradikciju
- Zamena za organizacionu odgovornost
Trenutni pravac implementacije
Često postavljana pitanja
Source of Truth za istraživanje i podršku odlučivanju u preduzećima
Da li je SoT RAG sistem?
Šta DAG znači u Source of Truth?
Da li DAG zamenjuje RAG?
Da li SoT automatski odlučuje šta je istina?
Da li je SoT vezan za jedan AI model ili provajdera?
Koja je glavna poslovna prednost?
Ključni pojmovi
Terminologija Source of Truth
- Source of Truth (SoT)
- Platforma za donošenje odluka zasnovana na evidenciji koja čuva put od pitanja u preduzeću do evidencije, zaključivanja, zaključka i pregleda.
- RAG
- Retrieval-Augmented Generation: pronalaženje relevantnog izvornog materijala i njegovo pružanje kao konteksta generativnom modelu.
- DAG
- Usmereni aciklični graf: usmereni graf bez ciklusa. U SoT predstavlja zavisnosti između evidencije, tvrdnji, nalaza i zaključaka.
- Poreklo evidencije
- Informacije koje pokazuju odakle evidencija potiče i kako je ušla u put istraživanja i zaključivanja.
- Odnos evidencije
- Eksplicitna veza koja opisuje kako evidencija, tvrdnje ili zaključci podržavaju jedni druge, zavise jedni od drugih, protivreče jedni drugima ili pružaju alternative.
- Granica važenja odgovora
- Uslovi i granice evidencije u okviru kojih zaključak ostaje potkrepljen.
- Imenski prostor
- Logička granica koja razdvaja znanje po organizaciji, zakupcu, projektu, slučaju ili domenu.
- RBAC
- Kontrola pristupa zasnovana na ulogama: autorizacija zasnovana na dodeljenim ulogama i njihovim dozvoljenim radnjama ili opsezima podataka.
Ključna prednost: odluka se može pratiti do svoje evidencije
Najveća vrednost Source of Truth nije u tome što AI može brže da proizvede odgovor. Već u tome što organizacija može da sačuva zašto je do odgovora došlo, koja evidencija ga podržava, gde ostaje neizvesnost, koje alternative su razmatrane i ko je odobrio rezultat.
RAG pomaže sistemu da pronađe. DAG pomaže sistemu da strukturira. Istraživački agenti pomažu sistemu da istraži. Zaključivanje na osnovu evidencije pomaže sistemu da opravda. Upravljanje i ljudski pregled određuju šta organizacija prihvata. Zajedno, ovi slojevi pretvaraju istraživanje uz pomoć AI-ja u ponovo upotrebljivu inteligenciju za odlučivanje.
