ChatForest – MASTER

Účel projektu

ChatForest je projekt lokálneho archívu a vyhľadávacieho systému pre exportované rozhovory z ChatGPT.

Jeho cieľom je zabezpečiť, aby sa dôležité myšlienky, rozhodnutia, projektové záznamy, technické návody, kapitoly, hypotézy a pracovné poznámky nestrácali v dlhých rozhovoroch.

ChatForest má slúžiť ako súkromný, lokálny a praktický nástroj na:

• import exportov z ChatGPT,
• uloženie rozhovorov do databázy,
• rýchle fulltextové vyhľadávanie,
• triedenie podľa projektov,
• označovanie dôležitých častí,
• prepojenie na BetterDocs / KB,
• a vyhľadávanie starých rozhodnutí.

Hlavná myšlienka

Rozhovory s AI často obsahujú veľa hodnotného materiálu, ale bez archívu sa z nich stane les, v ktorom človek vie, že tam niekde rastie krásny dub, ale netuší, kde ho zasadil.

Základná myšlienka projektu:

Ak má poznanie dozrieť do diela, nesmie zostať stratené v rozhovoroch.

ChatForest má byť nástroj, ktorý z rozhovorov vytvorí vyhľadateľný, prehľadný a použiteľný les poznania.

Názov ChatForest

Názov ChatForest vyjadruje predstavu rozhovorov ako lesa.

Každý chat môže byť strom.
Každé vlákno môže byť vetva.
Každá dôležitá myšlienka môže byť plod, ktorý treba nájsť, pozbierať a presadiť do projektovej znalostnej bázy.

Slovenský pracovný názov:

Vetvovník

Vetvovník môže označovať najmä časť projektu, ktorá bude zobrazovať vetvenie tém, projektov, rozhodnutí a súvislostí medzi chatmi.

Charakter projektu

ChatForest je technický, organizačný a pamäťový projekt.

Nie je náhradou za BetterDocs.
Nie je náhradou za ChatGPT pamäť.
Nie je ani hlavným projektovým úložiskom finálnych textov.

Je to pracovný nástroj medzi rozhovorom a znalostnou bázou.

Vzťah vrstiev:

• ChatGPT rozhovor = živá tvorba,
• ChatForest = lokálny archív a vyhľadávanie,
• BetterDocs / KB = usporiadaná dlhodobá znalostná báza,
• ChatGPT pamäť = stručný index a navigácia.

Problém, ktorý projekt rieši

Pri dlhodobej práci s AI vznikajú tieto problémy:

• staré rozhovory sa ťažko hľadajú,
• projektové rozhodnutia sú rozptýlené,
• dôležité formulácie sa strácajú,
• rovnaké témy sa opakujú,
• pamäť ChatGPT sa zahlcuje,
• exporty sú neprehľadné,
• nemožno rýchlo nájsť konkrétnu vetu alebo rozhodnutie,
• nie je jasné, čo už bolo presunuté do KB,
• staré technické pokyny môžu byť zastarané,
• nové projekty nemajú ľahko dohľadateľnú históriu.

ChatForest má pomôcť túto chaosovú húštinu prerúbať civilizovanou mačetou.

Základný princíp práce

ChatForest má rešpektovať jednoduchý pracovný tok:

1. rozhovor vznikne v ChatGPT,
2. používateľ si exportuje dáta,
3. ChatForest importuje export,
4. uloží rozhovory do lokálnej databázy,
5. umožní vyhľadávanie,
6. používateľ nájde dôležitú časť,
7. dôležité záznamy sa presunú do BetterDocs / KB,
8. pamäť ChatGPT sa odľahčí na stručný index.

Základná zásada:

ChatForest má pomáhať hľadať a presúvať poznanie, nie vytvárať ďalší neporiadok.

Súkromný lokálny charakter

Projekt má byť prednostne lokálny.

Dôvody:

• ochrana súkromia,
• kontrola nad dátami,
• nezávislosť od cloudových služieb,
• práca aj bez internetu,
• možnosť ukladať citlivé rozhovory,
• jednoduchá záloha,
• menšie riziko úniku dát.

ChatForest má byť navrhnutý tak, aby používateľ vedel, kde sú jeho dáta a čo sa s nimi deje.

Základné dáta

ChatForest má pracovať najmä s exportom ChatGPT.

Typické vstupy:

• export ZIP,
• súbor conversations.json,
• prípadné priložené súbory,
• názvy chatov,
• dátumy,
• správy používateľa,
• odpovede asistenta,
• systémové metadáta, ak sú dostupné.

Cieľom nie je slepo ukladať všetko rovnako.
Cieľom je z rozhovorov vyťažiť vyhľadateľnú a prakticky použiteľnú štruktúru.

Databázový základ

Pre MVP je vhodným základom SQLite.

Dôvody:

• jednoduché lokálne použitie,
• žiadny server,
• ľahká záloha jedným súborom,
• dostatočný výkon pre osobný archív,
• možnosť fulltextového vyhľadávania,
• jednoduché prepojenie s desktopovou alebo lokálnou webovou aplikáciou.

SQLite je pre tento typ projektu rozumná voľba, pretože ChatForest nemá byť hneď obrovská cloudová platforma.

Fulltextové vyhľadávanie

Kľúčovou funkciou ChatForest je rýchle vyhľadávanie.

Používateľ má vedieť hľadať podľa:

• slova,
• frázy,
• projektu,
• dátumu,
• názvu chatu,
• typu záznamu,
• autora správy,
• značky,
• rozhodnutia,
• technického súboru,
• témy.

Príklady hľadaní:

• „5T“
• „Dali“
• „H₂S“
• „rozmarín“
• „release.sh“
• „TOPTOUR Reference Finder“
• „Komunikácia s podvedomím“
• „semeno bolesti“
• „Zdravé lahôdky – MASTER“

Projektové značky

ChatForest má umožniť priraďovať správy alebo celé chaty k projektom.

Príklady projektov:

• Zdravé lahôdky,
• Osobný kalendár vitality,
• Obuv budúcnosti,
• TOPTOUR-Core,
• TOPTOUR Cestovateľský denník,
• Sedem brán Inanny,
• Jarmok,
• Knihy a autorský manifest,
• Komunikácia s podvedomím,
• SABER,
• Dr.Fyto,
• Správca súborov,
• Solution Architect.

Značky môžu byť manuálne alebo poloautomaticky navrhované podľa obsahu.

Vetvovník

Vetvovník je pracovný slovenský názov pre vizuálnu alebo logickú vrstvu zobrazovania súvislostí.

Môže zobrazovať:

• projektové vetvy,
• tematické vetvy,
• rozhodnutia,
• návraty k témam,
• súvisiace chaty,
• prepojenia medzi projektmi,
• stav presunu do KB,
• vývoj myšlienky v čase.

Cieľ:

Vidieť nielen jednotlivé správy, ale aj to, ako z nich vyrástla vetva poznania.

Väzba na BetterDocs / KB

ChatForest má podporovať presun dôležitých častí do kb.drfyto.com / BetterDocs.

BetterDocs je dlhodobé usporiadané úložisko projektov.
ChatForest je pracovný archív rozhovorov.

Možné funkcie:

• označiť správu ako „presunúť do KB“,
• označiť správu ako „už presunuté“,
• pridať odkaz na BetterDocs článok,
• vytvoriť návrh článku,
• pripraviť výňatok,
• pripraviť citáciu alebo poznámku,
• sledovať, čo je ešte nespracované.

Dôležitá zásada:

ChatForest má pomáhať triediť cestu od rozhovoru k článku.

Väzba na ChatGPT pamäť

ChatForest má pomáhať odľahčovať ChatGPT pamäť.

Pamäť ChatGPT má slúžiť len ako stručný register a navigácia.

ChatForest môže pomáhať:

• nájsť staré podrobnosti,
• overiť, čo už bolo povedané,
• vybrať, čo patrí do KB,
• odhaliť duplicity,
• pripraviť stručný pamäťový záznam,
• rozhodnúť, čo možno z pamäte uvoľniť.

Základná architektúra:

• ChatGPT pamäť = mapa,
• ChatForest = vyhľadateľný archív ciest,
• BetterDocs = upratané mesto poznania.

Typy záznamov

ChatForest môže rozlišovať rôzne typy záznamov.

Možné typy:

• bežná správa,
• rozhodnutie,
• návrh,
• technický pokyn,
• kód,
• zdroj,
• citácia,
• pracovná hypotéza,
• osobná poznámka,
• projektová definícia,
• MASTER návrh,
• vec na presun do KB,
• duplicitný záznam,
• zastaraný záznam,
• rizikový technický pokyn.

Takéto typovanie pomôže pri neskoršom triedení.

Rozhodnutia

Dôležitou funkciou je evidencia rozhodnutí.

Rozhodnutie môže byť napríklad:

• názov projektu,
• schválená architektúra,
• vybraný nástroj,
• odmietnutý smer,
• uloženie dokumentu do KB,
• uvoľnenie pamäte,
• pravidlo práce s projektom,
• verzia pluginu,
• technický postup.

ChatForest by mal umožniť vyhľadať staré rozhodnutia rýchlejšie než ručné prehrabávanie chatu.

Technické pokyny a riziko zastarania

Pri technických projektoch je nebezpečné slepo opakovať starý pokyn.

Starý príkaz mohol byť správny vtedy, ale dnes už môže byť nebezpečný.

ChatForest by mal pri technických záznamoch umožniť označiť:

• aktuálne,
• zastarané,
• neoverené,
• rizikové,
• nahradené novším postupom,
• platné len pre konkrétnu verziu.

Dôležitá zásada:

Starý technický pokyn je užitočný iba vtedy, keď vieme, v akom stave bol správny.

Dátový model MVP

MVP môže obsahovať základné tabuľky:

conversations

• id,
• title,
• created_at,
• updated_at,
• source_file,
• imported_at.

messages

• id,
• conversation_id,
• role,
• content,
• created_at,
• message_order.

projects

• id,
• name,
• description,
• kb_url,
• master_article.

message_project_links

• message_id,
• project_id,
• confidence,
• link_type.

tags

• id,
• name,
• type.

message_tags

• message_id,
• tag_id.

kb_links

• id,
• message_id,
• project_id,
• kb_url,
• status.

Toto je len pracovný návrh.
Dátový model sa môže upraviť podľa reálneho exportu a potrieb.

Import exportu

Prvá technická funkcia:

Importovať ChatGPT export ZIP a uložiť rozhovory do SQLite.

Základné kroky:

1. používateľ vyberie ZIP export,
2. systém ho rozbalí,
3. nájde conversations.json,
4. prečíta zoznam rozhovorov,
5. uloží konverzácie,
6. uloží správy,
7. vytvorí fulltextový index,
8. zobrazí počet importovaných chatov a správ,
9. umožní vyhľadávanie.

Deduplicita importov

Pri opakovanom importe môže dôjsť k duplicitám.

Systém má vedieť:

• rozpoznať už importovaný chat,
• aktualizovať existujúci záznam,
• nepridať duplicitné správy,
• označiť nový import,
• zachovať históriu importov.

Dôležitá zásada:

Opakovaný import nesmie vytvoriť päť lesov z toho istého stromu.

Vyhľadávacie rozhranie

MVP rozhranie má byť jednoduché.

Používateľ potrebuje:

• vyhľadávacie pole,
• zoznam výsledkov,
• názov chatu,
• dátum,
• úryvok správy,
• možnosť otvoriť celý chat,
• filtrovanie podľa projektu,
• filtrovanie podľa typu záznamu,
• označenie ako dôležité,
• označenie ako presunuté do KB.

Nemusí to byť krásne.
Musí to byť rýchle a použiteľné.

Otvorenie starého chatu

Pri výsledku vyhľadávania má byť možné otvoriť celý chat alebo aspoň relevantnú časť.

Dôležité je vidieť kontext:

• čo predchádzalo,
• na čo odpoveď reagovala,
• či išlo o rozhodnutie,
• či išlo o hypotézu,
• či bol výsledok uložený do KB,
• či neskôr prišla oprava.

Bez kontextu môže byť vytrhnutá veta nebezpečná.

Export do KB

ChatForest môže pomáhať pripraviť výstup do BetterDocs.

Možné výstupy:

• markdown,
• čistý text,
• návrh článku,
• výňatok,
• zoznam rozhodnutí,
• zoznam zdrojov,
• pracovný súhrn,
• podklady pre MASTER článok.

Cieľom je, aby používateľ vedel rýchlo vytiahnuť časti rozhovoru a preniesť ich do KB.

Stav spracovania

Každá dôležitá časť môže mať stav.

Možné stavy:

• nové,
• prečítať,
• dôležité,
• presunúť do KB,
• presunuté do KB,
• zapracované do MASTER,
• zastarané,
• duplicitné,
• nepoužiť,
• overiť.

Takýto stav pomáha udržať poriadok.

Bezpečnostné hľadisko

ChatForest bude pracovať s citlivými osobnými a projektovými dátami.

Preto treba riešiť:

• lokálne uloženie,
• zálohy,
• prístupové práva,
• šifrovanie databázy,
• anonymizáciu pri exporte,
• mazanie dát,
• ochranu pred nechceným zverejnením,
• oddelenie súkromných a verejných výstupov.

Zvlášť dôležité je nepublikovať osobné údaje z chatov bez vedomého rozhodnutia používateľa.

Zálohovanie

ChatForest musí mať jednoduchý spôsob zálohy.

Možnosti:

• záloha SQLite databázy,
• export označených záznamov,
• záloha konfiguračného súboru,
• manuálny export projektových väzieb,
• verzovanie vybraných textov mimo databázy.

Zásada:

Archív bez zálohy je len pekne upratané riziko.

Technologické možnosti

Projekt možno realizovať viacerými spôsobmi.

Možné smery:

1. Python desktop / lokálna aplikácia

Výhody:

• rýchly prototyp,
• dobrá práca so súbormi,
• jednoduchý import,
• SQLite,
• lokálnosť.

2. Lokálne webové rozhranie

Výhody:

• pohodlné používanie v prehliadači,
• jednoduché vyhľadávanie,
• ľahšie rozšírenie UI.

3. WordPress plugin

Výhody:

• známe prostredie,
• možná väzba na BetterDocs,
• admin rozhranie.

Nevýhody:

• citlivé dáta v online systéme,
• bezpečnostné riziko,
• nevhodné pre súkromný kompletný export.

Pre prvú verziu je najčistejšie lokálne riešenie.

MVP – prvá verzia

MVP ChatForest má byť veľmi praktické.

Minimálne funkcie:

• výber ZIP exportu,
• import conversations.json,
• uloženie do SQLite,
• fulltextové vyhľadávanie,
• otvorenie chatu,
• základné projektové značky,
• označenie dôležitého záznamu,
• označenie „presunuté do KB“,
• export výňatku do markdownu.

Cieľ MVP:

Nájsť starú myšlienku alebo rozhodnutie za pár sekúnd namiesto prehrabávania desiatok chatov.

Budúce moduly

Možné rozšírenia:

• Vetvovník,
• vizualizácia projektových väzieb,
• automatické návrhy projektových značiek,
• detekcia duplicitných tém,
• sumarizácia starých chatov,
• export do BetterDocs,
• prepojenie na lokálnu zložku projektov,
• označovanie rozhodnutí,
• verzovanie dôležitých výstupov,
• porovnanie starých a nových verzií,
• detekcia zastaraných technických pokynov,
• projektový dashboard,
• šifrovanie databázy,
• vyhľadávanie v priložených súboroch.

Prepojené projekty

ChatForest súvisí najmä s:

• Projekty Joyee,
• BetterDocs / kb.drfyto.com,
• Knihy a autorský manifest,
• Zdravé lahôdky,
• Osobný kalendár vitality,
• TOPTOUR-Core,
• Komunikácia s podvedomím,
• Sedem brán Inanny,
• Solution Architect,
• Správca súborov,
• technické WordPress projekty.

ChatForest je pomocný projekt pre všetky ostatné projekty.

Verejná alebo súkromná verzia

Základná verzia má byť súkromná.

Do budúcna možno uvažovať o verejne použiteľnom nástroji, ale až po vyriešení:

• súkromia,
• licencie,
• importu rôznych formátov,
• bezpečnosti,
• mazania dát,
• používateľského rozhrania,
• dokumentácie.

Najprv má pomôcť používateľovi.
Až potom môže pomáhať druhým.

Princípy verejnej komunikácie

Ak sa projekt bude niekedy verejne prezentovať, vhodné formulácie:

• lokálny archív AI rozhovorov,
• vyhľadávač starých rozhodnutí,
• nástroj na presun poznania z chatov do znalostnej bázy,
• súkromný Vetvovník projektov,
• osobný archív tvorby s AI.

Nevhodné formulácie:

• náhrada pamäti ChatGPT,
• automatický tvorca pravdy,
• systém, ktorý všetko vyrieši,
• bezpečný bez nastavenia,
• verejný archív všetkých súkromných rozhovorov.

Odporúčané podčlánky

Postupne vytvoriť alebo doplniť:

• ChatForest – MVP
• Import ChatGPT exportu
• Dátový model SQLite
• Fulltextové vyhľadávanie
• Projektové značky
• Vetvovník
• Väzba na BetterDocs
• Stav presunu do KB
• Evidencia rozhodnutí
• Zastarané technické pokyny
• Bezpečnosť a súkromie
• Zálohovanie
• Export do markdownu
• Lokálna aplikácia
• Budúce moduly ChatForest

Stav dokumentu

Tento článok je hlavný MASTER dokument projektu ChatForest.

Slúži ako rozcestník, pracovná mapa a základná definícia smeru projektu.

Nie je finálnou technickou špecifikáciou ani hotovou dokumentáciou aplikácie.
Je to živý pracovný rámec, ktorý sa bude dopĺňať podľa reálneho vývoja, testovania importu, dátového modelu, používateľského rozhrania a potrieb projektovej práce.

Cieľom ChatForest je vytvoriť lokálny archív rozhovorov, ktorý pomôže zachrániť myšlienky pred zabudnutím, rozhodnutia pred stratou a projekty pred opakovaným začínaním od nuly.