Тег: neuronske mreže

Decentralizacija publikacija, domaći zadatak

Juče sam se razbudila i poželela svoj lični relej za Nostr. Moje veštine u sistemskom administriranju su skoro nula, čak mi je i sajt ancapchan.info nekada napravljen i podešen bez mog učešća. Ali od tada su se pojavili LLM-ovi, bilo bi greh ne iskoristiti ih. Tako sam doprla do Groka, i nakon nekoliko sati mučenja, relej relay.ancapchan.info je podignut. Ovde su se u potpunosti pokazale specifičnosti decentralizacije protokola. Recimo, slanje testne poruke samo preko mog releja bilo je praktično preko klijenta Snort, sinhronizaciju releja je zgodno raditi preko Amethysta na Androidu, slanje proizvoljnog događaja u obliku sirovog json-a ume Nostria, i tako dalje.

Zadatak ličnog releja je da čuva kompletnu arhivu mojih publikacija, privatnih poruka i svega ostalog, kao i sadržaj onih koje pratim. Ovo je solidan korak ka lokalnoj autonomiji, iako je i dalje daleko od ideala koji sam opisala u trećim „Bilješkama o decentralizaciji“. Još uvek moram da se pozabavim bekapovanjem i upravljanjem sadržajem, a možda će stvar doći i do toga da ovaj relej stavim na raspolaganje lokalnoj zajednici. I ako se ispostavi da je tražen u zajednici, to će biti, ponovnim ponavljanjem, korak ka centralizaciji: neko se muči sa sopstvenim serverom, a neko koristi zajedničke, zašto da ne.

Ovim tempom ću sebi još normalno povezati novčanik sa Nostrom (trenutno radi praktično samo za primanje), podesiti Lightning čvor, ili čak početi nešto da vibekodiram…

Čitaoci takođe raduju svojim primerima korišćenja neuronskih mreža. Tako je jedan od njih otvorio resurs gde besplatno postavlja knjige koje su ozvučile neuronske mreže, uključujući one o libertarijanizmu/AEP. Naravno, određeni deo „krinža“ u ozvučavanju neuronskim mrežama i dalje postoji, ali je to toliko jeftinije da je greh ne koristiti. Onima kojima je lakše da slušaju nego da čitaju, dobrodošli: sajt, telegram bot. Uzgred, tamo već leži i ozvučavanje moje dve knjige (direktne linkove za preuzimanje sam već prebacila na svoje stranice knjiga: Ankap, Rat).

Kako gledaš na to da se neuronetima hrani sav sadržaj sa interneta, zanemarujući autorska prava i bez nečije saglasnosti?

M1inki

Mojim čitaocima odavno nije tajna da mi se deo autorskog prava, kao što je kopirajt, čini entitetom koji je beznadežno zastareo i krajnje skup u smislu primene (enforcement-a), te će stoga odmah izumreti čim država prestane da sprovodi taj isti enforcement. Međutim, sa pojavom velikih jezičkih modela pojavili su se svi razlozi da se veruje da će kopirajt izumreti čak i znatno ranije od države.

U odbranu kopirajta postoje različiti argumenti. Postoji utilitarni: ako će svi besplatno uzimati tuđi sadržaj, nestaće stimulansa za kreiranje tog sadržaja, a to je kraj progresa. Postoji objektivistički: čovek ima pravo na proizvod svog razuma, i tačka, jer tako je rekla Ayn Rand. Postoji etički: rad mora biti plaćen.

A zatim se ispostavlja da je za obuku nove, naprednije verzije velikog jezičkog modela potrebno „nahraniti“ ga apsolutno svim korpusima tekstova koje je čovečanstvo ikada kreiralo, a on će to pojesti i tražiti još. Ako se to ne uradi, perspektivni pravac razvoja informacionih tehnologija udariće u zid. One koji obučavaju model ne zanimaju umetničke vrednosti teksta. Za njih su i Biblija i fan-fik o Hari Potteru jednostavno tekst koji poseduje ključni kvalitet: napisan je od strane čoveka. Poznavanje Biblije je za jezički model važnije, ali samo iz razloga što je ona, prvo, obimnija, a drugo, reference na nju se mnogo češće pojavljuju u drugim tekstovima i korisničkim upitima.

I to je to, odmah smo izgubili utilitarni argument, jer je upravo zarad progresa potrebno nahraniti neuronsku mrežu tekstovima. Zauzvrat smo dobili veoma bogate lobiste za ukidanje kopirajta, jer kompanije koje razvijaju velike jezičke modele sasvim mogu da se mere po veličini kapitala sa digitalnim izdavaštvima. Uz to, čak i ako vlasnici prava nad posebno popularnim tekstovima uspeju da odbrane pravo da LLM-ovi ne budu upoznati sa njima, ko će profitirati od toga što će četbot na zahtev „prepričaj određenu priču Stivena Kinga“ odgovoriti „ne znam nijedno delo ovog autora, hajde da vam bolje prepričam određenu priču Dejvida Fridmana“. Sigurno neće profitirati izdavači Stivena Kinga, niti sam Stiven King od takve situacije.

Kako će se pribavljati sadržaj za trening neuronskih mreža? Vrlo jednostavno. Sadržaj je uglavnom već fizički prisutan na mreži u besplatnom pristupu, samo što ima etiketu „piratski“, i zbog toga zakonite kompanije moraju da se pretvaraju da on ne postoji. Međutim, to je previše krhka ograda i ona neće zaustaviti one koji smatraju da imaju pravo da je preskoče. Neuronskoj mreži neće biti dostupan samo neki Rodion Belkovič, jer on u principu ne objavljuje svoje knjige na mreži, čak ni za novac))) To je ogroman gubitak za buduće sagovornike inteligentnih četbotova, ali šta se može, čovečanstvo je tokom svoje istorije izgubilo mnogo vrednih tekstova, shit happens.