• 1
  • 2
2025-03-25, 19:37
  #13
Medlem
BeneathTheSurfaces avatar
Citat:
Ursprungligen postat av HenAnnan
Det där är ett lösryckt påstående av typen "har du slutat slå din fru än?"
Man skall fås att tro att det du säger är sant, och att det är så uppenbart att det inte behöver bevisas eller ens härledas.
Fast påståendet är istället helt falskt.

Jo, det kanske finns någon språkmodell som inte kan ge hänvisningar. Men det är definitivt inte fallet med de språkmodeller som jag använder, och det är inte en generell svaghet hos språkmodeller. Ungefär som att det kanske finns någon bil som inte har bromsar, men dom flesta har faktiskt det.

Om språkmodellen "till stor del hallucinerar" så tror jag folk snabbt byter till en annan. De flesta frågor besvaras efter bästa förmåga, och om man förstår hur en språkmodell fungerar så är det också uppenbart. Ungefär som om du frågade en främling om vägen. I de flesta fall får du ett så gott svar som personen kan ge, även om det inte är lika exakt som Google Maps. Och precis som vägvisarens anvisningar är beroende av hur mycket kunskap denne har hunnit skaffa sig i ämnet så är språkmodellens svar beroende på vilken data, och hur mycket data, den har fått tillgång till. (Det är därför det finns många olika, och de är specialiserade på olika saker, precis som till exempel läkare, lärare eller ingenjörer).

Slutligen: De alla flesta böcker innehåller inga referenser över huvud taget, mer än författarens egen uppfattning eller åsikter. Selma Lagerlöfs bok, "Nils Holgerssons fantastiska resa", innehåller både geografiska fel och rena hallusinationer som att man kan resa på ryggen av en gås. Men folk läser den ändå.
Och även här på FB förekommer ibland felaktigheter eller rena hallucinationer. Eller hur? Men här är du ändå!

Det är tekniskt omöjligt för en fristående språkmodel att ge källhänvisningar, det fungerar enbart med externa tekniker som RAG, vilket kort förklarat är vad som sker när du slår på "internet sökning" text, dvs språkmodellen genererar en sökfråga utifrån vad du frågat, den använder en internet sökmotor som tex bing, analyserar innehållet på respektive sida som kom från svaret och kan då länka till den sida som den hittade informationen den analyserade på.

Men du kommer inte hitta en enda språkmodell på marknaden som kan ge några källor till tränad information, det finns ingen sådan koppling eftersom det som tränas är en sannolikhetsdistribution av token följder.

Fackböcker innehåller generellt referenser, inte fiktion, drama osv. Det är när du behandlar fakta eller vetenskap som källreferenser är av intresse.

Och förstår man hur en språkmodel fungerar så resonerar man inte som du gör överhuvudtaget, för de stinker av ignorans och okunskap.
Citera
2025-03-27, 07:50
  #14
Medlem
Citat:
Ursprungligen postat av BeneathTheSurface
Det är tekniskt omöjligt för en fristående språkmodel att ge källhänvisningar, det fungerar enbart med externa tekniker som RAG, vilket kort förklarat är vad som sker när du slår på "internet sökning" text,
Precis! Och alla moderna språkmodeller gör det (t.ex. ChatGPT o3). Men som sagt; det kanske finns bilar där man inte byggde in bromsar, för det är tekniskt möjligt, ja till och med utgångsläget. Fast det är nog ganska få sådana på marknaden.
Citat:
Ursprungligen postat av BeneathTheSurface
Och förstår man hur en språkmodel fungerar så resonerar man inte som du gör överhuvudtaget, för de stinker av ignorans och okunskap.
Gissa vad jag gör till vardags? Just det!
Jag tror du behöver komma ikapp. Börja gärna här:
https://en.wikipedia.org/wiki/Attention_Is_All_You_Need
Citera
2025-03-27, 09:13
  #15
Avstängd
Traveller7s avatar
Citat:
Ursprungligen postat av polox
Var det inte Sokrates som ansåg att böcker gjorde folk lata och hindrade deras tänkande? Riktig bildning kom via dialog och muntlig tradering samt användande av minnet.
Och tuktan. Väl.
Men kommunikation och öppenhet anser jag väl vara det bästa. På papperet.
Så man är med på vad som gäller.


8Du vill ju ha sanning i mitt innersta,
lär mig då vishet i mitt hjärtas djup.
9Rena mig med isop, så att jag blir ren,
två mig, så att jag blir vitare än snö.

Men.
Det kanske krävas lite aga. måste komma som en tjuv så vi inte "ställer iordning"
och kan bli näpsade.
Citera
2025-03-27, 09:56
  #16
Medlem
Nico77s avatar
Citat:
Ursprungligen postat av Introkonvex
Hej kära FB!

Som ts lyder; kommer AI med tiden påverka oss som människor negativt, ur ett neuropsykologiskt perspektiv?

Jag personligen känner ett stort ansvar och behov att själv söka svar själv på nätet, olika källor, samtidigt vara källkritisk och avfärda oväsentligheter. Det ger mig en känsla av syfte, när resultatet visar ens tankar eller hypoteser korrekt. De sker en dopamin utsöndring som inte kan mätas med att hålla "facit" direkt i hand.

Med denna teknik konstant i allmänhetens fingerspetsar, kan vi komma att se en ökning inom mental ohälsa?

Om vi nu bortser från alla potentiella positiva aspekter där AI
kan vara ett stöd eller tom. partner.

Osäker på forum val då de rör samhälle/psykologi så mod får gärna avgöra.

//konvex

Det kan mycket väl bli som så att sinnessvaga individer, de som är offer och som i naturen skulle bli mat åt andra i AI hittar ännu någonting att falla offer för.

Lite som datorer. Vissa använder datorn som ett verktyg för att hjälpa dem uppleva mer av världen. Andra fastnar i själva verktyget och blir fast i datorns värld som i Matrix.
Citera
2025-03-27, 11:00
  #17
Medlem
BeneathTheSurfaces avatar
Citat:
Ursprungligen postat av HenAnnan
Precis! Och alla moderna språkmodeller gör det (t.ex. ChatGPT o3). Men som sagt; det kanske finns bilar där man inte byggde in bromsar, för det är tekniskt möjligt, ja till och med utgångsläget. Fast det är nog ganska få sådana på marknaden.

Gissa vad jag gör till vardags? Just det!
Jag tror du behöver komma ikapp. Börja gärna här:
https://en.wikipedia.org/wiki/Attention_Is_All_You_Need

Med tanke på ditt vilsna resonemang tror jag inte du håller på med något annat än navel pillande till vardags,
RAG har inget med bromsar eller andra funktioner, det är en tillbyggnad och inget som modellen i sig innehar eller förstår.
Citera
2025-03-27, 13:33
  #18
Medlem
Citat:
Ursprungligen postat av BeneathTheSurface
Med tanke på ditt vilsna resonemang tror jag inte du håller på med något annat än navel pillande till vardags,
RAG har inget med bromsar eller andra funktioner, det är en tillbyggnad och inget som modellen i sig innehar eller förstår.
Precis som bromsar på en bil alltså, en nog så viktig tillbyggnad men en tillbyggand trots det. Men det var bara en liknelse.
Har du hunnit studera länken jag skickade dig? Alltså, hur de inre mekanismerna i en "language model" fungerar?
Citera
2025-03-27, 18:51
  #19
Medlem
BeneathTheSurfaces avatar
Citat:
Ursprungligen postat av HenAnnan
Precis som bromsar på en bil alltså, en nog så viktig tillbyggnad men en tillbyggand trots det. Men det var bara en liknelse.
Har du hunnit studera länken jag skickade dig? Alltså, hur de inre mekanismerna i en "language model" fungerar?

Nej det är ingen tillbyggnad, bromsar är en integral del av definitionen av en bil. Sluta tramsa precis som du gör med dina förklaringar om språkmodeller som är helt felaktiga.

Jag vet i detalj hur språkmodellerna fungerar och faktum är att jag gjorde "attention liknande" saker innan jag ens kände till det fanns, det är väldigt lite som är något ögonhöjande i detta, vem som helst förstår att ord har en implicit koppling till varandra. Vad är det du försöker påvisa annat än att du inte förstår att RAG är något externt till en språkmodell?

Och för att förtydliga eftersom det flyger totalt över ditt huvud, trots du nu 3 inlägg i rad hävdat motsatsen.

Språkmodellen känner inte till RAG, den kan inte hänvisa till källor (det kan det externa systemet som vet var ifrån informationen kom göra), du kan göra RAG med vilken jävla språkmodell som helst... Skulle du kunna ladda ner "ChatGPT 4o" och köra lokalt skulle den vara totalt oförmögen att söka på internet, ge källreferenser osv om inte det verktyg du använde för att köra modellen var kapabel till det. Det har INGENTING med språkmodellen att göra annat än att det är ett system som skickar data genom en språkmodell.


Bara för skojsskull så klistrade jag in konversationen här och bad Gemini analysera den.

__________________
Senast redigerad av BeneathTheSurface 2025-03-27 kl. 19:07.
Citera
2025-03-28, 01:26
  #20
Medlem
Citat:
Ursprungligen postat av BeneathTheSurface
Nej det är ingen tillbyggnad, bromsar är en integral del av definitionen av en bil. Sluta tramsa precis som du gör med dina förklaringar om språkmodeller som är helt felaktiga.

Jag vet i detalj hur språkmodellerna fungerar och faktum är att jag gjorde "attention liknande" saker innan jag ens kände till det fanns, det är väldigt lite som är något ögonhöjande i detta, vem som helst förstår att ord har en implicit koppling till varandra. Vad är det du försöker påvisa annat än att du inte förstår att RAG är något externt till en språkmodell?

Och för att förtydliga eftersom det flyger totalt över ditt huvud, trots du nu 3 inlägg i rad hävdat motsatsen.

Språkmodellen känner inte till RAG, den kan inte hänvisa till källor (det kan det externa systemet som vet var ifrån informationen kom göra), du kan göra RAG med vilken jävla språkmodell som helst... Skulle du kunna ladda ner "ChatGPT 4o" och köra lokalt skulle den vara totalt oförmögen att söka på internet, ge källreferenser osv om inte det verktyg du använde för att köra modellen var kapabel till det. Det har INGENTING med språkmodellen att göra annat än att det är ett system som skickar data genom en språkmodell.


Bara för skojsskull så klistrade jag in konversationen här och bad Gemini analysera den.


Hej! Tänker flika in här lite oförskämt och bara ställa en helt orelaterad fråga, är relativ novis inom ämnet.

Hur oroväckande är RAG I sig? Ja menar alla android telefoner kommer tex med Gboard inbyggt.

ett ständigt lärande, medvetande, i fingerspetsarna på olika företag utgör väl i sig en säkerhetsrisk för källkritiska förhållanden? För att inte tala om sekretess på person nivå.

Vi läser ju alla license avtalen när du startar din nya enhet första gången, eller installerar en app..
Citera
2025-03-28, 02:08
  #21
Medlem
Jag tror absolut att det kan påverka hjärnan negativt! I alla fall på det sättet som det används idag
Citera
2025-03-28, 08:21
  #22
Medlem
BeneathTheSurfaces avatar
Citat:
Ursprungligen postat av Introkonvex
Hej! Tänker flika in här lite oförskämt och bara ställa en helt orelaterad fråga, är relativ novis inom ämnet.

Hur oroväckande är RAG I sig? Ja menar alla android telefoner kommer tex med Gboard inbyggt.

ett ständigt lärande, medvetande, i fingerspetsarna på olika företag utgör väl i sig en säkerhetsrisk för källkritiska förhållanden? För att inte tala om sekretess på person nivå.

Vi läser ju alla license avtalen när du startar din nya enhet första gången, eller installerar en app..

Jag ser det inte som mer oroväckande än vilken databas/sökmotor som helst, det positiva med tekniken är att språkmodellerna kan operera på data som är långt nyare än dess underliggande träning (de stora- läs "någorlunda kapabla" språkmodellerna tar ett tag (månader) att träna fram och är förhållandevis dyra att träna, det är många hundratals miljoner kr vi pratar om då)
Det gör att det är inte ekonomiskt hållbart att hålla dom uppdaterade, utöver det så behövs data de tränas på bearbetas först för att se till att den håller någorlunda bra kvalité, något som också tar lång tid.

RAG gör det möjligt att mata modellen med ny data och bearbeta den utan att göra en omträning, sen finns det brister med detta också, RAG bygger alltså på att trycka in datan i kontext fönstret (läs "chat historiken"), problemet där är främst att kontext fönstret är begränsat, det är fruktansvärt dyrt att ha stora kontext fönster eftersom transformer arkitekturen skalar kvadratiskt med kontext längd, sen finns det tricks som alla moderna chatbottar använder som RoPE scaling osv som gör att man kan artificiellt förlänga fönstret efter träning men det orsakar andra problem som att modellen "inte ser" viss information på vissa positioner osv, men det är den teknik som finns idag för att skapa stora kontexter alltså "hundratusentals tokens" i längd.

Sen rent teoretiskt så kan så klart tekniken missbrukas/användas för spionage/övervakning osv men man får vara väldigt naiv om man inte tror att sådant redan innan var möjligt, oavsett det var enklare automatiska filter som sökte efter enskilda ord och markerade dessa för mänsklig inspektion osv. Detsamma gäller även språkmodeller medan de i bland kan prestera förvånansvärt bra är de totalt opålitliga och resultat behöver alltid dubbel kontrolleras.

Jag kanske missförstod din fråga, men korta svaret är att medans det möjligtvis kan användas för att automatisera (och kanske än mer förstå/översätta) så ser inte jag något direkt nytt här utan utgår från att sådant redan gjorts, det är enormt mycket data som lagras när du gör saker på tex internet, att däremot spionera på sådant som normalt inte lämnar din privata telefon osv tror jag inte någon har något större intresse av, övrigt så som vad du installerar/använder för appar osv är sådant som redan "spionerats" på i massvis med år.

Glömde säga också, RAG är inte felfritt (och detta är för språkmodellerna inte har minsta uns av intelligens) men den stora faran med det är att lita på det, för pga modellen inte faktiskt förstår datan den ser så kan injekterad data innehålla instruktioner som får modellen att göra något helt annat än vad man tror den gör, det finns massor med exempel på sådant om du googlar "prompt injection".
__________________
Senast redigerad av BeneathTheSurface 2025-03-28 kl. 08:26.
Citera
2025-03-28, 11:58
  #23
Medlem
Citat:
Ursprungligen postat av Introkonvex
Hej kära FB!

Som ts lyder; kommer AI med tiden påverka oss som människor negativt, ur ett neuropsykologiskt perspektiv?

Jag personligen känner ett stort ansvar och behov att själv söka svar själv på nätet, olika källor, samtidigt vara källkritisk och avfärda oväsentligheter. Det ger mig en känsla av syfte, när resultatet visar ens tankar eller hypoteser korrekt. De sker en dopamin utsöndring som inte kan mätas med att hålla "facit" direkt i hand.

Med denna teknik konstant i allmänhetens fingerspetsar, kan vi komma att se en ökning inom mental ohälsa?

Om vi nu bortser från alla potentiella positiva aspekter där AI
kan vara ett stöd eller tom. partner.

Osäker på forum val då de rör samhälle/psykologi så mod får gärna avgöra.

//konvex

Eftersom 99% av samhällsinformationen finns analogt kommer din tes inte att hända. Ingen kommer att digitisera allt material till din AI.
Citera
2025-03-28, 16:40
  #24
Medlem
Citat:
Ursprungligen postat av BeneathTheSurface
Jag ser det inte som mer oroväckande än vilken databas/sökmotor som helst, det positiva med tekniken är att språkmodellerna kan operera på data som är långt nyare än dess underliggande träning (de stora- läs "någorlunda kapabla" språkmodellerna tar ett tag (månader) att träna fram och är förhållandevis dyra att träna, det är många hundratals miljoner kr vi pratar om då)
Det gör att det är inte ekonomiskt hållbart att hålla dom uppdaterade, utöver det så behövs data de tränas på bearbetas först för att se till att den håller någorlunda bra kvalité, något som också tar lång tid.

RAG gör det möjligt att mata modellen med ny data och bearbeta den utan att göra en omträning, sen finns det brister med detta också, RAG bygger alltså på att trycka in datan i kontext fönstret (läs "chat historiken"), problemet där är främst att kontext fönstret är begränsat, det är fruktansvärt dyrt att ha stora kontext fönster eftersom transformer arkitekturen skalar kvadratiskt med kontext längd, sen finns det tricks som alla moderna chatbottar använder som RoPE scaling osv som gör att man kan artificiellt förlänga fönstret efter träning men det orsakar andra problem som att modellen "inte ser" viss information på vissa positioner osv, men det är den teknik som finns idag för att skapa stora kontexter alltså "hundratusentals tokens" i längd.

Sen rent teoretiskt så kan så klart tekniken missbrukas/användas för spionage/övervakning osv men man får vara väldigt naiv om man inte tror att sådant redan innan var möjligt, oavsett det var enklare automatiska filter som sökte efter enskilda ord och markerade dessa för mänsklig inspektion osv. Detsamma gäller även språkmodeller medan de i bland kan prestera förvånansvärt bra är de totalt opålitliga och resultat behöver alltid dubbel kontrolleras.

Jag kanske missförstod din fråga, men korta svaret är att medans det möjligtvis kan användas för att automatisera (och kanske än mer förstå/översätta) så ser inte jag något direkt nytt här utan utgår från att sådant redan gjorts, det är enormt mycket data som lagras när du gör saker på tex internet, att däremot spionera på sådant som normalt inte lämnar din privata telefon osv tror jag inte någon har något större intresse av, övrigt så som vad du installerar/använder för appar osv är sådant som redan "spionerats" på i massvis med år.

Glömde säga också, RAG är inte felfritt (och detta är för språkmodellerna inte har minsta uns av intelligens) men den stora faran med det är att lita på det, för pga modellen inte faktiskt förstår datan den ser så kan injekterad data innehålla instruktioner som får modellen att göra något helt annat än vad man tror den gör, det finns massor med exempel på sådant om du googlar "prompt injection".

Skrivet stressad och sömnberövad, kommer en follow-up senare. Men teoretiskt är det redan något som utövas av olika nätverk, beroende på avtal osv . Självklart är det inte något nytt med övervakning, det är inte vad jag har under lup nu. Talar om att olika aktörer med olika egen intressen, kan det inte vara ett upphov till tvivelaktiga källor?

Ang privacy så är det nästan skrattretande begrepp då vi alla vet att det har blivit ett diffust ämne sedan länge..
Att det existerar en tanke om vem som kan komma att använda dina key strokes i moraliskt tvivelaktigt syfte är väl inte så konstigt när möjligheten redan finns där, korruption är inget nytt begrepp..

Tackar för ditt utförliga svar, ska läsa igenom allt nå snart jag kan.
Citera
  • 1
  • 2

Skapa ett konto eller logga in för att kommentera

Du måste vara medlem för att kunna kommentera

Skapa ett konto

Det är enkelt att registrera ett nytt konto

Bli medlem

Logga in

Har du redan ett konto? Logga in här

Logga in