Scris de echipa științifică Qubic

NeuromodulationAcademia de Inteligență Neuraxon — Volumul 3

Qubic Neuraxon Mood Mixer interactive demo showing four neuromodulators — dopamine, serotonin, acetylcholine, and norepinephrine — used in brain-inspired AI neuromodulation

1. Neuromodularea în Creier: Fundamentul Inteligenței Adaptive

Neuromodularea se referă la setul de mecanisme care reglează modul în care funcționează sistemul nervos în orice moment dat, fără a schimba arhitectura sa de bază. Datorită neuromodulării, creierul poate învăța rapid sau lent, poate deveni explorator sau conservator și poate rămâne deschis la noutăți sau se poate concentra pe ceea ce este deja cunoscut. Conexiunile nu se schimbă; ceea ce se schimbă este modul în care aceste conexiuni sunt utilizate. Acest concept este esențial pentru înțelegerea inteligenței inspirate de creier și a arhitecturii din spatele Neuraxonului Qubic.

Receptori Ionotropici vs. Metabotropici: Două Timpuri de Semnalizare Neurală

Pentru a înțelege corect neuromodulația, este esențial să se facă distincția între două forme de acțiune chimică în creier. Pe de o parte, există neurotransmițători care acționează asupra receptorilor ionotropici, cum ar fi glutamatul și GABA. Acești receptori sunt canale ionice: atunci când sunt activați, produc schimbări electrice imediate în neuron, la nivelul milisecundelor. Aceasta corespunde nivelului rapid de calcul neuronal: informația concretă este transmisă, semnalele senzoriale sunt integrate, decizii rapide sunt luate, iar activitatea neuronală care susține percepția, mișcarea și gândirea în timp real este generată.

Pe de altă parte, există neurotransmițători precum dopamina, norepinefrina, serotonina și acetilcolina, a căror acțiune principală se exercită prin receptori metabotropici. Acești receptori nu generează direct un semnal electric. În schimb, activează cascadele de semnalizare intracelulară care modifică proprietățile interne ale neuronului pe perioade mai lungi de timp, secunde, minute sau mai mult. Aceasta reprezintă nivelul dinamic lent al procesării neuronale, care este fundamental pentru modul în care creierul se adaptează și învață.

O modalitate intuitivă de a gândi despre această diferență este prin metafora unui port maritim. Receptorii ionotropici sunt ca înotătorii, surferii sau bărcile mici care intră și ies rapid. Receptorii metabotropici, pe de altă parte, sunt ca vasele mari de marfă. Pentru ca acestea să acosteze, sunt necesare permise, coordonarea este necesară și logistica portului trebuie ajustată. Acești receptori metabotropici alterează plasticitatea sinaptică și ușurința cu care un neuron răspunde—această modulare lentă nu transmite informație, ci mai degrabă modifică regulile interne ale sistemului.

Cei Patru Neuromodulatori: Dopamina, Norepinefrina, Serotonina și Acetilcolina

Aici este locul în care intră în joc principalele sisteme neuromodulatorii. Fiecare dintre acești patru neurotransmițători joacă un rol distinct în reglementarea modului în care creierul procesează informațiile, învață și se adaptează:

Dopamina, provenind în principal din zona tegmentală ventrală și din substanța nigra, nu semnalează plăcerea în sine, ci mai degrabă când ceva este relevant pentru învățare. Ajustează sensibilitatea sistemului la erori și la nou. Așa cum a demonstrat Schultz (2016) în lucrarea sa fundamentală despre codificarea erorii de predicție a recompensei dopaminergice, dopamina semnalează diferența dintre rezultatele așteptate și cele reale, un mecanism critic pentru învățarea prin întărire atât în sistemele biologice, cât și în cele artificiale.

Norepinefrina (Noradrenalina), eliberată în principal din locus coeruleus, reglează starea de excitare și echilibrul între explorare și exploatare. Când tonul său este ridicat, creierul devine mai sensibil la schimbările neașteptate și mai puțin ancorat în rutine. Acest lucru se aliniază cu teoria integrativă propusă de Aston-Jones & Cohen (2005), care leagă funcția locus coeruleus-norepinefrină de controlul câștigului adaptiv și de luarea deciziilor în condiții de incertitudine.

Serotonina, provenind din nucleele raphe, modulează starea de spirit, somnul, inhibiția și stabilitatea comportamentală. Așa cum a fost explorat în Dayan & Huys (2009), serotonina nu împinge sistemul să învețe rapid, ci mai degrabă să aștepte, să evite reacțiile impulsive și să mențină comportamentul atunci când mediul este incert. Joacă un rol critic în răbdare și planificare pe termen lung.

Acetilcolina, eliberată din nucleele forebrain bazale în trunchiul cerebral, joacă un rol central în atenție și învățarea dependentă de context. Facilitează deschiderea rețelelor corticale către informațiile senzoriale relevante și permite plasticitatea sinaptică atunci când mediul o cere. Este deosebit de importantă atunci când trebuie să înveți ceva nou, făcând-o esențială pentru calculul neural adaptiv.

Datorită acestei acțiuni combinate, același stimul poate produce răspunsuri diferite în funcție de starea neuromodulatorie. Circuitul este același, dar modul în care operează s-a schimbat. De aceea, creierul nu răspunde în același mod când este atent ca atunci când este obosit, nici nu învață în același mod în situații de rutină ca în fața noii sau a surprizei.

Nivelul Meta: Feronii de Plasticitate și Învățare Adaptivă

Există de asemenea un al treilea nivel, mai profund, care poate fi înțeles ca un nivel meta de reglementare neuronală. Acest nivel nu reglează direct activitatea neuronală sau viteza acesteia, ci mai degrabă condițiile în care sistemul poate schimba într-un mod durabil. În creier, activitatea coincidentă între neuroni nu garantează învățarea. Pentru ca o conexiune să se întărească sau să se slăbească, starea neuromodulatorie trebuie să permită acest lucru. Este ca și cum ar exista un semnal tăcut care spune: „acum da,” sau „acum nu.”

Neuromodulația acționează astfel ca un sistem care deschide sau închide feronii de plasticitate, decidând când o eroare, o experiență sau o coincidență merită să fie consolidată. Această arhitectură multiscale, rapidă, lentă și meta, există pentru că un sistem inteligent nu poate aplica întotdeauna aceleași reguli. Așa cum a explicat Marder (2012) în recenzia sa esențială, neuromodulația circuitelor neuronale este modul în care creierul obține flexibilitate comportamentală fără a-și reconstrui arhitectura.

Starea corpului, nivelurile de energie, oboseala sau durerea fac parte din mediul intern. Nouață, amenințare, oportunitate, repetare sau predictibilitate fac parte din mediul extern. Sistemele neuromodulatorii traduc aceste condiții în stări funcționale. Prin dopamină, norepinefrină, serotonină și acetilcolină, creierul evaluează dacă o situație merită să fie învățată, dacă este necesară prudența, dacă explorarea sau conservarea este preferabilă și dacă o eroare este informativă sau doar zgomot. Mediul nu dictează direct răspunsul, dar modulează regulile prin care creierul răspunde. Acest principiu este la baza a ceea ce Friston (2010) a descris ca principiul energiei libere, un cadru unificat care sugerează că creierul minimizează continuu surpriza prin modele interne adaptive.

Brain diagram illustrating the biosynthesis pathways of key neuromodulators including dopamine from L-Tyrosine, noradrenaline from adrenaline, and serotonin from tryptophan, showing their origins in the brain

2. De ce Modelele Mari de Limbaj și Arhitecturile Transformer Lipsesc de Neuromodulație

Modelele mari de limbaj (LLM) și arhitecturile bazate pe Transformer nu posedă neuromodulație. Deși procesează secvențe lungi și au obținut performanțe remarcabile în procesarea limbajului natural, acestea nu dispun de un sistem care reglează dinamic regimul de operare al modelului în timpul inferenței.

Natura Statică a Sistemelor AI Bazate pe Transformer

Învățarea în LLM-uri are loc în timpul fazelor de antrenament care sunt complet separate de utilizare. Greutățile sunt ajustate prin retropropagarea erorii, iar odată ce antrenamentul este finalizat, modelul intră într-o stare fixă. În timpul inferenței, nu există plasticitate și nu există o schimbare durabilă în funcție de context. Sistemul nu decide când este potrivit să învețe și când ar trebui să se stabilizeze, deoarece nu învață în timp ce operează. Aceasta este limitarea fundamentală pe care cercetările recente au confirmat-o, LLM-urile nu dispun de modele interne de lume adevărate și de capacitatea de a se adapta în timp real.

Unele abordări inspirate de neuromodulație încearcă să aproximeze anumite efecte prin ajustarea parametrilor, cum ar fi rata de învățare în timpul antrenamentului, activarea sau dezactivarea subrețelelor sau modularea funcțiilor de activare. Cu toate acestea, acestea sunt doar optimizări externe, nu sisteme interne care reglează activitatea și plasticitatea în timp real. Așa cum a argumentat Mei, Müller & Ramaswamy (2022) în Trends in Neurosciences, informarea rețelelor neuronale profunde prin principii multiscale ale sistemelor neuromodulatorii rămâne o provocare deschisă, o provocare pe care arhitecturile LLM actuale nu au abordat-o.

Deși neuromodulația este uneori menționată în contexte AI, LLM-urile și Transformerele rămân aproximări parțiale, nu sisteme comparabile cu creierul. Falia dintre calculele matriciale statice și reglementarea dinamică, dependentă de stare, găsită în rețele neuronale biologice este exact ceea ce face ca arhitecturile AI inspirate de creier, precum Neuraxon, să fie un pas necesar spre inteligența artificială adaptivă.

3. Cum Calculează Neuraxon Neuromodulația: Arhitectura AI Inspirată de Creier

În Neuraxon, calculul este un proces care se desfășoară în timp continuu. Codul exprimă un sistem care menține stări interne, s(t), care evoluează chiar și în absența stimulilor externi clari. Aceste stări influențează comportamentul viitor, creând un sistem neural viu care este întotdeauna activ, un concept explorat în detaliu în lucrarea de cercetare Neuraxon.

Dinamicile rapide, lente și meta în calculul neuronal

Neuraxon încorporează explicit dinamici rapide, lente și meta, oglindind arhitectura temporală multiscale găsită în creierul biologic. Dinamicile rapide guvernează propagarea imediată a activității, analog cu semnalizarea neuronală rapidă prin receptori ionotropici. Dinamicile lente introduc acumularea, persistența și stabilizarea modelurilor, permițând sistemului să rețină informații dincolo de instantaneu, similar cu modul în care receptorii metabotropici modulează funcția neurală pe secunde și minute. Dinamicile meta acționează asupra regulilor de interacțiune dintre cele anterioare, modulând când sistemul devine mai sensibil la schimbare și când tinde să își păstreze starea.

Neuromodulația în Neuraxon nu este implementată ca o ajustare externă a parametrilor. Sistemul nu decide explicit ce să învețe, ci mai degrabă în ce condiții poate schimba. Acest lucru oglindește modul în care neuromodulatorii biologici precum dopamina și serotonina creează feronii de plasticitate în loc să codifice direct informația. Poți explora aceste dinamici în prima persoană cu simularea 3D interactivă Neuraxon pe HuggingFace Spaces, unde poți ajusta nivelurile de dopamină, serotonină, acetilcolină și norepinefrină în timp real și observa cum afectează comportamentul rețelei.

De la Principiile Biologice la AI Descentralizată

Această abordare nu reproduce complexitatea moleculară sau anatomică a creierului, ceea ce este în prezent imposibil de replicat. Nu există mii de receptori sau rețele biologice reale. Cu toate acestea, păstrează și calculează un principiu esențial: inteligența este adaptivă și, prin urmare, necesită dinamici interne, stare și modulare.

Arhitectura de neuromodulație a Neuraxon este o parte esențială a viziunii mai ample a Qubic pentru AI descentralizată. Prin integrarea Neuraxon cu cadrul evolutiv Aigarth Intelligent Tissue, Qubic creează un sistem în care milioane de arhitecturi bazate pe Neuraxon pot evolua, concura și îmbunătăți prin calcul distribuit, alimentat de mecanismul de consens Useful Proof of Work (UPoW) al rețelei Qubic.

4. Explorează Neuromodulatorii cu Demo-ul Interactiv Neuraxon

Vrei să experimentezi cum funcționează neuromodulația într-un sistem AI inspirat de creier? Demo-ul Neuraxon Mood Mixer îți permite să ajustezi nivelurile de dopamină, serotonină, acetilcolină și norepinefrină în timp real și să observi cum acești neuromodulatori influențează comportamentul rețelei neuronale. Este o modalitate practică de a înțelege principiile discutate în acest articol și de a vedea diferența dintre calculul AI static și procesarea dinamică, dependentă de stare.

5. Matematica din spatele Neuromodulației Multiscale a Neuraxon

Dinamicile temporale în Neuraxon sunt guvernate de trei ecuații diferențiale care surprind timpii rapizi, lent și meta ai calculului neuronal:

The Mathematics Behind Neuraxon’s Multiscale Neuromodulation

Aici, τ_fast < τ_slow < τ_meta reflectă timpii lor temporali distincti, cu τ_meta fiind semnificativ mai mare pentru a captura natura „ultralentă” a efectelor metabotropice. Acest cadru matematic implementează direct principiul biologic conform căruia neuromodulația operează pe timpi mult mai lenti decât transmiterea sinaptică rapidă, așa cum a descris Northoff & Huang (2017) în lucrarea lor despre modul în care dinamica temporală a creierului mediază conștiința.

Referințe Științifice

  • Dayan, P., & Huys, Q. J. M. (2009). Serotonina, inhibiția și starea de spirit negativă. PLoS Computational Biology.

  • Marder, E. (2012). Neuromodulația circuitelor neuronale: întoarcerea în viitor. Neuron.

  • Schultz, W. (2016). Codificarea erorii de predicție a recompensei dopaminergice. Dialoguri în Neuroștiințe Clinice.

  • Aston-Jones, G., & Cohen, J. D. (2005). O teorie integrativă a funcției locus coeruleus-norepinefrină. Annual Review of Neuroscience.

  • Mei, L., Müller, E., & Ramaswamy, S. (2022). Informarea rețelelor neuronale profunde prin principii multiscale ale sistemelor neuromodulatorii. Trends in Neurosciences.

  • Friston, K. (2010). Principiul energiei libere: o teorie unificată a creierului? Nature Reviews Neuroscience.

  • Northoff, G., & Huang, Z. (2017). Cum mediază timpul și spațiul creierului conștiința și tulburările acesteia? Conștiință și Cogniție, 57, 1-10.

#UPoW #Neuraxon