Elm
EN AZ
Daxili mükafatlar gücləndirici öyrənmə vasitəsilə vizual resursun ayrılmasını idarə edir

Daxili mükafatlar gücləndirici öyrənmə vasitəsilə vizual resursun ayrılmasını idarə edir

nature.com 01.10.2026 02:00 51 baxış

İnsanlar və digər heyvanlar mükafatları bildirən stimulların vizual işlənməsinə üstünlük verirlər. Əvvəlki tədqiqatlar əlamətdar təşviqlərə (məsələn, pul və ya qida) yönəldilsə də, hiss olunmuş bacarıq kimi daxili təşviqlərin təsiri daha az yaxşı başa düşülür. Burada bir sıra vizual qiymətləndirmə təcrübələri vasitəsilə müşahidəçiləri yanıltıcı sınaqdan sınaqdan təkrar məlumat və ya stimul etibarlılığında real fərqlərdən istifadə edərək öz hökmlərinə qarşı subyektiv etibar duyğusunu idarə etdik. Biz müşahidəçilərin daha az qeyri-müəyyənlik və ya səhvlə əlaqəli stimulların kodlanmasına üstünlük verdiyini gördük. Bu da artıq dəqiq qiymətləndirilmiş stimulların performansına fayda gətirir, eyni zamanda pis qiymətləndirilmiş stimulların performansını daha da pozur. Bu mükafat yönümlü öhdəliklər, potensial olaraq uyğunlaşdıran olsa da, resursların ayrılması səhvləri minimuma endirmək strategiyasından kənara çıxaraq hazırkı vəzifələrdə ümumi dəqiqliyi pozdu. Bu tapıntıları izah etmək üçün biz sinir resurslarının təyinatının normallaşdırılması modelini sadə bir gücləndirilmə öyrənmə qayda ilə tamamladıq. Daxili və xarici mükafatlar model tərəfindən müxtəlif stimullara verilən dəyərləri kumulativ şəkildə formalaşdırdı və nəticələnən fərqlər mənbələrin ayrılığını və nəticədə qiymətləndirilmə səhvini qərəzliləşdirdi və məlumatları miqyaslı olaraq uyğunlaşdırdı. Bu tapıntılar, özəl mükafat siqnallarının həm uyğunlaşdırıcı, həm də əks-təsərrüfatlı şəkildə resursların ayrılması formasını necə formalaşdıra biləcəyini göstərir və biliş performansının əsasında olan motivasiya qərəzləri üçün hesablama əsasını təqdim edir.

Adaptiv davranışları dəstəkləmək və sağ qalmağı təmin etmək üçün beyin potensial mükafatları bildirən ətraf mühit siqnallarına prioritet vermək üçün inkişaf etmişdir1,2. Selektiv olaraq mükafat proqnozlaşdırıcı stimullara diqqət yetirmək mürəkkəb mühitlərin səmərəli naviqasiyasını asanlaşdırır və orqanizmlərin daha mükafatlandırıcı vəziyyətlərə doğru hərəkət etməsinə kömək edir3,4. Bu seçmə prosesi beynin məhdud işlənmə qabiliyyətinə görə vacibdir, çünki dəyərli stimulların daxili təmsillərini artırır və stimulların təsis edilməsini asanlaşdırır. Əsas mükafatlarla əlaqəli stimulların işlənməsinə qarşı tərəfi yaxşı təsdiqlənsə də, duyğu işlənməsinə qarşı məmnuniyyət və bacarıq hissi ilə əlaqəli müsbət motivasiya hallarının təsirini daha az başa düşülür.

Poçt əsaslı və pul təkanları istifadə edən təcrübələr göstərir ki, stimulların daha yüksək ehtimal və ya daha böyük xarici mükafatla əlaqələndirilməsi könüllü və ya yuxarıdan aşağıya diqqətini asanlaşdırır7,8,9. Bundan əlavə, əsasən aşağıdan yuxarıya prosesi əhatə edən vizual axtarış vəzifələrində, aşağıdan yuxarıya qədər mükafat proqnozlaşdırmaq üçün stimullardan daha yüksək mükafatlarla əlaqəli pop-out hədəflər üçün axtarış vaxtları daha sürətli olur10. Xüsusilə, mükafatla əlaqəli stimulların prioritetləşdirilməsi mükafat təxirəsalınmazlıqları aradan qaldırıldıqda və əvvəlcədən mükafatlandırılmış xüsusiyyətlər önəmli və ya vəzifəyə aid olmasaqda da sonrakı vəzifələrdə davam edir11,12,13. Bununla bağlı tədqiqatlar göstərdi ki, göz hərəkətləri əvvəllər mükafatlarla əlaqəli olan obyektlərə və məkan yerlərinə yönəlmişdir14,15,16. Əvvəllər mükafatlandırılmış stimulların prioritetləşdirilməsinin davam etməsi, hətta bu artıq dərhal tapşırıq hədəflərinə uyğun olmadıqda da, mükafat öyrənməsinin bu stimullara qarşı diqqəti qeyri-təyyar şəkildə yönləndirə biləcək davamlı bir təsir yaradacağını göstərir17,18.

Xarici mükafatların davranışa təsiri vizual iş xatirəsinə (VWM) uzanır (19), bu da məhdud bir məhdudlıqda bir neçə obyektin xüsusiyyətlərini çevik bir şəkildə saxlamaq və saxlamaq qabiliyyəti ilə tanınır20,21,22,23,24,25,26,27,28. Təmsillərin dəqiqliyi əlaqəli mükafatın funksiyası ilə artır, bu da göstərir ki, VWM tədarükü bir neçə obyekt fərqli mükafatlar verəndə mükafat dəyərlərini də izləyir29,30 (təxmin üçün Allen və ya digərləri 31-ə baxın). Əvvəllər mükafatla əlaqəli olan obyektlər, hazırda işə aid olmayan olsalar da, daha yaxşı yadda qalır32. Bununla birlikdə, əhəmiyyətli dərəcədə, ümumi VWM gücü mükafat 33,34 ilə çeviklik göstərmir, bu da yüksək mükafatlı maddələrin yaxşılaşdırılmış performansının aşağı mükafatlı maddələrin performansının aşağı düşməsi ilə müşayiət edildiyi nəticələrdən daha da sübut olunur35. Bu nəticələr göstərir ki, stimullar selektiv diqqət vasitəsilə VWM-də kodlaşdırma üçün strateji olaraq prioritetləşdirilə bilər və bu da məhdud məhdud məhdudlıqların obyektlər arasında təyin olunan subyektiv dəyərlərə əsasən çevik tədarükünə səbəb olur36,37.

Bir çox gündəlik davranışlarda dərhal xarici geri bildirim olmur və bu da daxili olaraq yaranan siqnalları, yəni daxili mükafatları eyni dərəcədə əhəmiyyətli edir. Belə daxili rəhbərliyin bir fərziyyə mənbəyi dəqiqlik və ya etibarın subyektiv hissidir38,39. Neyron bazaları və daxili mükafatların və metaqnoziyanın əsasında olan hesablama prosesləri müxtəlif olsa da, son işlərin göstərdiyi kimi, etimadla əlaqəli siqnallar öyrənmə üçün vacib daxili bir hərəkətdir. Xüsusilə, gücləndirilmə kimi öyrənmə yalnız müşahidəçinin xarici geri bildirmələrin təyinatçısı kimi istifadə edilən daxili etibar qiymətləndirməsindən irəliləyə bilər41,42. Dopaminerji sistem və xüsusilə də uzun müddət hərəkətlərin motivasiya dəyərinin kodlaşdırılmasında iştirak edən striatum, həmçinin özəl olaraq yaranmış motivasiya siqnallarını kodlaşdırır, o cümlədən etibar42,45,46. Bununla uyğun olaraq, xarici geri bildirimlərlə əlaqəli olan sinir imzalanmaları da fərdlərin düzgün və ya səhv olmağın daxili hissini yaşadıqlarında yaranır47,48,49,50. Daha geniş, daxili siqnalların gücləndirilmə öyrənməsini dəstəkləyə biləcəyi fikri hesablama ədəbiyyatında uzun tarixə malikdir51,52,53. Bu iş bu çərçivədə etibarla bağlı siqnalları diqqət ayırmanın potensial hərəkətçisi kimi müəyyən edir.

Bu araşdırmada psixofiziqi ölçmə və hesablama modelləşdirmələri birləşdirərək müxtəlif daxili və xarici amillərin işlənmə resursları üçün vizual stimullar arasındakı rəqabətə necə təsir etdiyini araşdırdıq. Biz dəyişdirilmiş analoji hesabat tapşırıqı istifadə etdik54,55

Xülasə — davamını mənbədə oxuyun.

Tam xəbəri oxu