Söhbət AI-nın Müxtəlif İstifadəçi Gözləntiləri: ChatGPT və Replika tətbiq mağazası rəylərinin müqayisəli sentiment və mövzu analizi

Söhbətçi AI tətbiqləri iki fərqli məqsədə daha çox xidmət edir: vasitəçilik məhsuldarlığı və emosional dəstək. Hər ikisi eyni əsas dil texnologiyasına əsaslansa da, istifadəçilər bu sistemləri müxtəlif alət və əlaqəli gözləntilərə görə qiymətləndirə bilərlər. Bu tədqiqat, vəzifəyə yönəlmiş köməkçinin (ChatGPT) və yoldaşlıq yönəlmiş agentin (Replika) istifadəçi qiymətləndirilməsində fərqləri, əhval-ruhiyyə hesablama analizi, NRC duyğu analizi, mövzu modelləşdirməsi və ictimaiyyətə mövcud olan 6000 tətbiq mağazası rəylərinin (hər tətbiq üçün 3000) nəticə testi vasitəsilə araşdırır. İki tətbiq ümumi baxış qütbündə yalnız məhdud dərəcədə fərqlənirdi və fərq istiqaməti istifadə olunan üsuldan asılı idi: Bing leksikonu üzrə Replika baxışları bir az daha yüksək nəticə əldə etdi (M = 0.312 vs. 0.275), o cümlədən sentimentr ChatGPT-də daha yüksək nəticə əldə edilmişdir (M = 0.135 vs. Bu səbəbdən, ümumi polarlıq iki korpa arasında güclü fərq nöqtəsi deyildi. Rating paylamaları tətbiqlər arasında əhəmiyyətli dərəcədə fərqləndi (χ2 (4, N = 6,000) = 242.26, p <.001, Cramérs V = 0.20), ChatGPT reytinqləri miqyasının hər iki ucunda daha çox polarizasiya olunurdu (36,8% vs. 21,7% beş ulduz; 27,4% vs. 23.8% bir ulduz) və Replika reytinqləri daha çox orta kateqoriyalarda cəmləşdirilir. Tədqiqat uzunluğu üçün ballar normallaşdırıldıqdan sonra Replika təcrübələrində daha çox sevinc, qəzəb, sürpriz və gözləmə ilə əlaqəli dil var idi, bütün effekt ölçüləri kiçik idi; qorxu, kədər və etibar ilə əlaqəli dil tətbiqlər arasında əhəmiyyətli dərəcədə fərqlənmədi. Tədqiqat dili və ulduz reytinqinin birləşməsi müştəri tətbiq üçün daha zəif idi, baxmayaraq ki, fərq az idi (App × Rating qarşılıqlı əlaqəsi, qismən η2 = 0.016); iki nümunə müxtəlif nəşr dövrlərini əhatə etdikləri üçün bu qarşılıqlı əlaqə müvəqqəti olaraq bildirilir. Mövzu modelləşdirməsi altı mövzu həllini verdi. Bu sahədə söhbət və yoldaşlıq Replika baxışlarının 53,6%-ni, ChatGPT baxışlarının 10,9%-ni, iş dəstəyi və faydalılığı isə ChatGPT baxışlarının 30,9%-ni, Replika baxışlarının 1,2%-ni təşkil edirdi. Birlikdə, nəticələr bu araşdırmada araşdırılan iki tətbiq arasında qiymətləndirmə çərçivəsindəki fərqlərlə uyğun gəlir, söhbət AI sistemlərinin ayrı kateqoriyalarını qurmaq əvəzinə iki nümayəndə halı təsvir edir.

Vellore Texnologiya İnstitutunun açıq giriş maliyyələşdirilməsi. Bu tədqiqat Vellore Texnologiya İnstitutunun (VIT) fakültə tədqiqatlarına dəstək proqramı çərçivəsində daxili tədqiqat maliyyələşdirməsindən dəstəklənmişdir.

VIT Biznes Məktəbi, Vellore Texnologiya İnstitutunun Vellore, Tamil Nadu, Hindistan

Müəlliflər heç bir rəqabət maraqlarının olmadığını bəyan edirlər.

Bu məqalədə müəlliflərin heç biri tərəfindən insan iştirakçıları və ya heyvanlarla aparılan heç bir tədqiqat yoxdur.

Springer Nature nəşr olunan xəritələrdə və qurumların əlaqələrində yurisdiksiya iddiaları ilə bağlı neytral olaraq qalır.