Multiverse ने Compass नावाचे AI साधन वापरण्यास सुरुवात केली आहे. प्रशिक्षकांनी शिकवलेल्या प्रत्येक सत्राचा हा आढावा घेते. संभाव्य समस्या शोधून अधिक नेमके मार्गदर्शन देण्यासाठी व्यवस्थापकांना यामुळे मदत होते, असे कंपनी सांगते. ज्या प्रशिक्षकांनी The Guardian शी बोलताना वेगळाच अनुभव सांगितला: काम करताना सतत आपल्यावर नजर ठेवली जात असल्याची भावना आणि प्रणाली कशाला धोक्याचा संकेत देईल याची चिंता.

कधीकधी होणाऱ्या मानवी निरीक्षणाऐवजी नियमित AI पुनरावलोकनाकडे झालेला बदल या अनुभवांतून दिसतो. मात्र, Compass रोजगारविषयक निर्णय घेते असे त्यातून सिद्ध होत नाही. असे निर्णय माणसांकडेच असल्याचे Multiverse म्हणते.

मोठा बदल

  • काय बदलले: Multiverse च्या मते, पूर्वी व्यवस्थापक महिन्यातून एकदा प्रशिक्षकाचे निरीक्षण करत असे. आता Compass प्रत्येक शिकवणी सत्राचा आढावा घेते. त्यामुळे स्वतंत्र धडे सततच्या अभिप्रायाचा आणि संभाव्य जोखमीच्या सूचनांचा स्रोत बनले आहेत.
  • हे का महत्त्वाचे: संभाव्य समस्येची खूण असलेल्या सत्राची व्यवस्थापक लवकर तपासणी करू शकतो; पण या व्यापक निरीक्षणामुळे प्रशिक्षकांच्या कामाच्या परिस्थितीतही बदल होतो. एखाद्या धड्याबद्दल जाब विचारला जाईल या शक्यतेमुळे तणाव निर्माण झाल्याचे प्रशिक्षकांनी The Guardian ला सांगितले. ही वृत्तांतातील साक्ष आहे; संपूर्ण कर्मचाऱ्यांवरील परिणामाचे स्वतंत्र मोजमाप नाही.
  • कशाकडे लक्ष द्यावे: ऑक्टोबरमध्ये प्रशिक्षकांना व्यवस्थापकांप्रमाणेच अहवाल पाहता येतील, असे Multiverse म्हणते. हा प्रवेश मिळाल्यावर AI सूचना, मानवी तपासणी आणि कामगिरी व्यवस्थापन यांतील फरक कंपनी कसा स्पष्ट करते हे तपासता येईल; मूल्यमापन होत असलेल्या कर्मचाऱ्यांनाही ते अधिक स्पष्ट होईल.

Compass कशाचे पुनरावलोकन करते

25 सप्टेंबरच्या पोस्टमध्ये, Compass प्रशिक्षकांच्या सत्रांची तुलना Compass Framework शी करते आणि त्याचे निष्कर्ष शिकणाऱ्यांच्या अभिप्रायासोबत जोडते, असे Multiverse म्हणते. प्रत्येक सत्राचा स्वतंत्र आढावा तयार होतो. गुणवत्तेला कुठे धोका असू शकतो हे व्यवस्थापकांना दाखवले जाते आणि कालांतराने प्रशिक्षकाच्या शिकवण्याच्या पद्धतीवरून विकासाची क्षेत्रे सुचवली जातात. हे निष्कर्ष मानवी तपासणीसाठी सूचना आहेत, प्रशिक्षकाबद्दलचा अंतिम निकाल नाही, असे कंपनी सांगते.

ऑनलाइन वर्गांच्या प्रतिलेखांचे विश्लेषण करून त्यांना गुण दिले जातात, असे The Guardian ने वृत्त दिले. इंटरनेट-जोडणीतील अडथळा लवकर दूर न करणे, भरपूर अर्थहीन जोडशब्द वापरणे किंवा कामाच्या सूचना अस्पष्ट देणे अशा बाबी प्रणाली दाखवू शकते, असे त्या वृत्तात म्हटले आहे. ही उदाहरणे वृत्तपत्राच्या प्रणालीविषयक वृत्तांकनातून आली आहेत; प्रत्येक सूचना तयार करण्यासाठी वापरलेले संपूर्ण Compass Framework किंवा निर्देश Multiverse च्या सार्वजनिक पोस्टमध्ये दिलेले नाहीत.

Compass चे अहवाल व्यवस्थापकांना तपासून पाहता येतात; त्यांना परिस्थितीची असलेली माहिती विचारात घेऊन कृती करायची का ते ठरवता येते आणि प्रशिक्षकांसोबत विकासाची उद्दिष्टे निश्चित करता येतात, असे Multiverse म्हणते. कामगिरी व्यवस्थापन मानवी निरीक्षणावर आधारित असते आणि Compass कोणाच्या नोकरीबद्दल निर्णय घेत नाही, असेही कंपनी सांगते. सत्राची मानवी तपासणी करण्याची शिफारस करणे, ही एजंटची सर्वाधिक परिणामकारक कृती असू शकते, असे प्रवक्त्याने The Guardian ला सांगितले. ही विधाने कंपनीचे धोरण आणि अपेक्षित कार्यपद्धती सांगतात; प्रत्यक्षात प्रत्येक सूचनेची हाताळणी कशी होते हे त्यावरून सिद्ध होत नाही.

प्रशिक्षकांनी काय सांगितले

काही प्रशिक्षकांनी नाव न सांगण्याच्या अटीवर The Guardian शी संवाद साधला. प्रणाली सुरू झाल्यापासूनच्या तणावामुळे झोपेवर परिणाम झाल्याचे एकाने सांगितले. AI कडून नकारात्मक गुण मिळू नयेत यासाठी धड्यावर लक्ष देणे आणि शिकणाऱ्यांचे म्हणणे ऐकणे विचलित होत असल्याचे दुसऱ्याने सांगितले. वृत्तपत्राने एका प्रशिक्षकाचा प्रथमपुरुषी अनुभवही प्रसिद्ध केला: व्यवस्थापक शिकवण्याच्या ठरलेल्या मजकुरापासून झालेला दिसणारा बदल तपासू शकतात, पण प्रत्यक्षात तो शिकणाऱ्यांच्या गरजांना दिलेला प्रतिसाद असू शकतो.

ही The Guardian ने नोंदवलेली प्रत्यक्ष अनुभवांची साक्ष आहे. BIG CHANGE ने प्रशिक्षकांच्या मुलाखती घेतलेल्या नाहीत किंवा कर्मचाऱ्यांच्या आरोग्यावर प्रणालीचा परिणाम मोजलेला नाही. तरीही, त्यांची साक्ष सततच्या पुनरावलोकन प्रणालीसमोरील व्यावहारिक प्रश्न दाखवते: एखाद्या सूचित उताऱ्यात खराब अध्यापन दिसते की प्रशिक्षकाची निवड योग्य ठरवणारा संदर्भ हरवतो?

सध्या प्रशिक्षकांना स्वतः तपासता येणाऱ्या माहितीवरही या प्रणालीच्या अंमलबजावणीमुळे मर्यादा आहेत. ऑगस्टमधील चाचणी आणि सप्टेंबरमधील सुरुवातीच्या वापरादरम्यान अहवाल फक्त व्यवस्थापकांना दिसत होते, असे Multiverse म्हणते. ऑक्टोबरमध्ये अंतर्गत प्रशिक्षण मंचावरून प्रशिक्षकांनाही प्रवेश मिळेल, असे कंपनीचे म्हणणे आहे. लेख लिहिला जात असताना व्यवस्थापकांना डॅशबोर्ड दिसत होता, पण प्रशिक्षकांना नाही, असे The Guardian च्या प्रथमपुरुषी लेखातील योगदानकर्त्यानेही म्हटले.

निर्णय कोण घेतो

सत्रानंतर संभाव्य रोजगारविषयक परिणाम होण्यापूर्वी अनेक टप्पे असतात: Compass आढावा तयार करते, व्यवस्थापक संभाव्य चिंतेची तपासणी करतो आणि त्यानंतर एखादी व्यक्ती पुढची कृती ठरवते. औपचारिक कामगिरी व्यवस्थापन मानवी निरीक्षणावर अवलंबून असल्याचे कंपनी सांगते. स्वयंचलित रोजगारनिर्णय होत नसला, तरी हा फरक का महत्त्वाचा आहे हे The Guardian च्या वृत्तांकनातून दिसते: एखादी खूण व्यवस्थापकाचे लक्ष वेधू शकते आणि प्रशिक्षकाला मिळणाऱ्या अभिप्रायावर परिणाम करू शकते.

Multiverse ची प्रकाशित AI तत्त्वे पारदर्शकता आणि मानवी मार्गदर्शनाची मागणी करतात. ऑक्टोबरमध्ये प्रशिक्षकांना प्रवेश देण्याचे कंपनीचे आश्वासन या बांधिलक्यांची प्रत्यक्ष परीक्षा ठरेल; मात्र, केवळ प्रवेश मिळाल्याने मूल्यमापने अचूक आहेत किंवा कर्मचाऱ्यांना त्यांना आव्हान देता येते हे सिद्ध होणार नाही. प्रणालीच्या चुका किती वेळा होतात, व्यवस्थापक कितीदा सूचनांशी असहमत असतात किंवा Compass च्या अहवालावरून कोणाच्या रोजगाराबाबत निर्णय झाला आहे का, हे उपलब्ध सार्वजनिक माहितीतून कळत नाही. BIG CHANGE ने Compass ची चाचणी केलेली नाही.

येथे मुद्दा असा आहे की नियोक्ते अध्यापनाच्या कामाचे मूल्यमापन करण्यासाठी AI वापरत आहेत. हा वापर विद्यार्थ्यांच्या AI-सहाय्यित मूल्यमापनाबाबत विद्यापीठांनी ठरवलेल्या नियमांपेक्षा आणि AI प्रशिक्षणाच्या कामात अपेक्षित स्वतंत्र मानवी निर्णयापेक्षा वेगळा आहे. प्रत्येक बाबतीत, ज्या कामाचे मूल्यमापन होते आणि प्रणालीला दिलेला अधिकार यानुसार योग्य मर्यादा ठरतात.