Табыстар:
- AI көмегімен нақты дәйексөздер базасынан алынған деректерді кластерлеу және қорытындылау кезінде ешқашан AI жадынан дәйексөздер мен дәйексөздерді алуды жүзеге асыру мүмкіндігі
- Дәйексөз, h-индекс және әсер коэффициенті сияқты көрсеткіштер сапаны емес, пайдалануды және олардың өрістер бойынша салыстырмауын көрсететінін түсіну мүмкіндігі.
- Жеке тұлғаларды бағалауда тек библиометриялық критерийлерді пайдаланудың этикалық шегін қарастыру және оларды сапалы бағалаумен теңестіру мүмкіндігі
Университет кітапханасы өз мекемесінің ғылыми нәтижелерін өлшейді; саланың ең ықпалды зерттеулерін табу үшін зерттеуші; менеджер бөлімнің ғылыми көрінуін бағалағысы келуі мүмкін. Бұл жұмыстың артында библиометрия жатыр: ғылыми жарияланымдарды және олардың арасындағы сілтеме қатынастарын сандық түрде зерттейтін сала. Бұл бөлімде сіз дәйексөздерді талдауда, жарияланым картасын жасауда және әсерді бағалауда жасанды интеллектті пайдалануды үйренесіз; бірақ сіз сандық көрсеткіштердің шектеулері мен этикалық тұзақтарын қалай шарлау керектігін үйренесіз.
Ұғымдарға анықтама берейік. Дәйексөз – бір басылымның басқа басылымға жасаған ғылыми анықтамасы; Дәйексөздер саны жұмыстың қаншалықты пайдаланылғанын көрсететін көрсеткіш болып саналады. h-индексі – зерттеушінің өнімділігі мен әсерін біріктіретін көрсеткіш (егер h санының әрқайсысы кемінде h сілтеме алған болса, h-индексі h болады). Импакт-фактор журналдың орташа дәйексөз деңгейін көрсететін көрсеткіш. Бұл көрсеткіштер пайдалы, бірақ ешқайсысы «сапаның» тікелей өлшемдері емес; Бұл ерекшелікті есте сақтау библиометрияның мәні болып табылады.
Қадамдық: жауапты библиометриялық талдау
1. Сұрақты нақтылаңыз. «Осы саланың негізгі зерттеулері қандай?», «Біздің мекеменің ең көп сілтеме жасайтын басылымдары қандай?», «Бұл екі сала қалай тоғысады?». Әрбір сұрақ әртүрлі талдауды қажет етеді.
2. Сенімді деректерді пайдаланыңыз. Дәйексөзді талдау деректер көзі сияқты сенімді. AI дәйексөздерді немесе жарияланымдар тізімін жасай алады; Сондықтан нақты дәйексөздер базасындағы деректермен жұмыс істеу өте маңызды. Деректерді жасау үшін емес, нақты деректерді түсіндіру және қорытындылау үшін AI пайдаланыңыз.
3. Үлгілерді белгілеңіз. AI тақырып кластерлерін, бірлескен желілерді немесе жарияланымдардың үлкен жинағындағы уақыт бойынша трендтерді қорытындылауға көмектеседі. Бұл адам талдаушысының назарын маңызды сәттерге бағыттайды.
4. Критерийді контексте түсіндіріңіз. Төмен дәйексөздер саны жұмыстың құнсыз екенін көрсетпейді; Өріс шағын болуы мүмкін, тақырып жаңа болуы мүмкін немесе жарияланым өте жаңа болуы мүмкін. Санды ешқашан контекстсіз түсіндірмеңіз.
5. Этикалық шекараны сақтаңыз. Жеке тұлғаларды жалдау, жоғарылату немесе қаржыландыру туралы шешім қабылдау үшін библиометриялық өлшемдерді жалғыз қолдануға болмайды. Сандар адамдардың құнын өлшемейді; Оларды теріс пайдалану әділетсіз және зиянды.
Кеңес: AI дәйексөзге талдау жасаған кезде нақты дерекқордан дәйексөздер саны мен жарияланым дәйексөздерін қамтамасыз етіңіз; AI бұл деректерді жай ғана ұйымдастыруға, топтастыруға және түсіндіруге мүмкіндік беріңіз. «Бұл жазушының h индексі қандай?» Тікелей сұрау жасалма нөмірге әкелуі мүмкін.
Критерийлер мен манипуляциялардың шектері
Библиометриялық көрсеткіштер күшті болып көрінетіндіктен, олар теріс пайдалануға ашық. Дәйексөз сандарын әртүрлі тәсілдермен көбейтуге болады: шамадан тыс өзін-өзі цитаталау (өзінің жұмысына сілтеме жасау), дәйексөздік сақиналар (бір-біріне өзара сілтеме жасайтын адамдар тобы) немесе өрістің өзіндік дәйексөз мәдениеті. Оның үстіне, критерийлерді салалар бойынша салыстыруға болмайды: медициналық мақала мен философиялық мақаланың дәйексөз ортасы мүлдем басқа.
Бұл мәселе гуманитарлық және әлеуметтік ғылымдарда одан да айқын көрінеді; себебі бұл салалардағы маңызды нәтижелер (кітаптар, аудармалар, шолулар) дәйексөз деректер базасында аз көрсетіледі. Тарихшының немесе әдебиетші ғалымның әсерін тек дәйексөздер санымен өлшеу – шығарманың табиғатын дұрыс түсінбеу болып табылады. Кітапханашы бұл критерийлердің шегін әкімшілер мен зерттеушілерге түсіндіретін нұсқаулық болып табылады.
Абайлаңыз: Библиометриялық көрсеткішті тұлғаның академиялық жетістігі немесе бөлімнің сапасы туралы қорытынды пікір ретінде көрсетпеңіз. Жауапты зерттеулерді бағалау принциптері шаралардың сапалық бағалауды алмастырмай, толықтыруы тиіс екенін атап көрсетеді.
үш шағын іс
1-жағдай — аумақты картаға түсіру. Кітапханашы зерттеу тобына өз саласы бойынша негізгі жұмысты көрсеткісі келді. Ол нақты дәйексөздер базасынан 200 жарияланымнан деректерді алды; YZ бұл деректерді тақырыптық кластерлерге жинақтап, ең көп сілтеме жасалған 10 зерттеуді бөліп көрсетті. Талдаушы дерекқордағы әрбір кластерді және идентификаторды тексерді; топ ауданның құрылымын тез түсінді.
2-жағдай — Жалған h-индекс ұсталды. Менеджер AI-дан зерттеушінің h-индексі туралы сұрады; AI «42» деді. Кітапханашы нақты деректер базасын қарады: дұрыс мән 19; AI санды құрастырды. Бұл көрсеткіштерді ешқашан AI жадынан емес, нақты деректерден алу керектігін көрсетті.
3-жағдай — қате салыстырудың алдын алды. Бір бөлімше екі тарауды орташа сілтемелер санына қарай салыстыру арқылы қаражат бөлгісі келді. Кітапханашы бөлімдердің бірі медицина (жоғары дәйексөз мәдениеті), екіншісі гуманитарлық ғылымдар (кітап ауыр, дәйексөз мәдениеті төмен) екенін және бұл салыстырудың әділетсіз болатынын түсіндірді. Бағалау далалық айырмашылықтарды ескеретін сапалық критерийлермен расталды.
Көрнекі карталар және оқу тұзақтары
Библиометрияда жиі қолданылатын құрал түйіндер мен сілтемелер бойынша жарияланымдар немесе авторлар арасындағы байланыстарды көрсететін желілік карталар (мысалы, бірлескен дәйексөз немесе бірлескен авторлық желілер) болып табылады. Бұл карталар аймақтың құрылымын, кластерлерін және көпір құрылыстарын көрсетеді; AI негізгі нақты деректерді біріктіріп, осы карталарды түсіндіруге көмектеседі. Бірақ көрнекі карталар күшті болғанымен, жаңылыстыруы мүмкін: үлкен, орталықтан көрінетін түйін «ең маңызды» емес, тек «ең байланысты» болуы мүмкін; Кластердің өлшемі бұл кеңістіктің мәнін емес, тек жарияланым көлемін көрсете алады. Сонымен қатар, карта қалай сызылады (қай шекті, қай уақыт кезеңі, қай дерекқор) нәтижені толығымен өзгертеді. Сондықтан шешімнің негізі ретінде библиометриялық визуализацияны ұсынғанда, оның қандай деректерге негізделгенін, қандай параметрлерді және қандай уақыт кезеңін нақты көрсету қажет. Егер AI жасаған түсініктеме картадағы түйінді «көшбасшы» немесе «ең ықпалды» ретінде көрсетсе, бұл сипаттама нақты деректермен қолдау көрсетілетінін тексеріңіз.
Кеңес: Желілік картаны түсіндіру кезінде «орталық = жоғарғы» тұзаққа түспеңіз. Орталықтық тек қосылым тығыздығын көрсетеді; Жұмыстың бастапқы үлесі немесе сапасы картада көрінбейді және мазмұнын оқу арқылы ғана түсінуге болады.
Көшірілетін төрт үлгі
1) Дәйексөздің нақты деректерін қорытындылау:
Төменде нақты дәйексөздер базасынан алынған жарияланымдар тізімі мен дәйексөз нөмірлері берілген. Оларды тақырыптық кластерлерге бөліп, әрбір кластерді бір сөйлеммен қорытындылаңыз. Мен берген деректерді ғана пайдаланыңыз, жаңа жарияланымдарды немесе дәйексөздерді қоспаңыз/жастамаңыз. Деректер: [мұнда]
2) Тренд пен үлгіні белгілеу:
Төмендегі жыл бойынша жарияланым/дәйексөз деректерінде елеулі тенденцияларды (ұлғайту, азайту, ынтымақтастық шоғырлану) бөлектеңіз. Әрбір бақылауды деректерге негіздеңіз, болжам жасамаңыз. Деректер: [мұнда]
3) Критерийлерді түсіндіру туралы ескерту:
Төмендегі библиометриялық критерийді оның шегін де көрсете отырып, түсіндіріңіз: ол қандай тақырып бойынша ақпарат береді, қай тақырып бойынша ақпарат бермейді, қандай тақырып бойынша теріс пайдалануға ашық? Критерийлер мен контекст: [мұнда]
4) Аудан айырмашылығын бақылау:
Төмендегі екі топтың дәйексөз деректерін тікелей салыстыруға бола ма? Өрістер арасындағы дәйексөз мәдениетіндегі айырмашылықтарды бағалаңыз және салыстыру әділетті екенін түсіндіріңіз. Деректер: [мұнда]
Әлсіз шақыру / Күшті шақыру
Әлсіз шақыру:
Осы автордың ең ықпалды мақалалары мен дәйексөздер санын көрсетіңіз.
AI нақты деректерге қол жеткізбестен өзінің жаһандық жадынан жасалған атаулар мен дәйексөздерді жасайды. Нәтиже: сенімді, бірақ жалған талдау.
Күшті шақыру:
Сіздің рөліңіз: библиометриялық көмекші. Төменде нақты дәйексөздер базасынан алынған жарияланымдар мен дәйексөздердің нөмірлері берілген. Бұл деректерді ең көп келтірілген доменнен ең төменгіге дейін сұрыптаңыз, оны тақырып кластерлеріне бөліңіз және әрбір кластерді қорытындылаңыз. Мен берген деректерден ауытқымаңыз, ешқандай сандарды немесе белгілерді жасамаңыз. Критерийлердің шегі туралы қысқаша ескертпе қосыңыз. Деректер: [мұнда]
Күшті жеделдік; Ол AI-ны нақты деректермен шектейді, құрастыруға тыйым салады және эталондық шектеулерді еске салады.
Критерийлер мен шектеулер кестесі
критерий
Не көрсетеді
Не көрсетпейді
Назар аударыңыз
Дәйексөздер саны
Қолдану/көріну
сапасы, дәлдігі
Аудан мәдениетіне байланысты
h-индекс
Өнімділік+әсер
жеке тұлғаның құндылығы
Мансап ұзақтығына сезімтал
Импакт-фактор
Орташа журнал
Бір мақаланың құндылығы
Журнал деңгейінің критерийлері
ынтымақтастық желісі
Кіммен жұмыс істеді
Жарна мөлшерлемесі
Желідегі рөл түсініксіз
Жалпы қателер
- AI-дан дәйексөздер санын сұрау. Сандар нақты дерекқордан тыс жасалады.
- Критерий сапа өлшемі деп ойлау. Дәйексөз сапаны емес, пайдалануды көрсетеді.
- Аудандарды тікелей салыстыру. Атрибуция мәдениеттері әртүрлі, бұл әділ емес.
- Гуманитарлық пәндерді атрибуция арқылы өлшеу. Дерекқорларда кітапты көп қажет ететін нәтижелер аз көрсетіледі.
- Жеке тұлғаларды критерийлер арқылы бағалау. Жалдау/жоғарылау туралы шешім бір критерийге негізделмеуі керек.
Қысқаша айтқанда
Библиометрияда және дәйексөздерді талдауда AI нақты деректерді кластерлейтін, трендтерді белгілейтін және қорытындылайтын қуатты көмекші болып табылады; Бірақ ешқашан AI жадынан дәйексөз сандары мен сызбаларды қабылдамаңыз, өйткені ол оны құрайды. Көрсеткіштер сапаны емес, пайдалану мен көрінуді көрсетеді; домендер бойынша салыстыруға болмайды; гуманитарлық ғылымдарда аз ұсынылған және жеке тұлғаларды бағалау үшін жалғыз қолданыла алмайды. Кітапханашы – бұл критерийлердің шегін түсіндіретін және оларды сапалы бағалаумен теңестіретін жауапты жетекші.
Қолданбалы тапсырма
Нақты дәйексөздер базасынан жарияланымдардың шағын тізімін алыңыз (10-15 жазба, дәйексөздер саны бар). AI кластеріне ие болыңыз және «Нақты дәйексөз деректерін жинақтау» үлгісімен қорытындылаңыз, содан кейін дерекқорға қарсы сілтемелер мен сандарды растаңыз. Содан кейін "Критерийлерді түсіндіру туралы ескерту" үлгісімен таңдаған метриканың (мысалы, h-индекс) шектерін басып шығарыңыз және оны менеджерге қалай түсіндіретініңізді жоспарлаңыз.
бақылау парағы
- [ ] Мен нақты дерекқордан дәйексөз сандары мен дәйексөздерді бердім, менде оларды AI құрастырған жоқ.
- [ ] Мен көрсеткіштерді сапа емес, пайдалану/көріну көрсеткіштері ретінде ұсындым.
- [ ] Мен өрістер арасындағы дәйексөз мәдениетінің айырмашылығын ескердім.
- [ ] Мен гуманитарлық ғылымдардың аз қамтылғанын ескердім.
- [ ] Мен жеке тұлғаларды бағалауда тек критерийді пайдаланған жоқпын.