SciTrue: Може ли AI да ни помогне да проверяваме научни твърдения?
| Generative AI can produce convincing academic text in seconds. Convincing does not always mean correct. References may be invented, claims may be exaggerated, and a real paper may be cited for something it never found. SciTrue is designed to address such problems. SciTrue is an AI-supported platform for checking scientific claims against published research. Instead of asking only, “What does the literature say?”, you can ask, “Does the scientific evidence support this specific statement?” For example, a doctoral student at the University of Economics Varna might write: “Using generative AI improves university students’ academic performance.” SciTrue can search the research literature and identify studies in support of the claim, studies to challenge it, and studies to support it only under certain conditions. It can also connect the user to the relevant papers and passages. SciTrue is different from tools such as ChatGPT or Claude. A general AI assistant can explain a topic and generate text. SciTrue focuses more narrowly on scientific evidence and claim verification. How can SciTrue be used at UE Varna? A marketing researcher might check the statement: “Influencer credibility increases purchase intention.” Instead of finding one convenient citation, the researcher can examine whether multiple studies support the relationship and whether the findings depend on country, product category, age group, or research design. A doctoral student can use SciTrue to check an AI-generated literature review. If ChatGPT provides ten references, SciTrue can help determine whether those papers exist and whether they support the statements attached to them. A lecturer might also use it in class. Students could investigate a statement such as: “Remote work increases employee productivity.” Their task would be to identify supporting and conflicting evidence, examine the measurement of productivity, and rewrite the claim more carefully. SciTrue also offers tools for checking citations and finding evidence for uncited statements. This can make it useful during literature reviews, manuscript preparation, dissertation writing, and research-methods teaching. Strengths Focus on evidence rather than fluent answers. ScieTrue encourages researchers and students to inspect the relationship between a claim and the research used to support it. It can also help detect fabricated references, weak citation support, and overgeneralized conclusions. For teaching, this creates a useful workflow: Generate → Verify → Judge. Weaknesses SciTrue is an AI system. Its assessment of evidence can be incomplete or wrong. Researchers should still open and read the original papers. Its coverage also does not remove the need for Scopus, Web of Science, Google Scholar, or discipline-specific databases. For systematic reviews, researchers still need transparent search strategies, inclusion criteria, screening procedures, and documented methods. Privacy is another consideration. Researchers should avoid submitting confidential manuscripts, sensitive datasets, or protected participant information without checking institutional and platform policies. SciTrue is therefore most useful as an additional verification layer. For universities, its main value may be educational: helping students and researchers move from asking “Can AI find me a citation?” to asking the more important question, “Does the evidence support what I am claiming?” | Генеративният AI може да създаде убедително академично съдържание за секунди. Но убедително не винаги означава правилно. Източниците могат да бъдат измислени, твърденията могат да бъдат преувеличени, а реална научна публикация може да бъде цитирана като доказателство за нещо, което тя всъщност не е установила. SciTrue е създаден, за да адресира подобни проблеми. SciTrue е платформа с AI поддръжка за проверка на научни твърдения спрямо публикувани изследвания. Вместо да питате само „Какво казва научната литература?“, можете да попитате: „Подкрепят ли научните доказателства това конкретно твърдение?“ Например докторант в Икономически университет – Варна може да напише: „Използването на генеративен AI подобрява академичните резултати на студентите.“ SciTrue може да търси в научната литература и да идентифицира изследвания, които подкрепят твърдението, изследвания, които го оспорват, както и такива, които го подкрепят само при определени условия. Платформата може също да насочи потребителя към съответните научни публикации и конкретни пасажи в тях. SciTrue се различава от инструменти като ChatGPT или Claude. Общ AI асистент може да обясни дадена тема и да генерира текст. SciTrue се фокусира по-тясно върху научните доказателства и проверката на твърдения. Как може SciTrue да се използва в ИУ – Варна? Изследовател в областта на маркетинга може да провери твърдението: „Доверието в инфлуенсъра увеличава намерението за покупка.“ Вместо да намери един удобен източник, изследователят може да провери дали множество проучвания подкрепят тази връзка и дали резултатите зависят от държавата, продуктовата категория, възрастовата група или дизайна на изследването. Докторант може да използва SciTrue, за да провери литературен обзор, генериран с AI. Ако ChatGPT предостави десет източника, SciTrue може да помогне да се установи дали тези публикации действително съществуват и дали подкрепят твърденията, към които са приложени. Преподавател може да използва платформата и в учебния процес. Студентите например могат да изследват твърдението: „Дистанционната работа увеличава производителността на служителите.“ Тяхната задача може да бъде да открият подкрепящи и противоречащи доказателства, да проверят как е измерена производителността и след това да преформулират твърдението по-прецизно. SciTrue предлага и инструменти за проверка на цитирания и за намиране на доказателства за твърдения без посочени източници. Това може да бъде полезно при литературни обзори, подготовка на научни статии, писане на дисертации и преподаване на изследователски методи. Силни страни Фокус върху доказателствата, а не върху убедително формулираните отговори. SciTrue насърчава изследователите и студентите да проверяват връзката между дадено твърдение и научните изследвания, използвани за неговото подкрепяне. Платформата може също да помогне за откриване на измислени източници, слаба връзка между цитат и твърдение и прекалено обобщени заключения. За преподаването това създава полезен работен процес: Генерирай → Провери → Прецени. Слаби страни SciTrue е AI система. Оценката на доказателствата може да бъде непълна или погрешна. Изследователите все пак трябва да отварят и четат оригиналните научни публикации. Обхватът на платформата също не премахва необходимостта от Scopus, Web of Science, Google Scholar или специализирани научни бази данни. При систематични литературни обзори изследователите все още трябва да използват прозрачни стратегии за търсене, критерии за включване и изключване, процедури за подбор и добре документирана методология. Поверителността е друг важен въпрос. Изследователите не трябва да изпращат конфиденциални ръкописи, чувствителни масиви от данни или защитена информация за участници, без предварително да проверят институционалните правила и политиките на платформата. Затова SciTrue е най-полезен като допълнителен слой за проверка. За университетите основната му стойност може да бъде образователна: да помогне на студентите и изследователите да преминат от въпроса „Може ли AI да ми намери източник?“ към по-важния въпрос: „Подкрепят ли доказателствата това, което твърдя?“ |