Киселёва (Лавровская) Вера Григорьевна, соискатель ученой степени кандидата наук, Институт образования; ; ассистент кафедры телекоммуникаций, Институт радиоэлектроники и информатики
г. Москва
Vera G. Kiselyova (Lavrovskaia), PhD Candidate, Institute of Education; Assistant at the Department of Telecommunications, Institute of Radio Electronics and Informatics
Moscow
Развитие генеративного искусственного интеллекта (ГенИИ) и его интеграция в индустриальную сферу влияют на спектр навыков, востребованных на рынке труда. Для подготовки востребованных специалистов системе высшего образования необходимо развивать у студентов как навыки взаимодействия с большими языковыми моделями (БЯМ), так и гибкие навыки, такие как критическое мышление, позволяющие ориентироваться в изменяющихся требованиях. Промпт-инжиниринг как процесс создания и модификации запросов к БЯМ становится важным инструментом в образовании, однако существующие работы, посвященные изучению потенциала промпт-инжиниринга для развития критического мышления, в основном носят теоретический характер. Целью проведенного эмпирического исследования стало выявление возможности развития отдельных аспектов критического мышления при обучении промпт-инжинирингу. В целевую выборку вошли 93 студента инженерного направления, которые коллективно выполняли задания по дисциплине «Правовое регулирование в области связи» с использованием инструментов ГенИИ. Тридцать восемь диалогов студентов с БЯМ были проанализированы с применением метода качественного контент-анализа. Выделены восемь паттернов взаимодействия, часть из которых связана с использованием техник промпт-инжиниринга. Наиболее популярным паттерном стало добавление информации из лекций или других источников, что указывает на стремление студентов к уточнению и улучшению ответов БЯМ. Проведенный анализ данных позволил выявить в промптах студентов проявление таких аспектов критического мышления, как анализ, сравнение и синтез информации. Сопоставление итогов двух этапов кодирования показало, что прослеживается связь трех из восьми паттернов, которые применяют студенты, с вышеупомянутыми аспектами критического мышления. Исследование демонстрирует, что обучение промпт-инжинирингу может стать перспективным образовательным инструментом для развития критического мышления у студентов при соблюдении определенных условий. Также результаты указывают на возможность использования анализа диалогов с БЯМ для оценки навыков студентов.
The development of generative artificial intelligence (GenAI) and its integration into the industrial sector is influencing the range of skills in demand in the labor market. To prepare competitive professionals, higher education systems need to develop students’ skills in interacting with large language models (LLMs) as well as soft skills, such as critical thinking, which enable them to adapt to changing requirements. Prompt engineering, as the process of creating and modifying queries to LLMs, is becoming an important tool in education. However, existing research on the potential of prompt engineering for critical thinking development is primarily theoretical. The aim of this empirical study was to identify opportunities for developing specific aspects of critical thinking through prompt engineering training. The target sample included 93 engineering students who collaboratively completed tasks in the discipline “Legal regulation in the field of communications” using generative AI tools. Thirty-eight student dialogues with LLMs were analyzed using qualitative content analysis. Eight interaction patterns were identified, some of which were associated with the use of prompt engineering techniques. The most common pattern was the addition of information from lectures or other sources, indicating students’ efforts to refine and improve LLM responses. The data analysis revealed the manifestation of critical thinking aspects, such as analysis, comparison, and synthesis of information, in student prompts. A comparison of the results from two coding stages demonstrated a connection between three of the eight patterns and the aforementioned critical thinking aspects. The study suggests that prompt engineering training can become a promising tool for developing critical thinking in students, provided certain educational conditions are met. Additionally, the results indicate the potential of using LLM dialogue analysis to assess student skills.
The authors declare that there are no conflicts of interest present.