Могут ли гендерные аватары повлиять на командную работу в кодировании?
24 июня 2025 г.Таблица ссылок
Аннотация и 1 введение
1.1 Платформа Twincode
1.2 Пилотные исследования
1.3 Другие гендерные идентичности и 1.4 структура бумаги
2 Связанная работа
3 оригинальное исследование (Seville Dec, 2021) и 3,1 участников
3.2 Эксперимент. Выполнение
3.3 Факторы (независимые переменные)
3.4 Переменные ответа (зависимые переменные)
3.5 Смешающие переменные
3.6 Анализ данных
4 Первая репликация (Беркли, май, 2022)
4.1 участники
4.2 Эксперимент. Выполнение
4.3 Анализ данных
5 Обсуждение и угрозы достоверности и 5.1 Операционная конструкция причины - лечение
5.2 Операционализация конструкции эффекта - метрики
5.3 Отбор для населения - участники
6 Выводы и будущая работа
6.1 Репликация в разных культурных фонах
6.2 Использование чат-ботов в качестве партнеров и кодирование высказывания на основе искусственного интеллекта
Наборы данных, соблюдение этических стандартов, подтверждения и ссылки
A. Анкета № 1 и № 2.
B. Эволюция пользовательского интерфейса Twincode
C. Пользовательский интерфейс Tag-A-Chat
3.3 Факторы (независимые переменные)
Четыре фактора, то есть независимые переменные, как в исходном эксперименте, так и в репликации следующие.
группаНоминальный фактор, представляющий групповых (экспериментальных или контрольных) субъектов, были случайным образом распределены.
времяНоминальный фактор, представляющий момент (T1 и T2), в котором были выполнены первые и вторые задачи в PAIR.
IPGENDERНоминальный фактор, представляющий бинарный пол индуцированного партнера (мужчина или женщина для экспериментальной группы, и ни один для контрольной группы) во время задач в пары.
полНоминальный фактор, представляющий пол субъекта, который может быть мужчина, женщина или любой другой вариант, который свободно выражен в демографической форме во время регистрации.
3.4 Переменные ответа (зависимые переменные)
Переменные отклика, то есть зависимые переменные, в обоих исследованиях описаны ниже, организованные в соответствии с соответствующими тремя источниками данных - Questionnaires, Twincode Platform и кодированием высказывания чата.
3.4.1 Воспринимаемые переменные (анкеты)
Переменные отклика, измеряющие восприятие субъектов, являются в основном шкалы, состоящие из четырех или более 0–10 линейных элементов численного ответа, и они рассчитываются как среднее значение их соответствующих элементов. Следуя рекомендациям [29], элементы 0–10 помечены не только в первом и последнем точках, но и в средней точке (см. Рисунок 5). Они описаны ниже.
стрПеременная интервальная переменная, состоящая из четырех элементов численного ответа 0–10 (PP1 ... 4), измеряя собственную воспринимаемую производительность субъекта во время каждой парной задачи программирования по сравнению с сольным программированием (см. RQ1). Низкие значения соответствуют повышению производительности программирования сольного программирования, тогда как высокие значения соответствуют лучшей производительности парного программирования (см. Рисунок 5 для примера элемента ответа и раздела A.1 в Приложении для всех элементов ответа в шкале).
pptcПеременная интервальная переменная, состоящая из четырех элементов численного ответа 0–10 (PPTC1 ... 4), измеряя воспринимаемую техническую компетентность партнера по сравнению с их собственной после каждой входной задачи (см. RQ2). Низкие значения соответствуют более высокой производительности субъекта, тогда как более высокие значения соответствуют повышению производительности партнера (см. Раздел A.2 в Приложении для всех элементов ответа).
ППАКоэффициент переменной подсчет количества положительных аспектов партнера, идентифицированных субъектом после каждой задачи в POAR (см. RQ3) [6]. Эта переменная автоматически вычисляется из открытого элемента вопроса, в котором субъекты просят написать наиболее положительные и негативные аспекты своих партнеров в ранее выполненном упражнении по программированию парных парных (см. Раздел A.3 в Приложении). Им указано префиксировать положительные аспекты с помощью знака плюс (+) и отрицательных с указателем минус (-). Эта переменная является результатом автоматического подсчета количества знаков плюс в тексте открытого вопроса.
ПНАКоэффициент переменной подсчет количества отрицательных аспектов партнера, идентифицированных субъектом после каждой задачи в POAR (см. RQ3). Подобно переменной PPA, эта переменная является результатом автоматического подсчета количества знаков минус в тексте вышеупомянутого открытого вопроса (см. Также раздел A.3 в Приложении).
PPGENDERНоминальная переменная, измеряя пол воспринимаемого партнера во время задач. Чтобы измерить эту переменную, субъекты задают в вопроснике № 3, помнят ли они их партнеры в окнах чата или нет. Если ответ - нет или я не помню (IDR), этой переменной присваивается уровни NONE или IDR на T1 и T2. Если ответ - да, то субъектов просят аватаров первого и второго партнера, имеющего мужчину, женщину или IDR в качестве опций, как показано на рисунке 6.
спПеременная интервальная переменная, состоящая из пяти пунктов численного ответа 0–10 (CPS1 ... 5), измеряя, воспринимал ли субъект лучшие навыки у своего первого или второго партнера в задачах в PAIR, то есть сравнивали навыки партнеров (см. RQ4). Низкие значения соответствуют первому партнеру, тогда как высокие значения соответствуют второму партнеру (см. Раздел A.4 в Приложении для всех элементов ответа).
Только в случае экспериментальной группы эта переменная преобразуется после сбора таким образом, что низкие значения соответствуют партнеру, для которого индуцированный пол был мужчиной, и высокие значения для партнера, для которого индуцированный пол был женщиной, чтобы проанализировать, существует ли гендерное смещение в оценке.
3.4.2 Переменные, связанные с поведением (платформа Twincode)
SCA / SCA_RFПеременные масштаба соотношения, представляющие количество и относительную частоту символов, добавленные субъектом в окно исходного кода во время задачи в паре (добавление исходного кода).
SCD / SCD_RFКоэффициенты масштабных переменных, представляющих количество и относительную частоту символов, удаленные предметом из окна исходного кода во время задачи в паре. (делеции исходного кода).
OKV / OKV_RFКоэффициенты масштабной шкалы, представляющие количество и относительную частоту успешных (ОК) проверки исходного кода, выполняемого субъектом во время задачи в паре.
KOV / KOV_RFКоэффициенты масштабной масштабной переменные, представляющие количество и относительную частоту неудачных (KO) проверки исходного кода, выполняемого субъектом во время задачи в паре.
DM / DM_RFСоотношение переменных шкалы, представляющих количество и относительную частоту диалоговых сообщений (высказывания чата), отправленные субъектом во время задачи в паре.
3.4.3 Переменные, связанные с коммуникацией (тегинг высказывания)
Высказывания чата, зарегистрированные на платформе Twincode во время задач в вручении, были помечены вручную в соответствии с двумя ортогональными измерениями. В первом измерении используются 13 тегов (от S до O в таблице 1), предложенные [44]. Второе измерение классифицирует каждое сообщение как формальное или неформальное, считая таким же формальным обычным способом, которым студент университета будет передавать текстовое представление профессору и неформально.
Для процесса маркировки мы следовали процессу, вдохновленному работой [42], в котором два исследователя каждый пометили 60% данных, охватывая все сообщения диалога. Перекрывающаяся подмножество 20%, которая использовалась для первоначального обучения, установила надежность межкодера с использованием каппа Коэна, которая была κ = 0,796 для формальных/неформальных тегов, и κ = 0,754 для тегов Rodr´ıguez и др., Оба указывает на существенное согласие и достаточную религиозность для дальнейшего кодирования в соответствии с [55].
Переменные ответа, связанные с ручным тегом высказываний чата (см. RQ6 и RQ7), соответствуют тегам в таблице 1 и перечислены ниже. Каждая переменная представляет частоту, то есть количество, и ее связанная с ним относительная частота рассчитывается в отношении количества высказываний в чате, сгенерированных субъектом во время задачи в паре, которая определяется переменной DM, указанной в предыдущем разделе.
я / i_rfКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту неформальных сообщений, генерируемых субъектом во время задачи в POAR.
f / f_rfКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту формальных сообщений, генерируемых субъектом во время задачи в POAR.
S / S_RFКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту утверждения информации или объяснения сообщений, сгенерированных субъектом во время задачи в паре.
u / u_rfКоэффициенты масштабной масштабной переменной, представляющие абсолютную и относительную частоту мнения или индикацию сообщений о неопределенности, генерируемых субъектом во время задачи в паре.
D / D_RFКоэффициенты масштабной масштабной переменные, представляющие абсолютную и относительную частоту явных или прямых сообщений об инструкциях, генерируемых субъектом во время задачи в паре.
su / su_rfКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту вежливой или косвенной инструкции или сообщений о предложениях, сгенерированных субъектом во время задачи.
ack / ack_rfКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту сообщений о подтверждении, сгенерированные субъектом во время задачи в паре.
m / m_rfКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту сообщений мета-коммита или отражения, генерируемых субъектом во время задачи в паре.
Qyn / Qyn_rfКоэффициенты масштабной масштабной переменной, представляющие абсолютную и относительную частоту сообщений «да/без вопросов», сгенерированных субъектом во время задачи в паре.
QWH / QWH_RFКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту WH- вопросов (кто, что, где, когда, почему и как) сообщения, генерируемые субъектом во время задачи в паре.
Ayn / Ayn_rfКоэффициенты масштабной масштабной переменной, представляющие абсолютную и относительную частоту ответа на сообщения «да/без вопросов», сгенерированных субъектом во время задачи в паре.
awh / awh_rfКоэффициенты масштабной масштабной переменной, представляющие абсолютную и относительную частоту ответа на сообщения о том, что вопросы, генерируемые субъектом во время задачи в паре.
FP / FP_RF Rпеременные шкалы ATIO, представляющие абсолютную и относительную частоту положительной задачифонСообщения EEDBACK, сгенерированные предметом во время задачи.
fnon / fnon_rfКоэффициенты масштабных переменных, представляющих абсолютную и относительную частоту не -позитивной задачифонСообщения EEDBACK, сгенерированные предметом во время задачи.
Отношение o / o_rf переменные шкалы, представляющие абсолютную и относительную частоту сообщений о выкл. Задачи, сгенерированных субъектом во время задачи в паре.
Авторы:
(1) Амадор Дюран, Институт I3US, Университет де Севилья, Севилья, Испания и лаборатория баллов, Университет де Севилья, Севилья, Испания (amador@us.es);
(2) Пабло Фернандес, Институт I3US, Университет де Севилья, Севилья, Испания и лаборатория баллов, Universidad de Sevilla, Севилья, Испания (pablofm@us.es);
(3) Беатрис Бернардес, Институт I3US, Университет де Севилья, Севилья, Испания и лаборатория баллов, Университет де Севилья, Севилья, Испания (beat@us.es);
(4) Натаниэль Вайнман, Отдел компьютерных наук, Калифорнийский университет, Беркли, Беркли, США (nweinman@berkeley.edu);
(5) Аслахан Акалин, Отдел компьютерных наук, Калифорнийский университет, Беркли, Беркли, США (Asliakalin@berkeley.edu);
(6) Армандо Фокс, Отдел компьютерных наук, Калифорнийский университет, Беркли, Беркли, США (Fox@berkeley.edu).
Эта статья есть
[6] В соответствии с четырьмя шкалами измерений, введенных [52], переменные PPA и PNA определяются как переменные отношения, поскольку они представляют собой числовые переменные, в которых ноль представляет собой отсутствие атрибута (см. Раздел 2.2 в [40] для превосходного объяснения или [22] для графического представления). Обратите внимание, что это не относится к переменным интервала PP, PPTC и CPS, в которых ноль обычно означает «одинаково в обоих случаях» или «оба одинаково».
Оригинал