Reliability of crowdsourcing as a method for collecting emotions labels on pictures (Запись № 664077)
[ простой вид ]
000 -Маркер | |
---|---|
Поле контроля фиксированной длины | 03188nlm1a2200397 4500 |
005 - Идентификатор версии | |
Поле контроля фиксированной длины | 20231030041917.0 |
035 ## - Другие системные номера | |
Идентификатор записи | (RuTPU)RU\TPU\network\35261 |
100 ## - Данные общей обработки | |
Данные общей обработки | 20210326a2019 k y0engy50 ba |
101 0# - Язык ресурса | |
Язык текста, звукозаписи и т.д. | английский |
102 ## - Страна публикации или производства | |
Страна публикации | |
135 ## - Поле кодированных данных: электронные ресурсы | |
Кодированные данные для электронного ресурса | drcn ---uucaa |
181 #0 - Поле кодированных данных: вид содержания | |
Код вида содержания | i |
182 #0 - Поле кодированных данных: средство доступа | |
Код средства доступа | electronic |
200 1# - Заглавие и сведения об ответственности | |
Основное заглавие | Reliability of crowdsourcing as a method for collecting emotions labels on pictures |
Первые сведения об ответственности | O. E. Korovina, G. M. A. Baez, F. Casati |
203 ## - Вид содержания и средство доступа | |
Вид содержания | |
Средство доступа | |
300 ## - Общие примечания | |
Текст примечания | Title screen |
320 ## - Примечания о наличии в ресурсе библиографии/указателя | |
Текст примечания | [References: 15 tit.] |
330 ## - Резюме или реферат | |
Текст примечания | Objective In this paper we study if and under what conditions crowdsourcing can be used as a reliable method for collecting high-quality emotion labels on pictures. To this end, we run a set of crowdsourcing experiments on the widely used IAPS dataset, using the Self-Assessment Manikin (SAM) emotion collection instrument, in order to rate pictures on valence, arousal and dominance, and explore the consistency of crowdsourced results across multiple runs (reliability) and the level of agreement with the gold labels (quality). In doing so, we explored the impact of targeting populations of different level of reputation (and cost) and collecting varying numbers of ratings per picture. Results The results tell us that crowdsourcing can be a reliable method, reaching excellent levels of reliability and agreement with only 3 ratings per picture for valence and 8 per arousal, with only marginal difference between target populations. Results for dominance were very poor, echoing previous studies on the data collection instrument used. We also observed that specific types of content generate diverging opinions in participants (leading to higher variability or multimodal distributions), which remain consistent across pictures of the same theme. These can inform the data collection and exploitation of crowdsourced emotion datasets. |
461 ## - Уровень набора | |
Заглавие | BMC Research Notes |
463 ## - Уровень физической единицы | |
Заглавие | Vol. 12 |
Обозначение тома | [715, 6 p.] |
Дата публикации | 2019 |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | электронный ресурс |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | труды учёных ТПУ |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | crowdsourcing emotions |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | empirical study |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | rating behavior |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | reliability |
610 1# - Неконтролируемые предметные термины | |
Предметный термин | краудсорсинг |
700 #1 - Имя лица – первичная ответственность | |
Начальный элемент ввода | Korovina |
Часть имени, кроме начального элемента ввода | O. E. |
Расширение инициалов личного имени | Olga Evgenjevna |
701 #1 - Имя лица – альтернативная ответственность | |
Начальный элемент ввода | Baez |
Часть имени, кроме начального элемента ввода | G. M. A. |
Расширение инициалов личного имени | Gonzalez Markos Antonio |
701 #1 - Имя лица – альтернативная ответственность | |
Начальный элемент ввода | Casati |
Часть имени, кроме начального элемента ввода | F. |
Дополнения к именам, кроме дат | Italian economist and Professor at the University of Trento (Italy) |
-- | Professor of Tomsk Polytechnic University, candidate of technical Sciences |
Даты | 1971- |
Расширение инициалов личного имени | Fabio |
-- | stltpush |
Идентификатор авторитетной/ нормативной записи | (RuTPU)RU\TPU\pers\39820 |
712 02 - Наименование организации – вторичная ответственность | |
Начальный элемент ввода | Национальный исследовательский Томский политехнический университет |
Структурное подразделение | Институт социально-гуманитарных технологий |
-- | Кафедра экономики |
-- | Международная научно-образовательная лаборатория технологий улучшения благополучия пожилых людей |
-- | 7381 |
-- | stltpush |
Идентификатор авторитетной/ нормативной записи | (RuTPU)RU\TPU\col\21257 |
801 #2 - Источник записи | |
Страна | RU |
Организация | 63413507 |
Дата составления | 20210326 |
Правила каталогизации | RCR |
856 4# - Местонахождение электронных ресурсов и доступ к ним | |
Универсальный идентификатор ресурса | https://doi.org/10.1186/s13104-019-4764-4 |
090 ## - System Control Numbers (Koha) | |
Koha biblioitem number (autogenerated) | 664077 |
942 ## - Добавленные элементы ввода (Коха) | |
Тип документа | Computer Files |
Нет доступных единиц.