Увидел пост@lrcoyamоб итогах первого этапа ивента МОЯ ХРОНИКА.
Видел что многие, кто участвуют у меня в розыгрышах, тоже принимали там участие. Поэтому стало интересно мнение самих участников по моменту оценивания ивента.

Я посмотрел файл с оцениванием и очень удивился двум моментам:
1) Один член жюри давая комментарии по пунктам работ почти всегда укладывался в 10 слов)
2) Один член жюри явно посльзовался методом гибридного текста: ИИ-каркас + ручная обогащающая правка.
====================
И решил прогнать файл с оцениванием через несколько нейроночек с таким промтом:
"Рассмотри все разделы по отдельности, т.к. есть подозрение на вставки "человеческих" комментариев в ИИшный отчет от проверяющего ХХХХХХХХ "

И получился следующий итог:
=========от платной===========
🔴 Явно «ИИшные» фрагменты — высокая вероятность

Для этих комментариев характерны шаблонные ИИ-конструкции: перечисление через «:», сухая нейтральная подача, шаблоны «Автор успешно/органично/умело вписал свой никнейм», «Текст насыщен глубокими метафорами», «Оформление текста удобно для чтения, есть разделение на абзацы». Этот блок встречается в более чем 60% всех комментариев и является практически неизменным от поста к посту.

Примеры наиболее «отштампованных» блоков:

Посты 41, 43, 44, 45, 47, 48, 49, 50, 51, 52, 53, 54, 56, 59, 60, 70, 74, 75, 79, 81, 83, 86, 87 — почти каждый комментарий про Грамотность заканчивается дословно: «Грамматических и пунктуационных ошибок нет. Оформление текста удобно для чтения, есть разделение на абзацы.»Про Сюжет: постоянный оборот «Автор успешно/органично/умело вписал свой никнейм в мир произведения/персонажа/истории» — используется почти в каждом посте без вариаций.

==========от бесплатной===========
Шаблонные фразы, которые кочуют из отзыва в отзыв

В разных текстах встречаются почти дословные повторы:

«Автор умело прописал свой никнейм в мир истории»
«Автор неплохо раскрыл своего персонажа»
«Грамматических и пунктуационных ошибок нет»
«Стиль повествования художественный»
«Текст насыщен метафорами»
«Оформление текста удобно для чтения, есть разделение на абзацы»

Если бы каждый отзыв писался человеком с нуля, таких дословных совпадений было бы меньше. Нейросеть же, получив похожий промпт, генерирует их снова и снова.
=====================
Вопрос к участникам, как вам оценивание ивента?