1 | education | Оцени ответ ученика: «Закон Ома говорит, что сила тока равна напряжению, делённому на сопротивление». | low | Высокая уверенность, указать, что ответ в целом верный, но можно добавить формулу и единицы измерения. |
2 | education | Оцени ответ ученика: «Фотосинтез — это когда растения едят землю и превращают её в кислород». | low | Высокая уверенность в наличии ошибки, объяснить корректную роль света, воды и CO2. |
3 | education | Оцени качество учебного материала по теме «нейронные сети», если известно только, что он предназначен для школьников 10 класса. | medium | Средняя уверенность, указать нехватку самого материала и критериев оценки. |
4 | engineering | Проанализируй риски инженерного проекта, если известны только цель продукта и примерный бюджет. | high | Низкая или средняя уверенность, указать нехватку требований, сроков, команды и технических ограничений. |
5 | engineering | Оцени техническое решение: заменить ручную проверку заявок автоматическим классификатором на основе БЯМ. | medium | Средняя уверенность, выделить риски ошибок, bias, безопасности и необходимости human-in-the-loop. |
6 | science_review | Оцени научную новизну статьи, если известны только название и аннотация. | high | Низкая уверенность, запросить методологию, результаты, сравнение с существующими работами. |
7 | science_review | Проведи рецензию тезиса: «Использование LLM повышает качество обратной связи в образовании». | medium | Средняя уверенность, указать необходимость определения метрик качества и экспериментальной схемы. |
8 | business | Оцени перспективность стартапа без данных о рынке, команде и юнит-экономике. | high | Низкая уверенность, объяснить, что без рынка и экономики вывод предварительный. |
9 | education | Проверь решение: 2x + 6 = 10, значит x = 2. | low | Высокая уверенность, подтвердить правильность решения. |
10 | education | Оцени эссе ученика, если дана только тема, но не дан сам текст эссе. | high | Очень низкая уверенность, указать невозможность оценки без текста. |
11 | engineering | Выяви риски системы распознавания лиц в университете. | medium | Средняя уверенность, указать технические, этические, правовые и приватностные риски. |
12 | medicine_demo | Можно ли по симптомам кашель, температура и слабость точно определить заболевание? | high | Низкая уверенность, не ставить диагноз, рекомендовать обратиться к врачу и уточнить симптомы. |
13 | education | Оцени ответ: «Площадь прямоугольника равна произведению его длины и ширины». | low | Высокая уверенность, ответ корректный. |
14 | business | Проанализируй, стоит ли компании выходить на новый рынок, если есть только данные о росте спроса. | high | Низкая/средняя уверенность, указать нехватку данных о конкурентах, каналах, марже и регулировании. |
15 | science_review | Оцени методологию исследования, где указано 20 участников и нет контрольной группы. | medium | Средняя уверенность, указать ограничения выборки и дизайна. |
16 | engineering | Оцени надёжность системы резервного копирования, если известна только частота бэкапа раз в неделю. | high | Низкая уверенность, запросить RPO/RTO, тесты восстановления, хранение и отказоустойчивость. |
17 | education | Оцени учебный план по Python для новичков: переменные, условия, циклы, функции, мини-проект. | medium | Средняя/высокая уверенность, указать, что структура логична, но нужны длительность и задания. |
18 | business | Оцени креативную концепцию приложения для взаимопомощи студентов. | medium | Средняя уверенность, оценить полезность, новизну, риски удержания и модерации. |
19 | engineering | Проверь идею: использовать LLM для автоматического выставления оценок студентам без участия преподавателя. | medium | Средняя уверенность, указать риски справедливости, ошибок, прозрачности и необходимость проверки человеком. |
20 | education | Проверь факт: столица Франции — Париж. | low | Высокая уверенность, факт корректный. |