← документы задачи · mind map ТЗ · роудмап
Данные задачи 04
Что организатор дал для работы: фрагмент «Для теста» и обучающий набор с экспертной разметкой. Все цифры посчитаны по тем же файлам, что видит сервис, и тем же кодом определения области. Здесь только агрегаты — персональные теги DICOM и идентификаторы исследований не показываются.
Снимки по областям
Уникальные снимки обучающего набора; область определена кодом сервиса.
Таблица
| область | снимков |
|---|---|
| поясничный отдел | 99 |
| левое бедро | 79 |
| правое бедро | 74 |
Снимков в исследовании
Типичное исследование — позвоночник и оба бедра.
Таблица
| уникальных снимков | исследований |
|---|---|
| 1 | 22 |
| 2 | 4 |
| 3 | 74 |
Разметка экспертов по критериям
Как каждое нарушение выглядит на снимках — в каталоге нарушений.
Доля исследований с нарушением среди размеченных. Пунктир — нет разметки: у исследования нет снимка этой области.
Таблица
| область | критерий | нарушение | норма | нет разметки | доля нарушений |
|---|---|---|---|---|---|
| Позвоночник | охват | 6 | 93 | 1 | 6% |
| Позвоночник | наклон оси | 10 | 89 | 1 | 10% |
| Позвоночник | посторонние предметы | 17 | 82 | 1 | 17% |
| Позвоночник | итог | 32 | 67 | 1 | 32% |
| Правое бедро | укладка | 17 | 55 | 28 | 24% |
| Правое бедро | зона интереса | 3 | 69 | 28 | 4% |
| Правое бедро | итог | 19 | 53 | 28 | 26% |
| Левое бедро | укладка | 19 | 59 | 22 | 24% |
| Левое бедро | зона интереса | 4 | 74 | 22 | 5% |
| Левое бедро | итог | 22 | 56 | 22 | 28% |
Какие нарушения у позвоночника
32 исследований с нарушением: подкритерии почти не сочетаются.
Таблица
| сочетание | исследований |
|---|---|
| посторонние предметы | 15 |
| ось | 7 |
| охват | 6 |
| без отметки подкритерия | 2 |
| ось + посторонние предметы | 2 |
2 исследования помечены плохими без единого подкритерия — это несогласованность самой разметки, учитываем при оценке.
Какие нарушения у бёдер
Оба бедра вместе, 41 снимков с нарушением: почти всегда — укладка.
Таблица
| сочетание | снимков |
|---|---|
| укладка | 34 |
| зона интереса | 5 |
| укладка + зона интереса | 2 |
Дубли файлов
Сколько раз один и тот же снимок (по совпадению пикселей) лежит в наборе. До обучения и проверки дубли убираются, иначе метрики завышаются.
Таблица
| копий у снимка | снимков | файлов |
|---|---|---|
| 1 | 125 | 125 |
| 2 | 71 | 142 |
| 3 | 20 | 60 |
| 4 | 22 | 88 |
| 5 | 11 | 55 |
| 9 | 1 | 9 |
| 10 | 2 | 20 |
Комментарии экспертов
23 исследований с комментарием; повторяющиеся темы.
Остальные комментарии единичные. Чаще всего эксперты отмечали сколиоз — на нём сервис путает изгиб с наклоном оси.
Что есть в DICOM и чего нет
Технические параметры 499 файлов обучающего набора.
- Один аппарат: GE Healthcare Lunar Prodigy Advance, модальность CR, 8 бит, MONOCHROME2. Сервис настроен под этот протокол.
- Ширина кадра задаёт область: 280 px — 331 файлов (высота 180–349, медиана 265); 300 px — 166 файлов (высота 259–346, медиана 315); 248 px — 2 файлов (высота 401–405, медиана 403). 300 px — протокол позвоночника, 280 px — бедра.
- Нет масштаба: ни PixelSpacing, ни ImagerPixelSpacing — ни в одном из 499 файлов. Поля вокруг зоны интереса в сантиметрах (3 и 2 см по ТЗ) без масштаба от организатора не посчитать.
- Нет области в тегах: BodyPartExamined пуст во всех 499 файлах — область сервис определяет по самому изображению.
Таблица
| параметр | значения |
|---|---|
| производитель | GE Healthcare — 499 |
| модель | Lunar Prodigy Advance — 499 |
| модальность | CR — 499 |
| разрядность, бит | 8 — 499 |
| фотометрия | MONOCHROME2 — 499 |
| описание серии | Изображения DXA — 481, DXA Images — 18 |
| ширина кадра | 280 px — 331, 300 px — 166, 248 px — 2 |
| без масштаба | 499 из 499 |
| без BodyPartExamined | 499 из 499 |
Фрагмент «Для теста»
3 снимка без разметки, по одному на область — на них проверяется, что сервис запускается и выдаёт таблицу. Разбор — в прогоне примера.
Как сервис видит обучающий набор
Сравнение с экспертами на уровне исследования, последний прогон всего набора. Пороги подбирались на этих же данных, поэтому цифры оптимистичны — честная оценка кросс-валидацией в роудмапе.
| критерий | исследований | F1 | чувствительность | специфичность |
|---|---|---|---|---|
| позвоночник, итог | 99 | 0,62 | 0,72 | 0,72 |
| охват | 99 | 0,77 | 0,83 | 0,98 |
| наклон оси | 99 | 0,33 | 0,40 | 0,89 |
| посторонние предметы | 99 | 0,62 | 0,82 | 0,83 |
| бёдра | пока не оцениваются — 41 нарушений у экспертов из 150 | |||