Оценки ошибок в тексте по результатам нескольких независимых экспертиз
Аннотация
Построена система оценки качества рабочего результата (текста, изделия и т. п.) любой сложности и любого предназначения. Подход к решению подобного рода проблемы состоит в том, что один и тот же информационный источник, полностью описывающий оцениваемый объект, тиражируется тем или иным образом столько раз, сколько имеется субъектов (экспертов), каждый из которых (независимо от остальных) способен проделать нужную экспертизу. Результаты экспертиз обрабатываются и устанавливаются некие недостатки (ошибки), обнаруженные каждым из экспертов. При этом фактические признаки обнаруженных ошибок должны быть определены так, чтобы можно было указать как количество ошибок, обнаруженных каждым экспертом, так и количество ошибок, одновременно найденных каждым подмножеством из данного множества экспертов. Таким образом, результатом множественной экспертизы считаются все ошибки по всем экспертам.
Используя принцип максимального правдоподобия и оценки, связанные с неравенством П.Л. Чебышева, на основе математической модели, в работе сделаны (доведены до окончательных формул) некоторые основные оценки качеств выполненных экспертиз и текста (изделия). Кроме этого, кратко представлен спектр возможных исследований по данным множественной экспертизы.
Литература
2. Benini A. е. а. The Use of Expert Judgment in Humanitarian Analysis — Theory, Methods, Applications. Geneva, Assessment Capacities Project, 2017.
3. Крянев А.В., Тихомирова А.Н., Сидоренко Е.В. Групповая экспертиза инновационных проектов с использованием байесовского подхода // Экономика и математические методы. 2013. Т. 49. № 2. С. 124—139.
4. Крянев А.В., Семенов С.С. К вопросу о качестве и надежности экспертных оценок при определении технического уровня сложных систем // Надежность. 2013. Вып. 4. С. 90—99.
5. Смирнов Н.В., Дунин-Барковский И.В. Краткий курс математической статистики для технических приложений. М.: Физматлит, 1959.
6. Прохоров Ю.В., Пономаренко Л.С. Лекции по теории вероятностей и математической статистике. М.: Изд-во МГУ им. М.В. Ломоносова, 2004.
7. Барра Ж.-Р. Основные понятия математической статистики. М.: Мир, 1974.
8. Де Гроот М. Оптимальные статистические решения. М.: Мир, 1974.
---
Для цитирования: Архангельский А.Н., Пиголкин Г.М. Оценки ошибок в тексте по результатам нескольких независимых экспертиз // Вестник МЭИ. 2019. № 3. С. 130—133. DOI: 10.24160/1993-6982-2019-3-130-133.
#
1. Semenov S.S., Voronov E.M., Poltavskiy A.V., Kryanev A.V. Metody Prinyatiya Resheniy v Zadachakh Otsenki Kachestva i Tekhnicheskogo Urovnya Slozhnykh Tekhnicheskikh Sistem. M.: Lenand, 2016. (in Russian).
2. Benini A. e. a. The Use of Expert Judgment in Humanitarian Analysis — Theory, Methods, Applications. Geneva, Assessment Capacities Project, 2017.
3. Kryanev A.V., Tikhomirova A.N., Sidorenko E.V. Gruppovaya Ekspertiza Innovatsionnykh Proektov s Ispol'zovaniem Bayesovskogo Podkhoda. Ekonomika i Matemticheskie Metody. 2013;49;2:124—139. (in Russian).
4. Kryanev A.V., Semenov S.S. K Voprosu o Kachestve i Nadezhnosti Ekspertnykh Otsenok pri Opredelenii Tekhnicheskogo Urovnya Slozhnykh Sistem. Nadezhnost'. 2013;4:90—99. (in Russian).
5. Smirnov N.V., Dunin-Barkovskiy I.V. Kratkiy Kurs Matematicheskoy Statistiki dlya Tekhnicheskikh Prilozheniy. M.: Fizmatlit, 1959. (in Russian).
6. Prokhorov Yu.V., Ponomarenko L.S. Lektsii po Teorii Veroyatnostey i Matematicheskoy Statistike. M.: Izd-vo MGU im. M.V. Lomonosova, 2004. (in Russian).
7. Barra Zр.-R. Osnovnye Ponyatiya Matematicheskoy Statistiki. M.: Mir, 1974. (in Russian).
8. De Groot M. Optimal'nye Statisticheskie Resheniya. M.: Mir, 1974. (in Russian).
---
For citation: Arkhangelsky A.N., Pigolkin G.M. Assessments of Errors in a Text from the Results of Several Independent Examinations. Bulletin of MPEI. 2019;3:130—133. (in Russian). DOI: 10.24160/1993-6982-2019-3-130-133.
