Основными технологиями выявления знаний является свободное изложение экспертом своих знаний либо их представление путем ответов на задаваемые вопросы. Для создания структурированной базы знаний могут быть использованы и специально разработанные методы. Поступающая от эксперта информация, прежде чем использоваться в базе знаний, должна быть проверена на непротиворечивость, точность, устойчивость экспертной информации и т. д. [12].
Технологии разработки и использования автоматизированных систем экспертного оценивания обеспечивают корректное применение разработанных и апробированных в управленческой практике технологий экспертного оценивания для получения информации, используемой руководителем при подготовке, принятии и реализации управленческого решения. Они регламентируют:
• формирование информации о ситуации принятия решения;
• формирование компетентных экспертных комиссий в соответствующих предметных областях;
• выработку экспертных суждений и оценок;
• агрегирование экспертных заключений при проведении коллективных экспертиз и получение результирующей экспертной оценки;
• оценку согласованности, непротиворечивости, точности оценок экспертов и учет их при формировании сводного экспертного заключения.
Обязательным элементом системы является технологический граф организации и проведения экспертиз, в котором определяются последовательность экспертных процедур и взаимодействие при их организации экспертов, аналитической группы и руководителя. В нем также определяется алгоритмическая последовательность выполнения экспертных процедур, информационного обеспечения, обработки и анализа результатов экспертизы, представления ее результатов лицу, принимающему решения.
Для того чтобы обеспечить надежные оценки в процессе экспертного оценивания, в систему включены базы данных, в которых содержится имеющаяся информация о ситуации принятия решения, необходимая экспертам при проведении экспертизы.
В системе предусматривается возможность ведения банка экспертов с информацией об области профессиональных знаний и опыта экспертов, а также осуществляется расчет их рейтинга, который может учитываться при принятии решения о привлечении эксперта к участию в экспертизах и при оплате его труда.
При проведении экспертиз определяющую роль играют критерии, на основании которых осуществляется сравнительная оценка альтернативных вариантов решений, поэтому в системе предусматривается возможность формирования оценочной подсистемы. Так, для оценки эффективности деятельности организации в целом используются одни критерии, для оценки отдельного ее подразделения с учетом профиля его работы – другие. В оценочную подсистему включается также информация о сравнительной весомости критериев, о шкалах, используемых при их оценке.
Если предполагается использование дерева целей, то предусматривается построение соответствующего ему дерева критериев для оценки степени достижения целей.
При работе экспертной комиссии допускается формирование индивидуальных оценочных систем экспертов, если это необходимо в соответствии с принятой процедурой проведения экспертизы.
В автоматизированную систему экспертного оценивания включены автоматизированные рабочие места экспертов, которые позволяют в интерактивном режиме осуществлять оценку объектов экспертизы и готовить рекомендации по принятию управленческого решения, в том числе осуществлять «настройку» индивидуальной оценочной подсистемы, формировать индивидуальные базы данных и т. д.
Если при проведении экспертизы предполагается работа экспертной комиссии, то после получения индивидуальных экспертных оценок предусмотрены процедуры выработки коллективного экспертного заключения. В частности, в системе содержатся алгоритмы получения результирующих количественных и качественных экспертных оценок, ранжирования альтернативных вариантов решений по предпочтительности. Можно провести группировку экспертов на основании данных ими оценок, что позволит получить интерпретацию их оценок при выработке коллективного экспертного заключения, а также предоставит возможность оценки непротиворечивости экспертных суждений, их точности и надежности.
Предусматривается также возможность предварительного определения заведомо неконкурентоспособных альтернативных вариантов решений.
Внедрению интегрированной системы управления, будь то корпорация, крупная компания, банк и т. д., предшествует анализ их ключевых проблем и бизнес-процессов, подлежащих автоматизации [4, 6]. Она становится для руководителя действенным инструментом контроля и мониторинга состояния объекта управления.