Визначення компетентності експертів з оцінювання наукової діяльності у вищому педагогічному навчальному закладі

Анотація

Статтю присвячено проблемам формування експертної групи. Основною характеристикою компетентності експертів вбачається використання спеціального числового показника – коефіцієнта компетентності. У статті детально проаналізовано основні методи його визначення, проте запропоновані емпіричні залежності враховують далеко не всі якості експертів, а іноді містять параметри, які складно визначити.

Ураховуючи ці обставини, нами розроблена комплексна та збалансована методика визначення коефіцієнта компетентності експерта з оцінювання наукової діяльності. Така методика на основі існуючих статистичних підходів максимально повно та однаковою мірою відображає найважливіші якості експерта, а саме: рівень професійної підготовки та інформованості, рівень базової аргументації при прийнятті рішення, особисті якості, рівень узгодженості дій із членами робочої групи при проведенні тестового оцінювання. Вона гармонійно поєднує основні методи оцінювання: документаційний, самооцінки, взаємного оцінювання, тестування.

Запропоновано інтервальну шкалу оцінювання компетентності експертної групи. З урахуванням об’єкта експертизи розроблено анкети та оцінювальні листи. Описано методику проведення експертного оцінювання та наведено результати практичної реалізації запропонованого підходу.

The article is dedicated to the problems of the expert group formation. The use of special numerical indicator – the coefficient of competence is seen reasonable as the main characteristics of expert competence. The principal methods of its identification are thoroughly analysed in the article, but often the recommendations for the recruiting of experts are general in nature, describing only certain aspects of their activities and the proposed empirical dependence is not balanced, taking into consideration not all qualities of experts, and sometimes include parameters that are difficult to identify.

Given these circumstances we have developed a comprehensive and balanced methodology for determining the coefficient competence of expert evaluation of scientific activity. This technique, based on existing statistical approaches fully and equally important displays the most significant expert’s qualities, in particular, the level of training and awareness, a basic level of reasoning in the decision, personal characteristics, a level of coordination with the members of the working group during the test evaluation. It harmoniously combines basic methods of evaluation (documentary, self-esteem, mutual evaluation, testing), which altogether, having its own characteristics, are able to form an objective image of the competence of professionals involved in the examination.

The proposed assess interval scale of the competence of the expert group, with the help of which you can make a preliminary conclusion about the feasibility and possibility of expert assessment or decision on the need to reformat including the object of examination, namely the evaluation of scientific activity in the higher pedagogical educational establishment, designed questionnaires and evaluation sheets. The method of expert assessment has been described and the results of the practical implementation of the proposed approach have been presented. Moreover, obtained numerical values of the coefficients of the experts’ competence and expert groups showed that a formed group is qualified and capable to fairly and efficiently solve its tasks. The designed method of determining the coefficient of expertise can be used to create models of monitoring other activities of different universities.