Análisis cuantitativo y cualitativo. Métodos de evaluación cualitativa y medición cuantitativa del desarrollo personal y profesional.

Evaluaciones de expertos y métodos de medición.

La evaluación de expertos es una medición cuantitativa y/o cualitativa del indicador correspondiente.

Métodos para obtener cuantitativos. evaluaciones de expertos

Cuantificación directa

El experto especifica un valor numérico específico o un rango del parámetro requerido.

Método del punto medio.

Se utiliza con una gran cantidad de opciones alternativas.

Primero, se seleccionan las alternativas más (A) y menos (L) preferidas. La siguiente es una opción intermedia: M, cuya evaluación divide el segmento A - Z por la mitad.

Métodos para obtener evaluaciones periciales de calidad.

Clasificación de expertos (determinación de pertenencia a un grupo, variedad, categoría - variedad de té)

La clasificación de alternativas es el orden de las alternativas comparadas según el grado de preferencia de un determinado atributo.

El método de curvas expertas se utiliza para obtener pronósticos basados ​​​​en el análisis de la dinámica de los indicadores que caracterizan el objeto del experimento (gráfico, extrapolación). Para evitar errores durante la extrapolación, basándose en la opinión generalizada de los expertos, se determinan en el gráfico los puntos en los que se deben esperar cambios en la tendencia de desarrollo del indicador.

Las herramientas de los métodos anteriores son escalas cualitativas y cuantitativas.

19. Métodos de evaluación de las cualidades de los peritos y formación de comisiones de expertos.

Método judicial.

El procedimiento es similar a una audiencia judicial. Algunos de los peritos son acusados, otros son defendidos y otros son el jurado que dicta el veredicto final. Las valoraciones de los expertos son subjetivas, por lo que la cuestión clave es la selección de los expertos.

Evaluación de las cualidades del experto.

Experto- un especialista, un profesional cuyas valoraciones y juicios el tomador de decisiones considera útiles para tener en cuenta en el proceso de toma de decisiones.

La formación de la composición de la comisión de expertos depende de:

Una situación específica de toma de decisiones;

La capacidad de los organizadores del examen para atraer al trabajo a especialistas altamente calificados;

Oportunidades para que los especialistas participen en los trabajos de la comisión de expertos.

No existe una metodología unificada generalmente aceptada para evaluar las cualidades de un experto.

Puedes confiar en:

Conocimientos profesionales;

Experiencia y efectividad de las actividades como parte de comisiones de expertos.

Métodos para evaluar las cualidades de un experto:

A priori– no utilizar información sobre los resultados de la participación del experto en exámenes anteriores (autoevaluación, evaluación mutua, método de lista de expertos, método de documentación (cuestionario)).

Posteriormente– utilizar información sobre los resultados de la participación del experto en exámenes anteriores (el método de comparación por pares de objetos preferido por un experto determinado, el método de desviación de la evaluación grupal resultante).

Prueba– Implica una prueba especial.

La prueba debe estar especialmente diseñada para objetos específicos de evaluación pericial.

El experto no debe conocer los valores verdaderos de los parámetros estimados (respuestas correctas)

Se debe desarrollar una escala para determinar la exactitud de las valoraciones dadas por el experto.

La probabilidad de adivinar aleatoriamente la estimación correcta debería ser muy pequeña.

El uso de métodos de prueba permite evaluar una cualidad profesional tan importante de un experto como la reproducibilidad de las valoraciones de los expertos. Se realizan una serie de pruebas similares y se evalúan los resultados obtenidos. La estabilidad de las evaluaciones indica la competencia profesional del experto.

Métodos cualitativos(investigación etnográfica, histórica como métodos de análisis cualitativo de microsociedades locales, método de estudio de caso, método biográfico, método narrativo) - interpretación semántica de datos. Cuando se utilizan métodos cualitativos, no existe un vínculo de operaciones matemáticas formalizadas entre la etapa de obtención de datos primarios y la etapa de análisis significativo. Estos son métodos ampliamente conocidos y utilizados de procesamiento de datos estadísticos.

Sin embargo, los métodos cualitativos incluyen ciertos métodos cuantitativos de recopilación y procesamiento de información: análisis de contenido; observación; entrevistas, etcétera.

Tras la aceptación Decisiones importantes Para seleccionar el mejor curso de acción entre las opciones disponibles, se utiliza el llamado “árbol de decisiones” o “árbol de objetivos”, que es una descripción esquemática del problema de toma de decisiones. Los diagramas estructurales de objetivos se pueden presentar en forma de tablas y gráficos. El método gráfico tiene una serie de ventajas sobre el método tabular: en primer lugar, le permite registrar y procesar información de la manera más económica, en segundo lugar, puede crear rápidamente un algoritmo de desarrollo y, en tercer lugar, el método gráfico es muy visual. El “Árbol de Metas” sirve como base para seleccionar las alternativas más preferibles, así como para evaluar el estado de los sistemas que se están desarrollando y sus relaciones.

Otros métodos de análisis cualitativo se construyen de manera similar, incluidos los análogos de los métodos cuantitativos de análisis factorial.

Como bien señala D.S. Klementyev (21), el efecto de los métodos cualitativos de investigación sociológica sólo es posible con un dominante estándares Eticos en reflejo de factores sociales. Un sociólogo, al seleccionar información entre una masa de todo tipo de información, no debe limitarse únicamente a sus propias preferencias. Además, al intentar responder a la pregunta sobre el estado real de las cosas en el entorno de gestión, recopilando información específica (datos empíricos que se refieren a las propiedades del fenómeno en estudio), el sociólogo no debe operar con las disposiciones generalmente aceptadas del "común". "sentido", "lógica ordinaria" o apelación a las obras de autoridades religiosas y políticas. Al compilar pruebas, un sociólogo debe evitar distorsiones que reflejen manipulación más que control. Y otra norma fundamental para un sociólogo es la honestidad. Esto significa que una persona, al presentar los resultados de un estudio, aunque no le satisfagan, no debe ocultar ni embellecer nada. El requisito de honestidad también incluye proporcionar documentación completa relevante para el caso. Debe asumir la responsabilidad de toda la información utilizada por otros para evaluar críticamente el método y los resultados de un estudio. Es especialmente importante tener esto en cuenta para evitar la tentación de tergiversar la información, lo que socavaría la credibilidad de los hallazgos.

Métodos cuantitativos Explorando la certeza cuantitativa Fenómeno social y los procesos ocurren utilizando herramientas y métodos específicos. Estos son observación (involucrada e incluida), encuesta (conversación, cuestionarios y entrevistas), análisis de documentos (cuantitativo), experimento (controlado y no controlado).

La observación como método clásico. Ciencias Naturales representa una percepción especialmente organizada del objeto que se está estudiando. La organización de la observación incluye determinar las características del objeto, metas y objetivos de la observación, elegir el tipo de observación, desarrollar un programa y procedimiento de observación, establecer parámetros de observación, desarrollar técnicas para realizar los resultados, analizar los resultados y conclusiones. Con la observación no participante, se minimiza la interacción entre el observador y el objeto de estudio (por ejemplo, el sistema de control). Cuando está habilitado, el observador ingresa al proceso observado como participante, es decir. logra la máxima interacción con el objeto de observación, sin, por regla general, revelar en la práctica sus intenciones de investigación. En la práctica, la observación se utiliza con mayor frecuencia en combinación con otros métodos de investigación.

Centro Las hay continuas y selectivas. Si una encuesta se realiza abarcando a toda la población de encuestados (todos los miembros de una organización social, por ejemplo), se llama continua. La base de una encuesta por muestreo es la población de muestra como una copia reducida de la población general. Se considera población general a toda la población o aquella parte de ella que el sociólogo pretende estudiar. Muestra: un conjunto de personas a las que entrevista el sociólogo (22).

La encuesta se puede realizar mediante cuestionarios o entrevistas. Entrevista- es un tipo de conversación formalizada. Las entrevistas, a su vez, pueden ser estandarizadas o no estandarizadas. En ocasiones recurren a entrevistas telefónicas. La persona que realiza la entrevista se llama entrevistador.

Cuestionario- tipo de encuesta escrita. Al igual que una entrevista, un cuestionario implica un conjunto de preguntas claramente formuladas que se presentan al encuestado por escrito. Las preguntas pueden requerir respuestas en forma libre (“cuestionario abierto”) o en una forma determinada (“cuestionario cerrado”), donde el encuestado selecciona una de las opciones de respuesta propuestas (23).

El cuestionario, por sus características, tiene una serie de ventajas sobre otros métodos de encuesta: el tiempo para registrar las respuestas de los encuestados se reduce debido al autoconteo; la formalización de las respuestas crea la posibilidad de utilizar el procesamiento mecanizado y automatizado de cuestionarios; Gracias al anonimato es posible lograr la sinceridad en las respuestas.

Con el fin de mayor desarrollo A menudo se utilizan cuestionarios. método de calificación escalada aplica. El método tiene como objetivo obtener información cuantitativa midiendo la actitud de los especialistas hacia el tema de examen en una escala particular: nominal, de rango, métrica. La construcción de una escala de calificación que mida adecuadamente los fenómenos que se estudian es una tarea muy tarea difícil, pero el procesamiento de los resultados de dicho examen, realizado mediante métodos matemáticos utilizando aparatos de estadística matemática, puede proporcionar información analítica valiosa en términos cuantitativos.

Método de análisis documentos le permite obtener rápidamente datos objetivos sobre el objeto que se está estudiando.

Análisis formalizado Fuentes documentales (análisis de contenido), diseñado para extraer información sociológica de una gran variedad de fuentes documentales inaccesibles al análisis intuitivo tradicional, se basa en identificar ciertas características cuantitativas de los textos (o mensajes). Se supone que las características cuantitativas del contenido de los documentos reflejan las características esenciales de los fenómenos y procesos que se estudian.

Una vez establecida la influencia cuantitativa de los factores en estudio sobre el proceso en estudio, es posible construir un modelo probabilístico de la relación entre estos factores. En estos modelos, los hechos estudiados actuarán como una función y los factores que la determinan actuarán como argumentos. Al dar un determinado valor a estos factores argumentos, se obtiene un determinado valor de las funciones. Además, estos valores serán correctos sólo con un cierto grado de probabilidad. Para obtener un valor numérico específico de los parámetros en este modelo, es necesario procesar adecuadamente los datos de la encuesta del cuestionario y construir un modelo de correlación multifactorial sobre esta base.

Experimento al igual que el método de encuesta, es una prueba, pero a diferencia del primero, tiene como objetivo probar uno u otro supuesto o hipótesis. Por lo tanto, un experimento es una prueba única para un determinado patrón de conducta (pensamiento, fenómeno).

Se pueden realizar experimentos en diversas formas. Hay experimentos mentales y “naturales”, dividiendo estos últimos en laboratorio y campo. Un experimento mental es una tecnología especial para interpretar la información recibida sobre el objeto en estudio, que excluye la intervención del investigador en los procesos que ocurren en el objeto. Metodológicamente, el experimento sociológico se basa en el concepto de determinismo social. En el sistema de variables, se aísla un factor experimental, de lo contrario se designa como variable independiente.

Estudio experimental formas sociales se llevan a cabo durante su operación, por lo que es posible resolver problemas que son inaccesibles para otros métodos. En particular, el experimento nos permite explorar cómo se pueden combinar las conexiones entre un fenómeno social y la gestión. Le permite estudiar no solo los aspectos individuales de los fenómenos sociales, sino también la totalidad de las conexiones y relaciones sociales. Finalmente, el experimento permite estudiar todo el conjunto de reacciones. sujeto social a un cambio en las condiciones de actividad (una reacción expresada en un cambio en los resultados de la actividad, su naturaleza, las relaciones entre las personas, en un cambio en sus valoraciones, comportamiento, etc.). Los cambios que se realizan durante el experimento pueden representar la creación de formas sociales fundamentalmente nuevas o una modificación más o menos significativa de las existentes. En todos los casos el experimento representa una transformación práctica. un área determinada gestión.

En general, algorítmico Método cuantitativo en algunos casos, nos permite llegar a la adopción de decisiones muy “precisas” y bien fundadas, o al menos simplificar el problema, reduciéndolo a encontrar soluciones paso a paso a un determinado conjunto de problemas más simples. .

El resultado final de cualquier investigación sociológica es la identificación y explicación de patrones y la construcción de una teoría científica sobre esta base, que permita predecir fenómenos futuros y desarrollar recomendaciones prácticas.

Temas para discusión

1. ¿Cuál es el método de la sociología de la gestión?

2. ¿Cuál es la especificidad de los métodos de la sociología de la gestión?

3. ¿Enumere las clasificaciones de los métodos de sociología de la gestión que conoce?

4. ¿En qué se diferencian los métodos de investigación sociológica cualitativa y cuantitativa?

5. Determinar la esencia de las entrevistas, cuestionarios, el método de evaluaciones escaladas, etc.

21 Klémentyev D.S. Sociología de la gestión: libro de texto. prestación. - 3ª ed., revisada. y adicional - M.: Editorial de la Universidad Estatal de Moscú, 2010. - P.124

22 Yadov V.A. Investigación sociológica: Metodología, programa, métodos. - M., 1987. - P. 22-28.

23 Ilyin G.L. Sociología y psicología de la gestión: tutorial para estudiantes más alto libro de texto establecimientos / G.L. Ilyin. - 3ª ed., borrada. - M: Centro editorial "Academia", 2010. - P. 19.

Métodos para medir y evaluar el desarrollo personal y profesional

Plan

1. Mediciones cuantitativas y cualitativas.

2. Principales orientaciones para medir el desarrollo personal y profesional.

3. Contradicciones entre desarrollo personal y profesional.

4. Desarrollo personal y profesional y su seguimiento

Palabras clave: evaluación cualitativa, medición cuantitativa, desarrollo personal, desarrollo profesional, seguimiento.

– evaluación cualitativa implica una evaluación no numérica (dada al nivel de medición del nombre o del orden) de cualidades personales y profesionales significativas;

– medida cuantitativa se lleva a cabo sobre la base del desarrollo de escalas numéricas especiales (a nivel de intervalos o proporciones de medición) para evaluar la gravedad de cualidades personales y profesionales importantes;

– desarrollo personal V en el sentido estricto– esto es relevante nivel alcanzado gravedad cualidades significativas La personalidad como sistema integral de formación. Al mismo tiempo, para diversas tareas prácticas, las cualidades de personalidad que difieren en su generalidad y nivel son importantes; en un sentido amplio, la dinámica de los cambios en importantes cualidades personales en diferentes perspectivas temporales. Metódicamente para estudiar. desarrollo personal en un sentido amplio, el procedimiento más utilizado para controlar el desarrollo personal;

– Desarrollo profesional– en sentido estricto, este es el nivel actual de expresión de las cualidades de la personalidad que están significativamente relacionadas con su éxito profesional; en un sentido amplio, se trata de un cambio durante un cierto período de tiempo (por ejemplo, entre dos certificaciones) de las cualidades de personalidad asociadas con el éxito profesional. Podrá utilizarse un procedimiento de seguimiento del desarrollo profesional para evaluar dicho desarrollo;

– supervisión es un procedimiento sistemático para la medición comparable del nivel de expresión de cualidades personales y profesionales significativas, que se lleva a cabo a intervalos regulares. Le permite evaluar la dinámica de los cambios en las cualidades evaluadas.

Mediciones cuantitativas y cualitativas.

La evaluación cualitativa y la medición cuantitativa en la investigación psicológica y sus aplicaciones prácticas pueden considerarse desde un punto de vista formal como casos especiales de un procedimiento de medición más general. En una primera aproximación, asignar valores numéricos para representar propiedades se puede llamar medición . Como resultado de la medición, en cada caso concreto se asocia un valor numérico a la propiedad que se está midiendo. Sin embargo, tal atribución no es arbitraria. Es necesario que las relaciones entre valores numéricos correspondan a aquellas relaciones que realmente existen entre los aspectos del objeto de medición que miden. Para comodidad de los investigadores, se acostumbra distinguir cuatro tipos de este tipo de correspondencia, que se denominan niveles de medición. Se distinguen los siguientes niveles de medición (o escalas de medición):

Nombres (nominales);

Ordinal (ordinal);

Intervalo;

Relaciones.

Los dos primeros niveles de medición se consideran tradicionalmente una evaluación cualitativa, y los dos últimos juntos forman lo que se llama una medición cuantitativa de propiedades.

Cuanto mayor sea el nivel, mayor será el rango de propiedades “útiles” para investigadores y profesionales que tiene la escala de medición correspondiente. Desde este punto de vista, el nivel más bajo de medición es el nivel nominal y el más alto es el nivel relacional. Tradicionalmente, el desarrollo de herramientas de medición (por ejemplo, escalas en pruebas psicológicas) va de lo simple a lo complejo. En términos de niveles de medición, esto significa que desde la creación inicial de instrumentos de medición que operan a un nivel nominal, se produce una transición constante, a medida que se aprenden las características de las propiedades que se estudian y sus conexiones con otras propiedades, primero al nivel ordinal de medición, y luego al nivel cuantitativo de medición, plasmado en escalas de puntos. En la práctica, esta tendencia se ve contrarrestada por la complejidad cada vez mayor de las técnicas de medición, lo que lleva a un aumento del coste de su uso y a mayores exigencias para los especialistas que las utilizan.

Consideremos con más detalle las características de los niveles de medición presentados anteriormente y ejemplos específicos su utilización para evaluar las cualidades personales y profesionales de los trabajadores.

Medida nominal formaliza el procedimiento de clasificación, pero al mismo tiempo tiene el conjunto más pequeño propiedades útiles, proporcionando sólo un conjunto de categorías discretas que permiten distinguir diferentes objetos.

Mayoría ejemplos simples El nivel nominal de las mediciones está relacionado con el género, la nacionalidad y la afiliación partidista de la persona evaluada.

A los efectos de la evaluación del personal, se utiliza ampliamente. método matricial que implica una comparación, por ejemplo, de un conjunto de cualidades reales y requeridas. El resultado de dicha comparación es nominal en términos del nivel de medición y contiene calificaciones de “aprobado-reprobado”. Tenga en cuenta que existen versiones más complejas de este método que permiten obtener estimaciones cuantitativas de los trabajadores.

Método de ejecución- una técnica que proporciona una descripción cualitativa de lo que hizo el empleado durante un período determinado. También le permite obtener una evaluación de la actividad a nivel nominal (en términos de “hizo - no hizo”). Además, el método a veces se utiliza. caso critico(método incidentes), en cuyo marco se realiza un análisis del comportamiento de la persona evaluada en situaciones difíciles o críticas, pudiendo también considerarse sus interrupciones en el trabajo.

Medida ordinal le permite no solo dividir objetos en clases, sino también organizarlos. Mayoría ejemplo famoso Esta escala es la nota escolar (de 1 a 5).

Para evaluar, utilizando una escala ordinal, una propiedad unidimensional latente basada en la totalidad de manifestaciones externas (que ocurren o no en relación con un objeto específico), se utiliza un algoritmo especial para construir las escalas correspondientes, llamado escala de Guttman* , ha sido desarrollado. La prevalencia de mediciones ordinales para evaluar el desarrollo profesional se ilustra con el resultado tradicional de los procedimientos de certificación “adecuado al puesto ocupado” - “corresponde al puesto ocupado sujeto a mejora en el trabajo” - “se recomienda un cambio de actividad”, formando un escala ordinal típica.

* Yadov V.A. Investigación sociológica. Metodología, programa, métodos. M., 1987. P.98-102.

Junto a esto, por su sencillez, el método de clasificación ordenada, que consiste en identificar a los mejores y peores trabajadores, es bastante común, especialmente cuando se realizan evaluaciones en equipos de trabajo pequeños (hasta 10 personas).

Para ello, los expertos clasifican a los empleados según cada uno de los criterios evaluados (puede haber varios) en orden, de mejor a peor. La calificación final individual se puede determinar como la suma de las clasificaciones de todos los criterios de evaluación utilizados. Gracias a esta suma (aunque no del todo correcta desde el punto de vista de la teoría de la medición), es posible pasar de escalas ordinales a escalas de intervalo y dar una valoración final en puntos.

Medición de intervalos– permite no sólo clasificar u ordenar objetos, sino también decir en qué medida más o menos de la propiedad medida se caracterizan en comparación con otros objetos. La medición se basa en la existencia de alguna unidad de medida estándar.

Por ejemplo, los ingresos se pueden medir en rublos por año. La unidad de medida es el rublo. Otro ejemplo es la medición de la temperatura. Comer diferentes sistemas medidas (Celsius, Fahrenheit, Kelvin). Casi todos están estandarizados. pruebas psicologicas, utilizados para evaluar el desarrollo profesional y personal, dan como resultado puntuaciones, lo que permite clasificarlos en el nivel de medición del intervalo.

Muchas escalas de intervalos son "naturales". Estas son escalas de edad, ingresos, peso. Además, existe una tecnología para desarrollar escalas de intervalo que se utilizan para medir un indicador latente en función de sus manifestaciones observables externamente. La más famosa es la Escala de Igualdad de Interés de Thurstone.

Escala de intervalo igual Thurstone se utiliza para determinar una actitud subjetiva (a menudo claramente inconsciente) ante un determinado fenómeno, por ejemplo, la actitud hacia el trabajo, basándose en una serie de signos externos. Para hacer esto, siga los siguientes pasos.

1. Desarrollar al menos 30 juicios de carácter positivo y negativo (este signos externos). Por ejemplo, “el trabajo es la primera necesidad de la vida”, “no es fácil sacar un pez del estanque”, “el trabajo no es un lobo, no correrá hacia el bosque”, etc.

2. Seleccionar un grupo de expertos (al menos 50 personas seleccionadas al azar del público objetivo).

3. Cada perito deberá clasificar la lista completa de sentencias en 11 clases. El número de clases puede ser diferente; depende de la “fraccionalidad” de la escala requerida por el investigador, lo que determina su precisión. La clase 1 incluye juicios con la actitud más positiva hacia el objeto, la clase 11, con la actitud más negativa, y la clase 6, con una actitud neutral.

4. Se realiza un análisis del examen:

el precio (peso) de cada sentencia se determina en una escala de 11 intervalos. Por lo tanto, si se utilizaron las opiniones de 300 jueces expertos para determinar el peso, entonces para una afirmación, por ejemplo, "el trabajo no es un lobo, no correrá hacia el bosque", las estimaciones se pueden distribuir de la siguiente manera (ver Tabla 1).

Cualquier cambio en las condiciones o desempeño de la organización ( empresa industrial, empresa comercial o banco) asociado a una u otra alternativa decisión de gestión, sólo puede determinarse cuando existen indicadores correspondientes que puedan medirse. Pero no estamos hablando sólo de mediciones cuantitativas en el sentido habitual para nosotros, sino también de evaluaciones cualitativas que nos permiten juzgar la dinámica de los cambios que se están produciendo. Por lo tanto, cuando hablamos de evaluaciones de expertos, nos referimos a mediciones cuantitativas o cualitativas de indicadores relevantes.

Dependiendo de los objetivos del examen, los expertos pueden evaluar el valor de los bienes inmuebles, el nivel esperado de inflación, los cambios. tipo de cambio, confiabilidad del emisor valores, calificación bancaria, etc. Los objetos de evaluación y los indicadores que se evalúan son muy diversos. Si el experto debe medir el valor de un indicador cuantitativo (dar una valoración cuantitativa), puede indicar un valor numérico específico o el intervalo en el que se encuentra. Si un experto debe determinar el valor de un indicador que solo puede evaluarse cualitativamente (dar una evaluación cualitativa), entonces puede utilizar escalas verbales-numéricas para ello.

Por tanto, la información de los expertos puede ser de naturaleza tanto cuantitativa como cualitativa. Consideremos los métodos más comunes para medirlo por separado para cada uno de estos dos casos.

Métodos para obtener evaluaciones cuantitativas de expertos.

Evaluación cuantitativa directa. El experto indica directamente el valor numérico del indicador para el objeto evaluado (alternativa), por ejemplo, el costo de un apartamento o parcela, capacidad estimada del mercado, etc. Si es difícil especificar un valor específico para un indicador, el experto puede determinar el rango en el que se encuentra ese valor.

Método del punto medio. Este método se utiliza cuando hay muchas opciones alternativas que requieren evaluación. Al principio, el experto evalúa cuantitativamente la alternativa más preferida - f(a1) y la menos preferida - f(a2). A continuación, debe seleccionar la tercera alternativa a3, cuya estimación f(a3) se sitúa en el medio entre los valores de f(a1) y f(a2) y es igual a la mitad de su suma. Luego, el experto determina la evaluación de la alternativa a4, cuyo valor - f(a4) - se encuentra en el medio entre los valores de f(a1) y f(a3), y la alternativa a5 - f(a5), cuyo valor es el valor promedio entre f(a3) y f(a4), y así sucesivamente hasta haber evaluado todas las alternativas comparadas.

Métodos para obtener evaluaciones de expertos de calidad.

Método de clasificación de expertos. Este método es recomendable utilizar cuando es necesario determinar si las alternativas evaluadas pertenecen a clases, categorías, niveles, variedades, etc. establecidas y aceptadas, por ejemplo, evaluando variedades de té por catadores o determinando la categoría de un hotel. Si las clases se establecen de antemano, al experto se le presentan secuencialmente opciones alternativas y él determina a qué clase pertenece esta alternativa. Si las clases no están establecidas, se le presentan al experto opciones alternativas por parejas y se le pide que determine si pertenecen a la misma clase o a otras diferentes. Luego de lo cual se ofrecen las alternativas para su evaluación de forma secuencial, y se determina si cada una de ellas puede atribuirse a una de las clases resultantes, o si es necesario formar Nueva clase. El procedimiento se repite hasta que todas las alternativas hayan sido evaluadas (clasificadas).

Método de clasificación de alternativas. La esencia de este método es ordenar las alternativas comparadas según el grado de preferencia por una determinada característica. Si hay relativamente pocas alternativas de este tipo (no más de 20), entonces al experto se le presenta todo el conjunto de opciones alternativas y él indica la más preferible entre ellas. Luego, el experto determina la opción más preferible entre las restantes. Y así sucesivamente hasta clasificar todas las alternativas evaluadas. Si hay más opciones para evaluar, primero se dividen en grupos ordenados por preferencia utilizando el método de clasificación de expertos y luego se clasifican dentro de cada grupo.

Método de curvas expertas. Este método se utiliza cuando el propósito del examen es desarrollar pronósticos basados ​​​​en un análisis de la dinámica de los cambios en los indicadores que caracterizan el objeto del examen, por ejemplo, tasas de crecimiento del PIB, inflación, tasas de desempleo, etc. El uso de este método implica construir un gráfico basado en los datos estadísticos disponibles que muestra la tendencia en la dinámica del indicador analizado. Luego, mediante extrapolación, esta tendencia continúa hacia el futuro, lo que permite estimar el valor de este indicador en el período de pronóstico. Sin embargo, el uso de la extrapolación puede conducir a errores importantes, porque no tiene en cuenta la posibilidad de que cambios cualitativos conduzcan a un cambio de tendencia. Por tanto, además, a partir de la opinión generalizada de los expertos, en el gráfico se determinan los puntos en los que debemos esperar un cambio en la tendencia de cambio del indicador evaluado, lo que nos permite visualizar posibles escenarios alternativos para el desarrollo de la situación. .

Los dos grupos de métodos de obtención de valoraciones de expertos comentados anteriormente también corresponden a dos tipos de escalas:

escalas de medidas cuantitativas;

escalas de medida cualitativa.

Escalas cuantitativas

Escala absoluta. Si es necesario determinar el número de asientos en un aula o el número de trabajadores necesarios para realizar una determinada operación, entonces el número resultante de tales mediciones se determina de forma inequívoca y única. Ésta es la peculiaridad de la escala absoluta.

Escala de relación. Asume la capacidad de realizar mediciones en varios sistemas unidades. Entonces, por ejemplo, si estimamos la masa de un objeto en kilogramos, obtenemos un valor numérico, en libras, otro, etc. Sin embargo, no importa qué sistema de medición utilice, la relación de masas de dos objetos cualesquiera será la misma y no cambiará al pasar de un sistema a otro. Lo mismo se observa al medir la longitud de objetos. Estos son ejemplos típicos de escalas de razones en las que las razones de las calificaciones numéricas permanecen sin cambios.

Escala de intervalo. En la escala de intervalo, al pasar de un sistema de medición a otro, no se conserva la relación de los valores numéricos de las alternativas evaluadas, pero sí la relación de las diferencias en las estimaciones numéricas. Un ejemplo de medición en escala de intervalo es la determinación de la temperatura, que, como se sabe, se puede medir en diferentes escalas: Celsius, Fahrenheit, etc. Cada vez que recibiremos diferentes numeros, porque Diferentes escalas utilizan diferentes puntos de referencia y diferentes unidades de medida. Pero estas diferentes estimaciones numéricas corresponden a la misma temperatura del objeto.

Escala de diferencia. Si, al pasar de un sistema numérico de medición a otro, solo cambia el punto de referencia, estas escalas se denominan escalas de diferencia. Un ejemplo de estimaciones cuantitativas en la escala de diferencias son los sistemas cronológicos que difieren en el punto de partida (desde el nacimiento de Cristo, desde la creación del mundo o desde la migración del profeta Mahoma de La Meca a Medina).

Las mediciones cualitativas son mucho menos rigurosas, son de carácter subjetivo y utilizan otro tipo de escalas, siendo las principales las siguientes.

Escalas cualitativas

Escala nominal (nombre escala). La esencia de las mediciones de las alternativas evaluadas en esta escala es su división en clases según un determinado criterio. Todas las alternativas que caen en la misma clase deben corresponder al mismo número. Ejemplos de mediciones en escalas nominales incluyen dividir a los estudiantes de un curso en grupos, dividir los productos por niveles de calidad (calificaciones), etc.

Escala ordinal. Esta escala se utiliza para clasificar, es decir. determinar el orden de preferencia de las alternativas, la gravedad de una propiedad en particular, por ejemplo, importancia, urgencia, etc.

Muy a menudo, durante el examen surge la necesidad de medir indicadores cuyas valoraciones son obviamente subjetivas. Por ejemplo, las evaluaciones del grado de riesgo al implementar uno u otro se basan en el conocimiento y la experiencia de especialistas. proyecto de inversión, competitividad cierto tipo productos, nivel de competencia de un candidato para un puesto vacante, etc. En estos casos utilizar tipo especial escalas ordinales - escalas verbales-numéricas. Su peculiaridad radica precisamente en que permiten medir el grado de intensidad de cualquier propiedad que sea de naturaleza subjetiva. La escala verbal-numérica incluye una descripción significativa (verbal) de las gradaciones identificadas y las gradaciones correspondientes. valores numéricos.

La más conocida es la escala de Harrington, muy utilizada en la práctica y que se muestra en la tabla. 6.1.

Tabla 6.1.

escala de harrington

Los valores numéricos dados en la tabla se basan en análisis estadístico una gran variedad de datos, por lo que la escala de Harrington tiene aplicación universal y puede, con las modificaciones apropiadas (por ejemplo, en forma de escala de puntos), usarse para evaluar varios indicadores cualitativos.

Resumiendo el estudio de los métodos expertos, cabe señalar que su importancia radica en que fortalecen el elemento de colegialidad en el proceso de toma de decisiones. decisiones complejas y, utilizando la intuición y la generación colectiva de ideas, nos permiten encontrar soluciones nuevas y originales a problemas que no se pueden alcanzar utilizando únicamente el razonamiento lógico.

Al mismo tiempo, en la práctica, es bastante difícil establecer límites claros entre todos los métodos considerados para desarrollar y justificar decisiones (métodos de modelado y métodos expertos), porque resolviendo problemas complejos gestión moderna Requiere el uso integrado de diversas técnicas lógicas, estadísticas, matemáticas y heurísticas. Por lo tanto, no es sólo uno, sino el grupo predominante de métodos el que forma tal o cual método. Las áreas de aplicación de los métodos de toma de decisiones dependen principalmente de la naturaleza de los problemas que se resuelven y de las condiciones para la toma de decisiones, lo que se refleja en la Fig. 6.1.

conclusiones

La esencia de los métodos expertos de toma de decisiones radica en obtener respuestas de los especialistas a las preguntas que se les plantean de antemano, procesar la información recibida mediante procedimientos lógicos y matemáticos especiales y convertirla en una forma conveniente para elegir la alternativa de decisión más preferible.

Entre los métodos de evaluación de expertos (que se diferencian en el procedimiento para organizar el examen), los principales son el método de comisión, el método de lluvia de ideas, el método Delphi y el método de desarrollo de escenarios.

En el proceso de formación de una comisión de expertos, surge el problema de evaluar las cualidades de un experto: la necesidad de tener en cuenta sus conocimientos profesionales, experiencia y resultados laborales en exámenes anteriores.

Los métodos para evaluar las cualidades de un experto se dividen en tres grupos: a priori (sin tener en cuenta la eficacia de su participación en exámenes anteriores); a posteriori (basado en resultados reales participación de un especialista en la realización de exámenes) y prueba (que implica una prueba especial para un experto potencial).

La información de expertos puede ser de naturaleza tanto cuantitativa como cualitativa. Para obtener estimaciones cuantitativas, los principales métodos son el método de evaluación cuantitativa directa y el método del punto medio. Para obtener valoraciones de calidad se utiliza la clasificación de expertos, el ranking de alternativas y el método de curvas de expertos. Estos dos grupos de métodos para la obtención de valoraciones de expertos también corresponden a dos tipos de escalas: escalas de medición cuantitativa y escalas de medición cualitativa.

Preguntas de autoevaluación

¿Qué incluye el concepto de métodos a priori de evaluación de expertos?

¿En qué casos se acostumbra utilizar métodos de estimación a posteriori?

¿Cuáles son las condiciones para utilizar métodos de prueba para evaluar las cualidades de un experto?

¿Cuál es la diferencia entre evaluaciones de expertos cuantitativas y cualitativas?

¿Qué parámetros se utilizan para construir escalas de calidad?

Los criterios utilizados en la formación del sistema de evaluación deben ser mensurables, es decir, debe ser posible evaluar cualquier tema de examen según cada uno de los criterios.

En los casos en que el criterio que caracteriza a un objeto no se puede medir objetivamente, hablamos de criterios subjetivos, es decir, en primer lugar, para evaluar objetos según tales criterios no existen criterios objetivos y es necesario el desarrollo de escalas verbales-numéricas especiales.

Naturalmente, criterios como “volumen de producto”, “costo de producción”, “período de recuperación” pueden clasificarse como objetivos. Al mismo tiempo, criterios como la “buena voluntad” asociada con la evaluación de la propiedad intelectual, la “imagen de la empresa”, la “importancia social del proyecto” y otros sólo pueden medirse subjetivamente.

Muchos de los criterios objetivos relativos a períodos futuros a menudo también pueden evaluarse sólo subjetivamente. Por ejemplo, los volúmenes de producción esperados que serán posibles después de la implementación del proyecto, el precio esperado de una unidad de producción, etc. a menudo dependen en gran medida de valoraciones de expertos, que son subjetivas en el sentido estricto de la palabra.

Por lo tanto, la profesionalidad es tan necesaria a la hora de organizar y realizar el proceso de peritaje, analizar y procesar los resultados de los peritajes utilizados en el desarrollo y toma de decisiones de gestión.

Pero el primer paso en el proceso de evaluación de expertos es la formación de un sistema de evaluación adecuado.

Hemos comentado algunos de los requisitos del conjunto de criterios incluidos en el sistema de evaluación.

La formación práctica de una lista de criterios es también en gran medida un procedimiento experto. Estos pueden ser exámenes de 2 o 3 rondas, cuando los expertos aclaran una lista de criterios previamente formulada.

Al formar un conjunto de criterios, se debe prestar atención a puntos tales como una comprensión clara del significado de cada uno de los criterios por parte de los tomadores de decisiones y los expertos.

En ocasiones es aconsejable agregar criterios. Esto puede lograr tanto una reducción en la redundancia de criterios, especialmente en el caso de una duplicación parcial de criterios, como una reducción general en el número de criterios, lo cual es importante para reducir la intensidad laboral de trabajar con el sistema de evaluación.

2. 3. Peritaciones cuantitativas y cualitativas

Detengámonos ahora en los principales métodos de mediciones de expertos: métodos para obtener evaluaciones de expertos, que en muchos casos desempeñan un papel decisivo en la toma de decisiones de gestión importantes.

Métodos de reciboevaluaciones cuantitativas de expertos

1. Evaluación cuantitativa directa

La evaluación cuantitativa directa se utiliza tanto cuando es necesario determinar el valor de un indicador que se mide cuantitativamente como cuando es necesario evaluar el grado de preferencia comparativa de varios objetos.

En el primer caso, cada uno de los expertos indica directamente el valor del indicador para el objeto evaluado. Puede ser un valor numérico específico del indicador del objeto que se está evaluando, por ejemplo, el costo de un apartamento residencial; precio unitario al que puede tener demanda competitiva; capacidad estimada del mercado; volumen de producción óptimo, etc.

Si al experto le resulta difícil indicar un valor específico de un indicador, puede indicar el rango en el que se encuentra el valor del indicador evaluado.

En el segundo caso, cuando la preferencia comparativa de los objetos se evalúa según uno u otro indicador, la evaluación cuantitativa indicada por el experto determina el grado de su preferencia comparativa.

Es necesario acordar de antemano que, digamos, un valor de evaluación más alto corresponde a una opción alternativa más preferible. A veces es más conveniente cuantificar la preferencia comparativa de los objetos en puntos, utilizando escalas de puntos especialmente desarrolladas.

2. Método del punto medio

El método se utiliza cuando hay muchas opciones alternativas. Si denotamos por f(a1) la evaluación de la primera opción alternativa para el valor del indicador con respecto al cual se determina la preferencia comparativa de los objetos, por f(a2) - la evaluación de la segunda opción alternativa, entonces el experto es luego se le pide que seleccione la tercera opción alternativa a3, cuya evaluación f(a3) se ubica en el punto medio entre los valores f(a1) y f(a2) y es igual a f(a1) + f(a2) /2.

En este caso, es aconsejable elegir las alternativas menos y más preferibles como primera y segunda alternativa.

A continuación, el experto indica la opción alternativa a4, cuyo valor f(a4) se sitúa en el medio entre los valores de f(a1) y f(a3), y la opción alternativa a5, cuyo valor f (a5) se ubica en el medio entre los valores de f(a1) y f(a4).

El procedimiento finaliza cuando se determina la preferencia comparativa de todas las opciones alternativas que participan en el examen.

3. Método Churchman-Akofa

El método Churchman-Akoff se utiliza para cuantificar la preferencia comparativa de opciones alternativas y permite realizar ajustes a las estimaciones dadas por los expertos.

El método supone que las estimaciones de las opciones alternativas son números no negativos, que si la opción alternativa a1 es preferible a la opción alternativa a2, entonces f(a1) es mayor que f(a2), y la estimación para la implementación simultánea de opciones alternativas a1 y a2 es igual a f(a1) + f(a2)).

Todas las opciones alternativas se clasifican por preferencia y el experto asigna calificaciones cuantitativas a cada una de ellas, generalmente en fracciones de uno.

4. Método de loterías

Según este método, para tres opciones alternativas cualesquiera a1, a2, a3, ordenadas en orden de preferencia descendente, el experto indica una probabilidad p tal que la opción alternativa a2 sea equivalente a una lotería, en la que la opción alternativa a1 ocurre con probabilidad p, y opción alternativa a3 - con probabilidad 1 - p.

Métodos de reciboevaluaciones de expertos de calidad

A veces, las características específicas de los objetos de evaluación de expertos son tales que a los expertos les resulta difícil dar estimaciones cuantitativas de los valores de los indicadores evaluados o del objeto en su conjunto, y en algunos casos dichas estimaciones son simplemente injustificadas y no permiten obtener información experta suficientemente fiable.

1. Clasificación de expertos

Es recomendable utilizar este método cuando sea necesario determinar si las opciones alternativas evaluadas pertenecen a clases, categorías, niveles, variedades, etc. establecidos y aceptados (en adelante, clases).

También se puede utilizar cuando las clases específicas en las que se deben clasificar los objetos evaluados no están predeterminadas. El número de clases en las que se dividen los objetos evaluados no puede determinarse de antemano. Sólo podrá establecerse una vez finalizado el procedimiento de clasificación.