Metodología Unificada de Evaluación Web (UWEM 1.0.)

3. Procedimiento de evaluación y conformidad

Esta Sección describe los procedimientos y sus objetivos para la evaluación por expertos y automática, y ofrece datos sobre las declaraciones de conformidad basadas en las UWEM 1.0. Los procedimientos de evaluación de las UWEM 1.0 cubren los siguientes objetivos:

• Mejorar la replicabilidad de los resultados de la evaluación partiendo de la definición de un programa de muestreo reproducible (véase la Sección 4). 
• Clarificar la interpretación, facilitar la evaluación automática y mejorar la replicabilidad de los resultados de las pruebas (véase la Sección 5). 
• Permitir la agregación de los resultados de la evaluación de páginas Web individuales, sitios Web e incluso series de sitios Web (véase la Sección 6). La UWEM permitirá asimismo las agregaciones por zonas geográficas así como por sectores económicos (véase la Sección 8)
• Permitir la redacción de informes de resultados de las pruebas (véanse las secciones 7 y 8)
• Permitir la evaluación de los sitios Web a gran escala para determinar aspectos problemáticos. 
• Evaluar la conformidad respecto a las verificaciones de la Sección 5, lo que incluye los procedimientos de evaluación abarcando pruebas muy específicas para la evaluación por expertos y automática.

3.1 Tipos de evaluación

Las pruebas de accesibilidad pueden ser realizadas mediante expertos, pruebas automáticas o usuarios. Los diferentes métodos de evaluación presentan diversas ventajas e inconvenientes.

En la Figura 1 se describen tres métodos distintos de evaluación entre los cuales dos (la evaluación automática y por un experto) son tratadas en la UWEM. La figura muestra, por ejemplo, que con la evaluación automática (para el instrumento 1 o el instrumento 2) sólo se puede comprobar la conformidad respecto a un subconjunto de puntos de verificación (tales como la serie de pruebas indicadas como “totalmente automatizables” en la Sección 5), lo que significa, además, que sólo un subconjunto de todas las posibles barreras de accesibilidad pueden ser determinadas de forma fiable por medio de pruebas automáticas. Por consiguiente, el tratamiento de la evaluación automática como indicador general de la accesibilidad es reducido, aunque permite identificar múltiples barreras de forma fiable. También puede aplicarse eficazmente para someter a prueba un número considerable de recursos Web en un sitio Web y en sitios Web múltiples. Los instrumentos 1 y 2 son aquí dos instrumentos de evaluación completamente automáticos cuyo objetivo es comprobar las cuestiones de accesibilidad, pudiendo ser algunas funcionalidades idénticas o similares. Algunos instrumentos también pueden servir en un proceso de evaluación por un experto. Los instrumentos ofrecen resultados fiables para una serie de pruebas y pueden no solamente acelerar el proceso efectuando determinadas tareas de forma automática, sino también, indicando donde se encuentran determinadas barreras, servir para indicar los aspectos donde los evaluadores expertos deben centrar su evaluación.

Las pruebas por usuarios permiten determinar las barreras que no pueden ser identificadas mediante otros métodos de prueba, y también estimar la accesibilidad de las hipótesis sometidas a prueba. En cambio, las pruebas por usuarios son bastante especializadas. Por consiguiente, no suelen resultar adecuadas en pruebas de conformidad porque no permiten comprobar todos los aspectos de las pruebas de la Sección 5. El mejor método para garantizar la conformidad con la accesibilidad a la Web y la conformidad con la UWEM es utilizar un método mixto que comprenda todos los métodos de evaluación de un sitio Web: automática, por expertos y por usuarios.

Figura 1: Esquema de procedimientos de Evaluación.

Las pruebas de usuario no están contempladas en esta versión de las UWEM. En el sitio Web de W3C/WAI se describe cómo implicar a los usuarios en la evaluación de los contenidos Web en la serie sobre evaluación [7].

Las principales ventajas de las pruebas automáticas se indican a continuación:

• El método es replicable (aunque la naturaleza dinámica de algunas tecnologías Web suponga la imposibilidad de realizar una replicación completa [LEVENE99]).
• Puede aplicarse a un gran número de recursos en un sitio Web y a sitios Web múltiple

3.2. Declaraciones de conformidad

Una declaración de conformidad determina si un sitio Web responde a las normas de accesibilidad descritas en la Sección 5. Para declarar la conformidad con la UWEM, como mínimo, es necesario que: 

• La muestra de recursos y el alcance de la evaluación respeten la Sección 4.
• Todos los recursos del muestreo superen todas las pruebas aplicables del nivel de conformidad correspondiente.

Los niveles de conformidad con la UWEM son la réplica de los de las WCAG 1.0, es decir: 

• Nivel de conformidad 1: todas las pruebas relativas a los puntos de verificacióón de prioridad 1 de las WCAG 1.0 son conformes (véase la Sección 5)
• Nivel de conformidad 2: todas las pruebas relativas a los puntos de verificación de prioridad 2 de las WCAG 1.0 son conformes (véase también la Sección 5).

Si desea más información sobre la significación de las prioridades puede consultarla en: http://www.w3.org/TR/WCAG10/#priorities.

Las declaraciones de conformidad con la accesibilidad según la metodología UWEM deben seguir la forma siguiente: 

• La versión de la UWEM y su identificación URI, por ejemplo, http://www.wabcluster.org/UWEM1/
• La URI hacia un documento que detalle la definición y el muestreo (véase la Sección 4) a los que se refiere la declaración.
• El nivel de conformidad. 

3.3 Conformidad de los instrumentos 

También es posible declarar una conformidad con la UWEM 1.0 de los instrumentos de evaluación. De esta forma, los expertos que evalúan sitios Web en virtud de la UWEM 1.0 podrán fiarse de los resultados del instrumento para las pruebas totalmente automatizables de la metodología.

0Para declarar la conformidad con la UWEM 1.0, el instrumento DEBE ejecutar todas las pruebas totalmente automatizables de la Sección 5, del nivel de conformidad correspondiente (véase la Sección precedente). Esta declaración de conformidad debe tener la forma siguiente:

• La versión de la UWEM y el identificador URI, por ejemplo, http://www.wabcluster.org/UWEM1/
• La URI hacia un documento que detalle una serie de ficheros de pruebas públicas en los que esta declaración de conformidad haya sido comprobada.
• El nivel de conformidad. 

Volver