Metodología Unificada de Evaluación Web (UWEM 1.0.)

3. Procedimientos de evaluación, conformidad

Esta sección describe los procedimientos y sus objetivos para la evaluación por expertos y automática, y ofrece información sobre las declaraciones de conformidad basadas en UWEM 1.0. Los procedimientos de evaluación de las UWEM 1.0 cubren los siguientes objetivos:

• Mejorar la reproducibilidad de los resultados de la evaluación partiendo de la definición de un programa de muestreo reproducible (véase la Sección 4).
• Clarificar la interpretación, facilitar la evaluación automática y mejorar la reproducibilidad de los resultados de las pruebas (véase la Sección 5).
• Permitir la agregación de los resultados de la evaluación de páginas Web individuales, sitios Web e incluso series de sitios Web (véase la Sección 6). UWEM permitirá asimismo las agregaciones por zonas geográficas así como por sectores económicos (véase la Sección 8)
• Permitir la redacción de informes de resultados de las pruebas (véanse las secciones 7 y 8)
• Permitir la evaluación de los sitios Web a gran escala para determinar aspectos problemáticos.
• Evaluar la conformidad respecto a las verificaciones de la Sección 5, lo que incluye los procedimientos de evaluación abarcando pruebas muy específicas para la evaluación por expertos y automática.

3.1 Tipos de evaluación

Las pruebas de accesibilidad pueden ser realizadas mediante expertos, pruebas automáticas o usuarios. Los diferentes métodos de evaluación presentan diversas ventajas e inconvenientes.

En la Figura 1 se describen tres métodos distintos de evaluación entre los cuales dos (la evaluación automática y por un experto) son tratadas en UWEM. La figura muestra, por ejemplo, que con la evaluación automática (para la herramienta 1 o la herramienta 2) sólo se puede comprobar la conformidad respecto a un subconjunto de puntos de verificación (tales como la serie de pruebas indicadas como “totalmente automatizables” en la Sección 5), lo que significa, además, que sólo un subconjunto de todas las posibles barreras de accesibilidad pueden ser determinadas de forma fiable por medio de pruebas automáticas. Por consiguiente, el tratamiento de la evaluación automática como indicador general de la accesibilidad es reducido, aunque permite identificar múltiples barreras de forma fiable. También puede aplicarse eficazmente para someter a prueba un número considerable de recursos Web en un sitio Web y en sitios Web múltiples. Las herramientas 1 y 2 son aquí dos herramientas de evaluación completamente automáticas cuyo objetivo es comprobar las cuestiones de accesibilidad, pudiendo ser algunas funcionalidades idénticas o similares. Algunas herramientas también pueden servir de apoyo en un proceso de evaluación por un experto. Las herramientas ofrecen resultados fiables para una serie de pruebas y pueden no solamente acelerar el proceso efectuando determinadas tareas de forma automática, sino también, indicando donde se encuentran determinadas barreras, servir para indicar los aspectos donde los evaluadores expertos deben centrar su evaluación.

Las pruebas con usuario permiten determinar las barreras que no pueden ser identificadas mediante otros métodos de prueba, y también estimar la accesibilidad de los escenarios sometidos a prueba. En cambio, las pruebas con usuarios son bastante especializadas. Por consiguiente, no suelen resultar adecuadas en pruebas de conformidad porque no permiten comprobar todos los aspectos de las pruebas de la Sección 5. El mejor método para garantizar la conformidad con la accesibilidad a la Web y la conformidad con UWEM es utilizar un método mixto que comprenda todos los métodos de evaluación de un sitio Web: automática, por expertos y por usuarios.

Figura 1: Esquema de procedimientos de Evaluación.

Las pruebas de usuario no están contempladas en esta versión de las UWEM. En el sitio Web de W3C/WAI se describe cómo implicar a los usuarios en la evaluación de los contenidos Web en la serie sobre evaluación [7].

Las principales ventajas de las pruebas automáticas se indican a continuación:

• El método es reproducible (aunque la naturaleza dinámica de algunas tecnologías Web suponga la imposibilidad de realizar una reproducción completa [LEVENE99]).
• Puede aplicarse a un gran número de recursos en un sitio Web y a múltiples sitios Web

3.2. Declaraciones de conformidad

Una declaración de conformidad determina si un sitio Web responde a las normas de accesibilidad descritas en la Sección 5. Para declarar la conformidad con UWEM, como mínimo, es necesario que:

• La muestra de recursos y el alcance de la evaluación respeten la Sección 4.
• Todos los recursos del muestreo superen todas las pruebas aplicables del nivel de conformidad correspondiente.

Los niveles de conformidad con UWEM son la réplica de los de las WCAG 1.0, es decir:

• Nivel de conformidad 1: Se cumplen todas las pruebas relevantes de los puntos de verificación de prioridad 1 de WCAG 1.0 (véase la Sección 5)
• Nivel de conformidad 2: Se cumplen todas las pruebas relevantes de los puntos de verificación de prioridad 2 de WCAG 1.0 (véase también la Sección 5).

Si desea más información sobre la significación de las prioridades puede consultarla en: http://www.w3.org/TR/WCAG10/#priorities.

Las declaraciones de conformidad con la accesibilidad según la metodología UWEM deben seguir la forma siguiente:

• La versión de UWEM y el URI que la identifica, por ejemplo, http://www.wabcluster.org/UWEM1/
• El URI de un documento que detalle el alcance y la muestra (véase la Sección 4) a los que se refiere la declaración.
• El nivel de conformidad.

3.3 Conformidad de las herramientas

También es posible declarar una conformidad con UWEM 1.0 de las herramientas de evaluación. De esta forma, los expertos que evalúan sitios Web en virtud de UWEM 1.0 podrán fiarse de los resultados de la herramienta para las pruebas totalmente automatizables de la metodología.

Para declarar la conformidad con UWEM 1.0, la herramienta DEBE ejecutar todas las pruebas totalmente automatizables de la Sección 5, del nivel de conformidad correspondiente (véase la Sección precedente). Esta declaración de conformidad debe tener la forma siguiente:

• La versión de UWEM y el URI identificador, por ejemplo, http://www.wabcluster.org/UWEM1/
• El URI de un documento que detalle una serie de ficheros públicos de pruebas contra los cuales esta declaración de conformidad haya sido comprobada.
• El nivel de conformidad.

Volver