Metodología Unificada de Evaluación Web (UWEM 1.0.)

4. Alcance y muestreo de recursos

4.1. Definiciones

En el marco de la UWEM, las declaraciones de conformidad tienen que referirse a una lista de recursos evaluados respecto al alcance del sitio o los sitios Web. En esta Sección figuran las definiciones de base para los distintos conceptos usados.

• Recurso: un objeto de datos de red identificado por una URI [RFC3986]. Esta definición se ha adaptado a partir de la definición de recurso en [RFC2616]. Este concepto también se aplica a recursos no HTTP, como por ejemplo, aquellos a los que se accede a través del protocolo FTP. Este tipo de recurso debe expresarse mediante un ejemplo earl: WebContent Class (véase el Apéndice C y [EARL10-Schema] para obtener más detalles).
• Recurso HTTP: un objeto de datos de red identificado por una única petición HTTP. Este tipo de recurso debe expresarse mediante un ejemplo earl: WebContent Class (véase el Apéndice C para obtener más detalles), que puede contener componentes adicionales de la Nota del W3C [HTTP-RDF]. Esta distinción de los recursos se debe a la complejidad subyacente del protocolo HTTP [RFC2616], en el que la negociación del contenido puede dar lugar a diferentes versiones de un recurso (como por ejemplo versiones en distintos idiomas mediante el encabezamiento Accept-Language HTTP).
• Lista de recursos: las declaraciones de conformidad en la UWEM están relacionadas con una lista de recursos dada, expresada como una secuencia RDF de recursos (de todo tipo). En el Apéndice C se describe la sintaxis RDF empleada para expresar una lista de recursos.

En función de las necesidades de las distintas aplicaciones de la UWEM, esta lista de recursos puede especificarse mediante diversos participantes en el proceso de evaluación, como por ejemplo, un dueño de un sitio Web, un redactor de un sitio Web, un organismo de inspSección, etc. En este documento se explica únicamente cómo dicha lista debe redactarse sin ambigüedades.

4.3 Procedimiento para generar muestras para la evaluación

En general, no será factible someter a prueba todos los recursos de un sitio Web conforme a la totalidad de los criterios de evaluación. Por consiguiente, después de haber determinado y seleccionado la lista de recursos que deban ser evaluados y el nivel de conformidad perseguido, proponemos identificar un determinado número de subconjuntos o “muestras”.

En los recursos para el muestreo se debería incluir la lista de recursos esenciales completada por una selSección de recursos arbitrarios. A esta lista la denominamos lista de los recursos de muestreo. 

4.3.1 La lista de recursos esenciales 

La lista de recursos esenciales es una serie de recursos genéricos, probablemente presentados en la mayoría de los sitios Web, que, además, resultan esenciales para la utilización y la evaluación de la accesibilidad de un sitio. Por tanto, la lista de los recursos esenciales constituye una serie de recursos que deben ser incluidos en cualquier evaluación de la accesibilidad del sitio. En general, la lista de recursos esenciales no puede determinarse de forma automática sino que se precisa recurrir al criterio humano para su selSección. En el caso de pruebas totalmente automáticas, como por ejemplo, en un observatorio, la lista de los recursos esenciales puede determinarse mediante determinados métodos heurísticos. La lista de los recursos esenciales debe incluir todos los recursos mencionados a continuación si estos son aplicables:

• Página Inicial: se define como el recurso identificado por una URL constituido únicamente por un componente del protocolo HTTP seguido de un hombre de dominio. El mapping de esta URL hacia la página inicial se puede hacer mediante un redireccionamiento desde el servidor. Es preciso que este recurso esté presente en el sitio (si bien puede recibir un nombre distinto).
• Página de Contacto: se trata del recurso que contiene informaciones de contacto (si existe).
• Página de Ayuda: se define como el recurso genérico de ayuda (si existe).
• Mapa del sitio: se trata del recurso que contiene el mapa del sitio (si existe).
• Página de Búsqueda: son los recursos que abarcan el servicio de “búsqueda primaria en el sitio (si existe). Como mínimo, debe incluir un recurso en el que se pueda iniciar una búsqueda y, al menos, otro donde figuren los resultados de una búsqueda tipo.
• Páginas principales: se trata de ejemplos de recursos que sean representativos de la naturaleza primaria para la que se pretende usar el sitio (si se pueden identificar).
• Páginas de las situaciones principales: Si el sitio propone servicios que impliquen que un usuario navegue sistemáticamente por una serie de recursos (como, por ejemplo, un formulario o una transacción en varias páginas), deben incluirse los recursos representativos a los que tiene acceso en cada etapa de cada situación clave (si corresponde y, únicamente, si están incluidas en el alcance del sitio Web).
• Páginas con un aspecto distinto: se trata de los recursos representativos de cada categoría de recursos que tienen un aspecto completamente diferente (suelen ser representativos de las páginas tipo claves del sitio) (si se pueden determinar).
• Páginas con tecnologías distintas: se trata de los recursos representativos de cada una de las distintas tecnologías Web indicadas a continuación (cuando éstas se utilizan):
  • formularios 
  • marcos 
  • tablas de datos
  • scripts de lado cliente 
  • applets, plug-ins, multimedia, etc.

Obviamente, cualquiera de los recursos puede pertenecer a más de una categoría de las arriba mencionadas: lo fundamental es que, en la medida de lo posible, toda la lista de los recursos esenciales cubra colectivamente todos los objetivos aplicables de muestreo. Cualquier recurso dado debe aparecer una sola vez en la lista de recursos esenciales.

4.3.2 Lista de recursos de muestreo 

Una lista de recursos de muestreo es un conjunto que puede ser generado por una herramienta automática a partir de una selSección dada. Típicamente, se utilizaría una lista de recursos de muestreo en el marco de evaluaciones realizadas en un gran número de sitios (sólo en función de criterios automáticos), donde no es factible ni necesario evaluar la totalidad de las páginas Web de cada sitio [8].

Si se utiliza un método de muestreo, entonces el resultado del muestreo debe ser representativo y sin ambigüedad, lo que significa que debe ser una lista aleatoria dentro del número total de recursos. En ese caso, la lista de los recursos de muestreo para una evaluación automática a gran escala debe emplear un algoritmo de muestreo que seleccione la serie de recursos con ayuda de un algoritmo de muestreo uniforme aleatorio o casi uniforme aleatorio [HENZINGER00], o una lista de muestras aleatorias procedentes de la lista completa de las páginas Web (a condición de que la lista completa de las páginas Web esté disponible) [9]

El método de agregación de la UWEM de la Sección 6 se aplica a nivel de una página Web y, por consiguiente, cada unidad de muestreo debe parecerse a la serie debe parecerse a la serie de recursos Web que constituyen conjuntamente la expresión de una página Web.

En los resultados de las pruebas debe indicarse claramente el margen de error del intervalo de confianza del 95% del valor medio de las muestras agregadas para un sitio Web, siguiendo el método de agregación de la UWEM de la Sección 6. Incumbe a los proveedores de herramientas la decisión de presentar el margen de error para cada sitio Web, o bien de efectuar un muestreo para un margen de error dado, [10] con objeto de presentar una sola vez el margen de error máximo. [11]

El margen de error m de un intervalo de confianza se define como el valor añadido o sustraído de la media del muestreo, lo que determina la longitud del intervalo:  

Figura 2: margen de error m del intervalo de confianza

Donde z=1,96 para un intervalo de confianza del 95% y sigma es la desviación estándar de las muestras agregadas para el sitio Web, siguiendo el método de agregación de la Sección 6.

Cabe señalar que el algoritmo de muestreo utilizado, así como cualquier otra restricción que limite o falsee el resultado, incluyendo, de forma no restrictiva, la lista de restricciones abajo mencionadas, deben indicarse explícitamente en cualquier informe de evaluación:

• Restricción a páginas sin interacción de formulario
• Restricción por tipo de contenido Web (por ejemplo, no JavaScript/Flash/PDF). 
• Restricción por profundidad del enlace desde cualquier recurso esencial.
• Restricción en el recurso esencial específico utilizado.
• Restricción del número total de recursos en la muestra.
• Restricción del número total de datos de recursos en la muestra.

4.3.3 Tamaño de la muestra manual

Como alternativa al método descrito más arriba, que, además, resulta especialmente apropiado para las pruebas por expertos, autorizamos una selSección manual del número mínimo de recursos. Este número mínimo de recursos de una lista de recursos de muestreo, depende del tamaño estimado del sitio Web.

El tamaño mínimo de la muestra es de 30 recursos únicos (si están disponibles), añadiendo 2 recursos únicos por 1000 hasta un máximo de 50 recursos en la lista de los recursos de muestreo. Este número es arbitrario. En una versión futura de la UWEM se añadirán recomendaciones más pormenorizadas sobre los tamaños de las muestras, basadas sobre todo en los resultados de las experiencias efectuadas en el marco de los proyectos EIAO y BenToWeb.

Volver