Metodología Unificada de Evaluación Web (UWEM 1.0.)

4. Alcance y muestreo de recursos

4.1. Definiciones

En el marco de UWEM, las declaraciones de conformidad tienen que referirse a una lista de recursos evaluados respecto al alcance del sitio o los sitios Web. En esta sección figuran las definiciones de base para los distintos conceptos usados.

• Recurso: un objeto de datos de red identificado por una URI [RFC3986]. Esta definición se ha adaptado a partir de la definición de recurso en [RFC2616]. Este concepto también se aplica a recursos no HTTP, como por ejemplo, aquellos a los que se accede a través del protocolo FTP. Este tipo de recurso debe expresarse mediante un ejemplo earl:WebContent Class (véase el Apéndice C y [EARL10-Schema] para obtener más detalles).
• Recurso HTTP: un objeto de datos de red identificado por una única petición HTTP. Este tipo de recurso debe expresarse mediante un ejemplo earl: WebContent Class (véase el Apéndice C para obtener más detalles), que puede contener componentes adicionales de la Nota del W3C [HTTP-RDF]. Esta distinción de los recursos se debe a la complejidad subyacente del protocolo HTTP [RFC2616], en el que la negociación del contenido puede dar lugar a diferentes versiones de un recurso (como por ejemplo versiones en distintos idiomas mediante el encabezamiento Accept-Language HTTP).
• Lista de recursos: las declaraciones de conformidad en UWEM están relacionadas con una lista de recursos dada, expresada como una secuencia RDF de recursos (de todo tipo). En el Apéndice C se describe la sintaxis RDF empleada para expresar una lista de recursos.

En función de las necesidades de las distintas aplicaciones de UWEM, esta lista de recursos puede especificarse mediante diversos participantes en el proceso de evaluación, como por ejemplo, un dueño de un sitio Web, un redactor de un sitio Web, un organismo de inspección, etc. En este documento se explica únicamente cómo dicha lista debe redactarse sin ambigüedades.

4.2 Procedimiento para expresar el alcance

Para los propósitos de UWEM un sitio Web se define como una colección arbitraria de recursos Web hipervinculados, cada uno identificado según el procedimiento descrito en la sección 4.1.

El objetivo de UWEM es garantizar la reproducibilidad de los resultados. Por lo tanto, es de importancia fundamental para la agregación y comparación de los resultados, la posibilidad de expresar sin ambigüedad los recursos evaluados. Entonces, no se aceptarán como declaraciones de conformidad con UWEM 1.0, declaraciones generales del tipo “http://example.org/ cumple con UWEM 1.0 Nivel 1.” Esto implicaría que un conjunto de recursos iniciales hayan sido rastreados hasta el final dentro de ciertos límites o restricciones. Pero dado la variedad de rastreadores existentes, y las diferentes tecnologías que emplean, no es posible verificar la fiabilidad de estas declaraciones. Además, los diferentes RFCs relacionados con los nombres de dominio dejan margen de interpretación en cuanto al concepto del subdominio y su resolución.

Entonces, para las declaraciones de conformidad UWEM 1.0, el alcance del sitio Web DEBE expresarse en forma de lista de recursos (véase el Apéndice C).

4.3 Procedimiento para generar muestras para la evaluación

En general, no será factible someter a prueba todos los recursos de un sitio Web conforme a la totalidad de los criterios de evaluación. Por consiguiente, después de haber determinado y declarado la lista de recursos que deban ser evaluados y el nivel de conformidad perseguido, proponemos identificar ciertos subconjuntos o “muestras”.

En los recursos para el muestreo se debería incluir la Lista de Recursos Esenciales completada por una selección de recursos arbitrarios. A esta lista la denominamos Lista de los Recursos de Muestreo.

4.3.1 La Lista de Recursos Esenciales

La Lista de Recursos Esenciales es una serie de recursos genéricos, probablemente presentados en la mayoría de los sitios Web, que, además, resultan esenciales para la utilización y la evaluación de la accesibilidad de un sitio. Por tanto, la Lista de Recursos Esenciales constituye una serie de recursos que deben ser incluidos en cualquier evaluación de la accesibilidad del sitio. En general, la lista de recursos esenciales no puede determinarse de forma automática sino que se precisa recurrir al criterio humano para su selección. En el caso de pruebas totalmente automáticas, como por ejemplo, en un observatorio, la Lista de Recursos Esenciales puede determinarse mediante métodos heurísticos. La Lista de Recursos Esenciales debe incluir tantos de los recursos mencionados a continuación como sean aplicables:

• Página Inicial: se define como el recurso identificado por un URL constituido únicamente por un componente del protocolo HTTP seguido de un hombre del host. El mapeo de este URL hacia la página inicial se puede hacer mediante un redireccionamiento en el servidor. Es preciso que este recurso esté presente en el sitio (si bien puede recibir un nombre distinto).
• Página de Contacto: se trata del recurso que contiene informaciones de contacto (si existe).
• Página de Ayuda: se define como el recurso genérico de ayuda (si existe).
• Mapa del sitio: se trata del recurso que contiene el mapa del sitio (si existe).
• Página de Búsqueda: son los recursos que abarcan el servicio de “búsqueda primaria en el sitio” (si existe). Como mínimo, debe incluir un recurso en el que se pueda iniciar una búsqueda y, al menos, otro donde figuren los resultados de una búsqueda tipo.
• Ejemplos de recursos que sean representativos de los usos primarios objetivos del sitio (si se pueden identificar).
• Páginas de situaciones principales: Si el sitio propone servicios que impliquen que un usuario navegue sistemáticamente por una serie de recursos (como, por ejemplo, un formulario o una transacción en varias páginas), entonces deben incluirse los recursos representativos a los que tiene acceso en cada etapa de cada situación clave (si corresponde y, únicamente, si están incluidas en el alcance del sitio Web).
• Páginas con un aspecto distinto: se trata de los recursos representativos de cada categoría de recursos que tienen un aspecto sustancialmente diferente (suelen ser representativos de las plantillas del sitio) (si se pueden determinar).
• Páginas con tecnologías distintas: se trata de los recursos representativos de cada una de las distintas tecnologías Web indicadas a continuación (cuando éstas se utilizan):
  • formularios
  • marcos
  • tablas de datos
  • scripts de lado cliente
  • applets, plug-ins, multimedia, etc.

Obviamente, cualquiera de los recursos puede pertenecer a más de una categoría de las arriba mencionadas: el único requisito es que, en la medida de lo posible, toda la Lista de Recursos Esenciales cubra colectivamente todos los objetivos aplicables de muestreo. Cualquier recurso dado debe aparecer una sola vez en la Lista de Recursos Esenciales.

4.3.2 Lista de Recursos de Muestreo

Una Lista de Recursos de Muestreo es un conjunto que puede ser generado por una herramienta automática a partir de una selección dada mediante rastreo de sus hipervínculos. Típicamente, se utilizaría una Lista de Recursos de Muestreo en el marco de evaluaciones realizadas en un gran número de sitios (sólo en función de criterios automáticos), donde no es factible ni necesario evaluar la totalidad de las páginas Web de cada sitio [8]. Si se utiliza un método de muestreo, entonces el resultado del muestreo debe ser representativo e imparcial, lo que significa que debe ser un subconjunto aleatorio del número total de recursos. La Lista de Recursos de Muestreo para una evaluación automática a gran escala debe entonces emplear un algoritmo de muestreo que seleccione la serie de recursos con ayuda de un algoritmo de muestreo uniforme aleatorio o casi uniforme aleatorio [HENZINGER00], o una lista aleatoria de muestras procedentes de la lista completa de las páginas Web (a condición de que la lista completa de las páginas Web esté disponible) [9]. El método de agregación de UWEM de la Sección 6 se aplica a nivel de una página Web y, por consiguiente, cada unidad de muestreo debe parecerse al conjunto de recursos Web que constituyen conjuntamente una página Web presentado al usuario.

En los resultados de las pruebas debe indicarse claramente el margen de error del intervalo de confianza del 95% del valor medio de las muestras agregadas para un sitio Web, siguiendo el método de agregación de UWEM de la Sección 6. Incumbe a los proveedores de herramientas la decisión de presentar el margen de error para cada sitio Web, o bien de efectuar un muestreo para un margen de error dado, [10] con objeto de presentar una sola vez el margen de error máximo. [11]

El margen de error m de un intervalo de confianza se define como el valor añadido o sustraído de la media del muestreo, lo que determina la longitud del intervalo:

Figura 2: margen de error m del intervalo de confianza

Donde z=1,96 para un intervalo de confianza del 95% y s (sigma) es la desviación estándar de las muestras agregadas para el sitio Web, siguiendo el método de agregación de la Sección 6.

Cabe señalar que el algoritmo de muestreo utilizado, así como cualquier otra restricción que limite o influye en el resultado, incluyendo, de forma no restrictiva, la lista de restricciones abajo mencionadas, deben indicarse explícitamente en cualquier informe de evaluación:

• Restricción a páginas sin interacción de formulario
• Restricción por tipo de contenido Web (por ejemplo, no JavaScript/Flash/PDF).
• Restricción por profundidad de vinculado desde cualquier recurso inicial.
• Restricción en los recursos iniciales específicos utilizados.
• Restricción del número total de recursos en la muestra.
• Restricción de la cantidad total de datos de recursos en la muestra.

4.3.3 Tamaño de la muestra manual

Como alternativa al método descrito más arriba, que, además, resulta especialmente apropiado para las pruebas por expertos, se permite una selección manual del número mínimo de recursos. Este número mínimo de recursos de una Lista de Recursos de Muestreo, depende del tamaño estimado del sitio Web.

El tamaño mínimo de la muestra es de 30 recursos únicos (si están disponibles), añadiendo 2 recursos únicos por 1000 hasta un máximo de 50 recursos en la Lista de Recursos de Muestreo. Este número es arbitrario. En una versión futura de UWEM se añadirán recomendaciones más pormenorizadas sobre los tamaños de las muestras, basadas sobre todo en los resultados de las experiencias efectuadas en el marco de los proyectos EIAO y BenToWeb.

Volver