<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD Journal Publishing DTD v3.0 20080202//EN" "http://dtd.nlm.nih.gov/publishing/3.0/journalpublishing3.dtd">
<article article-type="research-article" dtd-version="3.0" xml:lang="es" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink">
	
	<front>
		
		<journal-meta>
			<journal-id journal-id-type="publisher-id">REDC</journal-id>
			<journal-title-group>
				<journal-title>Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica</journal-title>
				<abbrev-journal-title>Rev. Esp. Doc. Cient.</abbrev-journal-title>
			</journal-title-group>
			<issn pub-type="ppub">0210-0614</issn>
			<issn pub-type="epub">1988-4621</issn>
			<publisher>
				<publisher-name>Consejo Superior de Investigaciones Cient&#x00ED;ficas</publisher-name>
			</publisher>
		</journal-meta>
		
		<article-meta>
			<article-id pub-id-type="publisher-id">redc.2017.1.1368</article-id>
			<article-id pub-id-type="doi">10.3989/redc.2017.1.1368</article-id>
			
			<article-categories>
				<subj-group subj-group-type="heading">
				<subject>ESTUDIOS / RESEARCH STUDIES</subject>
				</subj-group>
			</article-categories>
			
			<title-group>
				<article-title>El dise&#x00F1;o de las sedes web municipales de Espa&#x00F1;a. Una propuesta metodol&#x00F3;gica para su an&#x00E1;lisis</article-title>
				<trans-title-group xml:lang="en">
				<trans-title>The Design of Municipal Web Sites in Spain: A methodological proposal for their analysis</trans-title>
				</trans-title-group>
				<alt-title alt-title-type="running-head">El dise&#x00F1;o de las sedes web municipales de Espa&#x00F1;a. Una propuesta metodol&#x00F3;gica para su an&#x00E1;lisis</alt-title>
			</title-group>
			
			<contrib-group>
		
				<contrib contrib-type="author" corresp="yes">
					<name>
					 <surname>Pi&#x00F1;eiro-Naval</surname>
					 <given-names>Valeriano</given-names>
					</name>
					<xref ref-type="aff" rid="U1"/>
					<xref ref-type="corresp" rid="cor1"/>
				</contrib>
				
				<contrib contrib-type="author" corresp="yes">
					<name>
					 <surname>Igartua</surname>
					 <given-names>Juan Jos&#x00E9;</given-names>
					</name>
					<xref ref-type="aff" rid="U2"/>
					<xref ref-type="corresp" rid="cor2"/>
				</contrib>
				
				<contrib contrib-type="author" corresp="yes">
					<name>
					 <surname>Mara&#x00F1;&#x00F3;n</surname>
					 <given-names>Felipe</given-names>
					</name>
					<xref ref-type="aff" rid="U3"/>
					<xref ref-type="corresp" rid="cor3"/>
				</contrib>
			
			</contrib-group>
			
			<aff id="U1">Observatorio de los Contenidos Audiovisuales, Universidad de Salamanca. Facultad de Ciencias Sociales</aff>
			<aff id="U2">Observatorio de los Contenidos Audiovisuales, Universidad de Salamanca. Facultad de Ciencias Sociales</aff>
			<aff id="U3">Laboratorio de Comunicaci&#x00F3;n Pol&#x00ED;tica, Universidad Aut&#x00F3;noma de Nuevo Le&#x00F3;n (M&#x00E9;xico) Facultad de Ciencias Pol&#x00ED;ticas y Administraci&#x00F3;n P&#x00FA;blica.</aff>
			
			<author-notes>
				<corresp id="cor1">e-mail: <email xlink:href="vale.naval@usal.es">vale.naval@usal.es</email>
					ORCID iD: <ext-link ext-link-type="uri" xlink:href="http://orcid.org/0000-0001-9521-3364">http://orcid.org/0000-0001-9521-3364</ext-link>
				</corresp>
				
				<corresp id="cor2">e-mail: <email xlink:href="jigartua@usal.es">jigartua@usal.es</email>
					ORCID iD: <ext-link ext-link-type="uri" xlink:href="http://orcid.org/0000-0002-9865-2714">http://orcid.org/0000-0002-9865-2714</ext-link>
				</corresp>
				
				<corresp id="cor3">e-mail: <email xlink:href="felipe.maranonl@uanl.mx">felipe.maranonl@uanl.mx</email>
					ORCID iD: <ext-link ext-link-type="uri" xlink:href="http://orcid.org/0000-0002-0705-6336">http://orcid.org/0000-0002-0705-6336</ext-link>
				</corresp>
			</author-notes>
			
			<pub-date pub-type="epub">
				<day>31</day>
				<month>03</month>
				<year>2017</year>
			</pub-date>
			
			<pub-date pub-type="collection">
			<year>2017</year>
			</pub-date>
			
			<volume>40</volume>
			<issue>1</issue>
		
			<elocation-id>e164</elocation-id>
		
			<history>
			
				<date date-type="received">
					<day>08</day>
					<month>01</month>
					<year>2016</year>
				</date>
				<date date-type="rev-recd1">
					<day>02</day>
					<month>02</month>
					<year>2016</year>
				</date>
				<date date-type="accepted">
					<day>13</day>
					<month>04</month>
					<year>2016</year>
				</date>
			</history>
		 
			<permissions>
				<copyright-statement>&#x00A9; 2017 CSIC</copyright-statement>
				<copyright-year>2017</copyright-year>
				<license license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/3.0/es/deed.en">
					<license-p>Este es un art&#x00ED;culo de acceso abierto distribuido bajo los t&#x00E9;rminos de la licencia Creative Commons Attribution (CC BY) Espa&#x00F1;a 3.0.</license-p>
				</license>
			</permissions>
		
			
			<abstract xml:lang="es">
			<title>RESUMEN</title>
			<p>En este trabajo son examinados los principales aspectos del dise&#x00F1;o de las sedes web municipales de Espa&#x00F1;a; esto es: su apariencia visual, su arquitectura de la informaci&#x00F3;n y su usabilidad. Para el acometimiento de este prop&#x00F3;sito se efectu&#x00F3; un an&#x00E1;lisis de contenido, m&#x00E9;todo paradigm&#x00E1;tico de la investigaci&#x00F3;n en comunicaci&#x00F3;n. Una de las tareas fundamentales del protocolo de an&#x00E1;lisis consiste en la elaboraci&#x00F3;n de un libro de c&#x00F3;digos que, en este caso, se compuso de 41 variables. Asimismo, y tras la agrupaci&#x00F3;n estrat&#x00E9;gica y razonada de algunos de esos &#x00ED;tems, se cre&#x00F3; un &#x00CD;ndice de Calidad Formal, destinado a la evaluaci&#x00F3;n de los 500 sitios web que conformaron la muestra del estudio.</p>
			</abstract>
						
			<trans-abstract xml:lang="en">
			<title>ABSTRACT</title>
			<p>This paper examines the main aspects of the design of Spanish municipal websites: their visual appearance, information architecture and usability. A content analysis, which is a paradigmatic method used in communication research, was performed. One of the main steps of the protocol requires the development of a codebook that, in our case, consists of 41 variables. Likewise, following a strategic and reasoned grouping of some of these variables, we created a Formal Quality Index that was applied to the evaluation of the 500 websites in the study sample.</p>
			</trans-abstract>
			
			<kwd-group xml:lang="es">
				<title>PALABRAS CLAVE</title> 
				<kwd>Dise&#x00F1;o web</kwd>
				<kwd>apariencia visual</kwd>
				<kwd>arquitectura de la informaci&#x00F3;n</kwd>
				<kwd>usabilidad</kwd>
				<kwd>sedes web municipales</kwd>
				<kwd>an&#x00E1;lisis de contenido</kwd>
				<kwd>&#x00CD;ndice de Calidad Formal</kwd>
			</kwd-group>
			
			<kwd-group xml:lang="en"> 
				<title>KEYWORDS</title> 
				<kwd>Web design</kwd>
				<kwd>visual appearance</kwd>
				<kwd>information architecture</kwd>
				<kwd>usability</kwd>
				<kwd>municipal websites</kwd>
				<kwd>content analysis</kwd>
				<kwd>Formal Quality Index</kwd>
			</kwd-group>
		
		</article-meta>
	</front>
	
	<body>

		<sec id="S1">
		
			<title>1. INTRODUCCI&#x00D3;N: EL ROL DE LAS SEDES WEB MUNICIPALES EN LA SOCIEDAD DIGITAL</title>

			<p>Tal y como plantea de Moragas (<xref ref-type="bibr" rid="CIT15">2015</xref>), “las TIC construyen una especie de gran estructura informativa capaz de cubrir todos los temas, espacios y actores de la ciudad; desde su Historia y patrimonio hasta las informaciones m&#x00E1;s triviales de alojamiento y restauraci&#x00F3;n” (p. 79). En sinton&#x00ED;a con esta visi&#x00F3;n optimista sobre el papel de las TIC en el seno de los municipios, Luciano y Carniello (<xref ref-type="bibr" rid="CIT36">2014</xref>) inciden en el aspecto pol&#x00ED;tico, al postular que “est&#x00E1;n contribuyendo a ampliar y fortalecer la comunicaci&#x00F3;n (...), lo que tiende a reducir las distancias entre la informaci&#x00F3;n p&#x00FA;blica y los ciudadanos, fomentando relaciones democr&#x00E1;ticas” (p. 121). Sin embargo, la situaci&#x00F3;n real de los portales municipales no siempre es la m&#x00E1;s id&#x00F3;nea.</p>

			<p>En un contexto muy cercano al nuestro, Cardoso de Miranda y Mu&#x00F1;oz Ca&#x00F1;avate (<xref ref-type="bibr" rid="CIT08">2015</xref>) efect&#x00FA;an una aproximaci&#x00F3;n a los contenidos y servicios informativos de la administraci&#x00F3;n local en Portugal y, m&#x00E1;s concretamente, de las 308 c&#x00E1;maras que componen el pa&#x00ED;s. Empleando, a nivel metodol&#x00F3;gico, una <italic>checklist</italic> con 59 indicadores dicot&#x00F3;micos, estos autores aplican un m&#x00E9;todo de observaci&#x00F3;n directa de los contenidos. Dichos indicadores se agrupan en 3 categor&#x00ED;as: servicios de informaci&#x00F3;n, de comunicaci&#x00F3;n y de transacci&#x00F3;n; todos ellos relativos, a su vez, a los &#x00E1;mbitos de la vida cotidiana, la administraci&#x00F3;n a distancia y la participaci&#x00F3;n pol&#x00ED;tica. Sus resultados revelan que, en t&#x00E9;rminos informativos, la <italic>e</italic>-administraci&#x00F3;n portuguesa est&#x00E1; bastante avanzada debido a los esfuerzos econ&#x00F3;micos del pa&#x00ED;s en esta materia, aunque a nivel comunicativo y transaccional ofrecen, todav&#x00ED;a, un holgado margen de mejora.</p>

			<p>Ya en Espa&#x00F1;a, Cha&#x00ED;n y otros (<xref ref-type="bibr" rid="CIT10">2008</xref>), efect&#x00FA;an dos estudios para comprobar el nivel de desarrollo de los portales municipales. El primero de ellos es un an&#x00E1;lisis de los contenidos y servicios web, mientras que el segundo se apoya en un cuestionario trasladado a los responsables de los sitios. Ciertamente, esta doble visi&#x00F3;n resulta muy esclarecedora cuando se trata de indagar en los procesos de la administraci&#x00F3;n electr&#x00F3;nica, pues no s&#x00F3;lo se centran en los mensajes, sino tambi&#x00E9;n en sus emisores. Pues bien, el an&#x00E1;lisis de los contenidos y servicios web se aplica a una muestra de 52 portales, que coinciden con las capitales de provincia y las ciudades de Ceuta y Melilla. Mediante un total de 63 indicadores, miden los servicios de informaci&#x00F3;n, administraci&#x00F3;n y participaci&#x00F3;n ciudadana, concluyendo que: los primeros s&#x00ED; se ofertan al usuario de forma correcta, los segundos estar&#x00ED;an en v&#x00ED;as de hacerlo, y los terceros a&#x00FA;n figurar&#x00ED;an muy lejos de su nivel &#x00F3;ptimo.</p>

			<p>As&#x00ED; pues, parece que los portales gozan de una informaci&#x00F3;n bastante amplia, pero adolecen de una gama de servicios lo suficientemente &#x00FA;tiles para el usuario. No obstante, ¿c&#x00F3;mo est&#x00E1;n dise&#x00F1;ados estos portales? M&#x00E1;s adelante nos ocuparemos de dar respuesta a este interrogante, <italic>leitmotiv</italic> del presente estudio.</p>

		</sec>
			
		<sec id="S2">
			
			<title>2. EL DISE&#x00D1;O WEB Y SUS ELEMENTOS CONSTITUTIVOS</title>

			<p>Sabemos, con certeza, que el dise&#x00F1;o deficiente de un sitio web proyecta una imagen depauperada hacia el exterior; hecho que afecta, inexorablemente, a la empresa, organismo, instituci&#x00F3;n o individuo al que aquel pertenece (Gullikson y otros, <xref ref-type="bibr" rid="CIT20">1999</xref>). Por tal motivo, resulta crucial analizar la forma en que una sede es implementada en la red, pues “la importancia del dise&#x00F1;o se basa en que &#x00E9;ste ser&#x00E1; el que modele la interacci&#x00F3;n entre usuario y aplicaci&#x00F3;n” (Hassan y otros, <xref ref-type="bibr" rid="CIT22">2004</xref>) (p.1), facilitando o dificultando una experiencia satisfactoria.</p>

			<p>Tras el advenimiento de la <italic>World Wide Web</italic> en los a&#x00F1;os noventa, el dise&#x00F1;o comienza a suscitar un gran inter&#x00E9;s por parte de la academia, siendo protagonista tanto de innumerables disertaciones te&#x00F3;ricas como de investigaciones emp&#x00ED;ricas. En este sentido, han sido muchos los autores que han centrado sus esfuerzos en la articulaci&#x00F3;n de un repertorio de factores que debe aglutinar un correcto dise&#x00F1;o web. De hecho, son tantas las propuestas que una suerte de <italic>infoxicaci&#x00F3;n</italic> conceptual ha llegado a producirse, dificultando el consenso en torno a la identificaci&#x00F3;n de dichos par&#x00E1;metros.</p>

			<p>En aras de ilustrar esta circunstancia nos limitaremos a citar algunos ejemplos que difieren claramente entre s&#x00ED;. Hermeking (<xref ref-type="bibr" rid="CIT25">2006</xref>) considera que los criterios estructurales del dise&#x00F1;o son: el contenido atractivo, la longitud de las p&#x00E1;ginas, la presentaci&#x00F3;n multimedia, la interactividad, la estructura de contenido, el volumen total del sitio web y el grado de soporte en la navegaci&#x00F3;n. En opini&#x00F3;n de Cebi (<xref ref-type="bibr" rid="CIT09">2013</xref>), los diferentes par&#x00E1;metros a tener en cuenta son: la usabilidad, los aspectos visuales, la adecuaci&#x00F3;n t&#x00E9;cnica, el contenido, la seguridad, la comunicaci&#x00F3;n y el prestigio. Por su parte, Pastor (<xref ref-type="bibr" rid="CIT43">2010</xref>) realiza una propuesta denominada «dise&#x00F1;o web integral», cuyas “claves se establecen a partir de una convergencia estructurada de la arquitectura de la informaci&#x00F3;n, la usabilidad y la accesibilidad” (p. 78). El aporte que realizaremos en la presente investigaci&#x00F3;n se asemeja mucho al de Pastor, salvo en la consideraci&#x00F3;n de la accesibilidad que, pese a no tratarse de un tema balad&#x00ED;, ha sido desestimada.</p>

			<p>En consecuencia, nuestra particular ex&#x00E9;gesis del fen&#x00F3;meno, directamente deudora de las Ciencias de la Comunicaci&#x00F3;n, es la siguiente: el dise&#x00F1;o web es un constructo complejo, formado por los principios de apariencia visual, arquitectura de la informaci&#x00F3;n y usabilidad, que representan los elementos nucleares a valorar en la planificaci&#x00F3;n y desarrollo de un sitio web. En el siguiente ep&#x00ED;grafe nos detendremos, sucintamente, en la definici&#x00F3;n de cada uno de ellos, sabedores de que las fronteras entre unos y otros resultan, a veces, un tanto difusas.</p>

		<sec id="S2.1">
			
			<title>2.1. Apariencia visual, arquitectura de la informaci&#x00F3;n y usabilidad</title>

			<p>El primer elemento estrat&#x00E9;gico del dise&#x00F1;o que vamos a subrayar es la apariencia visual, tambi&#x00E9;n conocida, en su acepci&#x00F3;n anglosajona, como <italic>look &amp; feel</italic>. <italic>Grosso modo</italic>, “la est&#x00E9;tica se refiere a una apariencia bella, placentera y atractiva” (Hassan, <xref ref-type="bibr" rid="CIT21">2006</xref>) (p. 247). Representa, por tanto, “el concepto visual desarrollado para todo el sitio (...) Se trata de una propuesta est&#x00E9;tica” (Crovi y otros, <xref ref-type="bibr" rid="CIT14">2002</xref>) (p. 173), perceptible, por parte del usuario, desde un primer contacto con la sede.</p>

			<p>El segundo elemento estrat&#x00E9;gico del dise&#x00F1;o es la arquitectura de la informaci&#x00F3;n (en lo sucesivo, AI). Los pioneros en su conceptualizaci&#x00F3;n fueron Morville y Rosenfeld (<xref ref-type="bibr" rid="CIT39">2002</xref>), seg&#x00FA;n los cuales puede admitir las siguientes acepciones:</p>

				<list list-type="bullet">
					<list-item>
						<p>1<sup>a</sup>. Dise&#x00F1;o estructural de entornos de informaci&#x00F3;n compartida.</p>
					</list-item>
					
					<list-item>
						<p>2<sup>a</sup>. Combinaci&#x00F3;n de sistemas de organizaci&#x00F3;n, rotulado, b&#x00FA;squeda y navegaci&#x00F3;n en sitios web e <italic>intranets</italic>.</p>
					</list-item>
					
					<list-item>
						<p>3<sup>a</sup>. Arte y ciencia de dar forma a productos y experiencias de informaci&#x00F3;n para apoyar la usabilidad y la buscabilidad.</p>
					</list-item>
					
					<list-item>
						<p>4<sup>a</sup>. Disciplina y comunidad de pr&#x00E1;cticas emergentes centradas en trasladar los principios del dise&#x00F1;o y la arquitectura al territorio digital.</p>
					</list-item>
				</list>
				
			<p>Otros autores posteriores, como Baeza-Yates y otros (<xref ref-type="bibr" rid="CIT01">2004</xref>), aseguran que el problema, o tarea central, de la AI “es la organizaci&#x00F3;n, recuperaci&#x00F3;n y presentaci&#x00F3;n de informaci&#x00F3;n mediante el dise&#x00F1;o de ambientes intuitivos. Esta disciplina naci&#x00F3; a finales de la d&#x00E9;cada de los 90 como respuesta a la explosi&#x00F3;n en el tama&#x00F1;o y complejidad de los sistemas de informaci&#x00F3;n basados en Internet” (p. 169). Por su parte, P&#x00E9;rez-Montoro (<xref ref-type="bibr" rid="CIT44">2010</xref>) resulta muy did&#x00E1;ctico cuando postula que la utilidad de un sitio web radica en:</p>

						<disp-quote><p>“La capacidad que &#x00E9;ste tiene de permitir que el visitante encuentre aquella parte de la informaci&#x00F3;n que est&#x00E1; buscando y que aquel aloja. Si una persona, debido a la estructura del sitio web, no es capaz de encontrar lo que busca aunque el sitio lo albergue, muy probablemente abandonar&#x00E1; esa web y no la utilizar&#x00E1; m&#x00E1;s. Si una web no es &#x00FA;til seguramente estar&#x00E1; condenada al fracaso comunicativo. La disciplina que se encarga de dise&#x00F1;ar los sitios web para que sean &#x00FA;tiles (para que el usuario pueda encontrar lo que busca, si se halla en el sitio) se denomina Arquitectura de la Informaci&#x00F3;n” (P&#x00E9;rez-Montoro, <xref ref-type="bibr" rid="CIT44">2010</xref>) (pp. 333-334).</p></disp-quote>

			<p>Al hilo de la <italic>infoxicaci&#x00F3;n</italic> terminol&#x00F3;gica mencionada anteriormente, “determinar d&#x00F3;nde empieza y d&#x00F3;nde termina la AI es complicado” (Garc&#x00ED;a y otros, <xref ref-type="bibr" rid="CIT18">2010</xref>) (p. 340). No obstante, dos referentes en la materia, como son Morville y Rosenfeld (<xref ref-type="bibr" rid="CIT39">2002</xref>), garantizan que el dise&#x00F1;o gr&#x00E1;fico (entendido como apariencia visual) no es sin&#x00F3;nimo de AI, como tampoco lo es la ingenier&#x00ED;a de la usabilidad. Por tanto, una definici&#x00F3;n concisa, a la par que esclarecedora, es la que asume que “la arquitectura es el soporte, primero conceptual y luego funcional, a trav&#x00E9;s del cual se organiza, canaliza y puede discurrir el flujo informativo de una web” (L&#x00F3;pez del Ramo, <xref ref-type="bibr" rid="CIT34">2010</xref>) (p. 82).</p>

			<p>El tercer y &#x00FA;ltimo elemento estrat&#x00E9;gico del dise&#x00F1;o es la usabilidad, que “ha ejercido como foco de discusi&#x00F3;n y sido descrita mediante diferentes definiciones tanto en la academia como en la industria durante un largo per&#x00ED;odo de tiempo” (Coursaris y Kim, <xref ref-type="bibr" rid="CIT13">2011</xref>) (p. 118). En l&#x00ED;neas generales, la usabilidad puede ser entendida como “un atributo relacionado con la facilidad de uso. M&#x00E1;s espec&#x00ED;ficamente, se refiere a la rapidez con que se puede aprender a utilizar algo, la eficiencia al utilizarlo, cu&#x00E1;n memorable es, cu&#x00E1;l es su grado de propensi&#x00F3;n al error y cu&#x00E1;nto les gusta a los usuarios” (Nielsen y Loranger, <xref ref-type="bibr" rid="CIT42">2006</xref>) (p. 17).</p>

			<p>Por otra parte, existe un amplio acuerdo en la literatura cient&#x00ED;fica especializada en torno a los procedimientos de evaluaci&#x00F3;n utilizados para medir la usabilidad. He aqu&#x00ED; los dos m&#x00E1;s recurrentes (Garc&#x00ED;a G&#x00F3;mez, <xref ref-type="bibr" rid="CIT19">2004</xref>; Shackel, <xref ref-type="bibr" rid="CIT49">2009</xref>):</p>

				<list list-type="bullet">
					<list-item>
						<p>1<sup>o</sup>. Las evaluaciones heur&#x00ED;sticas: consisten en valoraciones hechas por un reducido grupo de especialistas, que emplean listados de criterios a chequear en el sitio web.</p>
					</list-item>
					
					<list-item>
						<p>2<sup>o</sup>. Las pruebas de rendimiento con usuarios: suponen estudios experimentales completos con muestras de usuarios reales, donde se registran los principales problemas que encuentran &#x00E9;stos cuando realizan las acciones concretas propuestas por el evaluador, as&#x00ED; como los tiempos empleados en cada una de ellas.</p>
					</list-item>

				</list>

			<p>Aunque no se trata estrictamente de esa t&#x00E9;cnica anal&#x00ED;tica, en esta investigaci&#x00F3;n se ha empleado un m&#x00E9;todo cercano a la evaluaci&#x00F3;n heur&#x00ED;stica, tal y como se ver&#x00E1; m&#x00E1;s adelante.</p>

			<p>Concluimos este apartado esgrimiendo que un sitio usable “conduce a los usuarios a trav&#x00E9;s del sitio en lugar de empujarlos hacia la informaci&#x00F3;n” (Yates, <xref ref-type="bibr" rid="CIT51">2005</xref>) (p. 183). Por tanto, y al igual que la apariencia est&#x00E9;tica y la AI, la usabilidad se erige en un elemento trascendental en cuanto al dise&#x00F1;o web respecta.</p>

		</sec>
			
		</sec>
			
		<sec id="S3">
			
			<title>3. REVISI&#x00D3;N DE PROPUESTAS ANAL&#x00CD;TICAS SOBRE EL DISE&#x00D1;O DE SITIOS WEB</title>

			<p>Repasaremos, acto seguido, algunos estudios recientes que han planteado distintas f&#x00F3;rmulas para evaluar el dise&#x00F1;o de sitios web. Del mismo modo, y gracias a este repaso, podremos comprobar que sus autores coinciden en determinados par&#x00E1;metros anal&#x00ED;ticos, pero difieren en algunos otros.</p>

			<p>Karkin y Janssen (<xref ref-type="bibr" rid="CIT29">2014</xref>), por ejemplo, realizan un estudio de 16 portales web municipales de Turqu&#x00ED;a, aplicando un m&#x00E9;todo de recuento con plantilla de an&#x00E1;lisis, o <italic>checklist</italic>. Lo m&#x00E1;s interesante de su trabajo radica en las categor&#x00ED;as en la que se apoya su evaluaci&#x00F3;n, y que son: el contenido, la usabilidad, la calidad, la accesibilidad, la participaci&#x00F3;n ciudadana, la transparencia, la responsabilidad, el di&#x00E1;logo y el balance de intereses. Sus resultados indican que los sitios no son satisfactorios a nivel de participaci&#x00F3;n ciudadana, pero s&#x00ED; en lo que a la usabilidad y la resoluci&#x00F3;n de dudas respecta.</p>

			<p>Por su parte, L&#x00F3;pez del Ramo (<xref ref-type="bibr" rid="CIT34">2010</xref>) se plantea, como uno de los principales objetivos de su trabajo, la propuesta de un cat&#x00E1;logo de rasgos estructurales que afecten al uso de sitios web, para luego evaluar emp&#x00ED;ricamente c&#x00F3;mo se realiza el tratamiento de esos rasgos en relaci&#x00F3;n a los portales de los ayuntamientos madrile&#x00F1;os. Los indicadores propuestos por este estudioso son los siguientes: tipo de estructura general; esquema de organizaci&#x00F3;n del sitio; predominio de la anchura o la profundidad; criterios de organizaci&#x00F3;n; existencia de «subwebs» y de mapa web; y, por &#x00FA;ltimo, URL significativo, identificable y memorable. Sus resultados determinan que el tratamiento de los factores estructurales de usabilidad en la muestra analizada alcanza el 70% respecto del valor ideal; mientras que, a nivel informativo, se produce, en mayor medida, la variedad de contenidos que la profundidad de &#x00E9;stos.</p>

			<p>Miranda y otros, (<xref ref-type="bibr" rid="CIT38">2009</xref>) aplican su «<italic>Web Assessment Index</italic>» (WAI), compuesto por &#x00ED;tems relativos a la accesibilidad, la rapidez, la navegabilidad y la calidad de los contenidos, a una muestra de 84 sitios web de los principales municipios de Europa. Esta misma estrategia, consistente en la evaluaci&#x00F3;n de portales web de diversa &#x00ED;ndole, es llevada a cabo por Miranda y sus colaboradores en los casos de sedes bancarias, empresariales, universitarias y de equipos de f&#x00FA;tbol, lo cual refrenda la ductilidad y la validez de su m&#x00E9;todo de recuento.</p>

			<p>Los trabajos de Fern&#x00E1;ndez-Cavia y sus asistentes arrojan luz sobre el dise&#x00F1;o de los portales web de los destinos tur&#x00ED;sticos espa&#x00F1;oles. Por caso, Fern&#x00E1;ndez-Cavia y otros, (<xref ref-type="bibr" rid="CIT17">2013</xref>) analizan la calidad de los sitios tur&#x00ED;sticos oficiales de las comunidades aut&#x00F3;nomas espa&#x00F1;olas. Mediante una metodolog&#x00ED;a basada en una plantilla de an&#x00E1;lisis que contempla 12 par&#x00E1;metros, y un total de 127 indicadores, plantean un &#x00ED;ndice de calidad web (o como sus autores lo denominan: «<italic>Web Quality Index</italic>», WQI) con el que eval&#x00FA;an cada portal. Sus resultados indican que la calidad general de los sitios examinados se sit&#x00FA;a justo por encima de un nivel medio, con un indicador global de «.51». Por otro lado, Fern&#x00E1;ndez-Cavia y otros, (<xref ref-type="bibr" rid="CIT16">2014</xref>) vuelven a reportar acerca de su WQI, pero esta vez aplicado al an&#x00E1;lisis de 10 portales m&#x00E1;s heterog&#x00E9;neos (6 espa&#x00F1;oles y 4 extranjeros), con el fin de demostrar la viabilidad de aplicar su metodolog&#x00ED;a en otros contextos.</p>

			<p>En definitiva, y tal y como anunci&#x00E1;bamos al inicio de esta secci&#x00F3;n, se demuestra que no existe un inventario indefectible de par&#x00E1;metros que permitan perge&#x00F1;ar, de forma ampliamente consensuada, el an&#x00E1;lisis de sitios web. Esta circunstancia entronca, a su vez, con la discordia preponderante en la mera definici&#x00F3;n de los t&#x00E9;rminos, especialmente en lo que ata&#x00F1;e a la AI y la usabilidad, muy permeables al criterio de cada autor. As&#x00ED; pues, y siendo conscientes del reto que supone, en ulteriores apartados detallaremos nuestra propuesta metodol&#x00F3;gica para el an&#x00E1;lisis de las sedes web municipales de Espa&#x00F1;a.</p>

		</sec>
			
		<sec id="S4">
			
			<title>4. OBJETIVOS Y M&#x00C9;TODO DE LA INVESTIGACI&#x00D3;N</title>

			<p>Huizingh (<xref ref-type="bibr" rid="CIT26">2000</xref>) determina que los dos pilares en que un sitio web se cimenta son el contenido y el dise&#x00F1;o: “el contenido se refiere a la informaci&#x00F3;n, a las caracter&#x00ED;sticas o a los servicios que se ofrecen en un sitio web, mientras que el dise&#x00F1;o alude a la forma en la que el contenido se pone a disposici&#x00F3;n de los visitantes de la web” (p. 123). Esta investigaci&#x00F3;n, pues, halla en el dise&#x00F1;o su &#x00FA;nico y gran protagonista.</p>

			<p>Consiguientemente, nuestro objetivo primigenio radica en examinar los principales aspectos del dise&#x00F1;o de los portales municipales de Espa&#x00F1;a. Supeditados a &#x00E9;ste, surgen dos prop&#x00F3;sitos m&#x00E1;s, como son: determinar, a partir de la creaci&#x00F3;n de un &#x00CD;ndice de Calidad Formal, el estado general de las webs municipales del pa&#x00ED;s; y efectuar comparaciones a nivel regional (comunidades aut&#x00F3;nomas), demogr&#x00E1;fico (tipos de poblaciones) y geogr&#x00E1;fico (litoral frente a interior, y cuadrantes territoriales) para detectar eventuales diferencias. Pero, ¿por qu&#x00E9; los portales de los municipios? Pues por una sencilla raz&#x00F3;n: son los que mayor contacto tienen con el ciudadano, ya que suponen su organismo de representaci&#x00F3;n m&#x00E1;s inmediato. Por ende, es relevante focalizar nuestro inter&#x00E9;s en el modo en que estos servicios <italic>on-line</italic> son puestos a disposici&#x00F3;n de sus usuarios.</p>

			<p>En lo referente al m&#x00E9;todo empleado para acometer esta investigaci&#x00F3;n, hemos utilizado el an&#x00E1;lisis de contenido. Sin embargo, “conviene precisar inmediatamente que, en muchos casos, el an&#x00E1;lisis de contenido no se limita al contenido, sino que tiene en cuenta el continente. El an&#x00E1;lisis de contenido puede ser un an&#x00E1;lisis de los significados, pero tambi&#x00E9;n puede ser un an&#x00E1;lisis de los significantes” (Bardin, <xref ref-type="bibr" rid="CIT03">1996</xref>) (p. 25). En esta misma l&#x00ED;nea, L&#x00F3;pez Noguero (<xref ref-type="bibr" rid="CIT35">2002</xref>) asegura que “esta t&#x00E9;cnica se constituye en un instrumento de respuesta a esa curiosidad natural del hombre por descubrir la estructura interna de la informaci&#x00F3;n, bien en su composici&#x00F3;n, en su forma de organizaci&#x00F3;n o estructura, bien en su din&#x00E1;mica” (p. 173). Esto es, el hecho de que se denomine «an&#x00E1;lisis de contenido» no se disocia de su capacidad para estudiar los rasgos formales de la comunicaci&#x00F3;n, justamente lo acontecido en este trabajo.</p>

			<p>As&#x00ED; pues, y dando continuidad a una l&#x00ED;nea de investigaci&#x00F3;n previa (Pi&#x00F1;eiro-Naval e Igartua, <xref ref-type="bibr" rid="CIT45">2012</xref>, <xref ref-type="bibr" rid="CIT46">2013</xref>; Pi&#x00F1;eiro-Naval y otros, <xref ref-type="bibr" rid="CIT47">2015</xref>), hemos efectuado un an&#x00E1;lisis de contenido, que “es uno de los m&#x00E9;todos de investigaci&#x00F3;n m&#x00E1;s utilizados por los estudiosos que se ocupan de los medios y de la comunicaci&#x00F3;n” (Berger, <xref ref-type="bibr" rid="CIT04">2000</xref>) (p. 173). Si trazamos una analog&#x00ED;a con los procedimientos de evaluaci&#x00F3;n m&#x00E1;s utilizados para medir la usabilidad, se asemejar&#x00ED;a bastante a la evaluaci&#x00F3;n heur&#x00ED;stica, al menos en su planteamiento m&#x00E1;s elemental.</p>

			<p>Con relaci&#x00F3;n a su empleo en el examen de entornos web, McMillan (<xref ref-type="bibr" rid="CIT37">2000</xref>) establece como nucleares las siguientes etapas: el investigador plantea preguntas o hip&#x00F3;tesis; luego selecciona una muestra; a continuaci&#x00F3;n estipula sus categor&#x00ED;as de an&#x00E1;lisis; posteriormente, los codificadores son entrenados, examinan el contenido y la fiabilidad de su trabajo es chequeada; y, al final, los datos obtenidos son interpretados. Siguiendo este protocolo, y en consonancia con nuestros objetivos, hemos planteado las siguientes preguntas de investigaci&#x00F3;n, adecuadas al car&#x00E1;cter descriptivo y exploratorio del estudio:</p>

				<list list-type="bullet">
					<list-item>
						<p>P.I.1: ¿C&#x00F3;mo est&#x00E1;n dise&#x00F1;ados los sitios web de los municipios de Espa&#x00F1;a en cuanto a la apariencia visual, la AI y la usabilidad respecta?</p>
					</list-item>
					
					<list-item>
						<p>P.I.2: ¿Cu&#x00E1;l es el estado general de las sedes municipales de nuestro pa&#x00ED;s con arreglo al &#x00CD;ndice de Calidad Formal creado?</p>
					</list-item>
					
					<list-item>
						<p>P.I.3: ¿Qu&#x00E9; resultados se desprenden de las distintas comparaciones efectuadas, tanto regionales, como demogr&#x00E1;ficas y geogr&#x00E1;ficas? ¿Existen, en consecuencia, diferencias significativas entre los grupos municipales estipulados?</p>
					</list-item>

				</list>

			<p>En los siguientes subapartados daremos cuenta de los pasos intermedios del protocolo, dejando para el final la interpretaci&#x00F3;n de los datos recabados.</p>

		<sec id="S4.1">
			
			<title>4.1. Muestra</title>

			<p>Como bien expresan Riffe y otros, (<xref ref-type="bibr" rid="CIT48">1998</xref>): “Internet genera problemas &#x00FA;nicos para el muestreo” (p. 101); puesto que supone un torrente de informaci&#x00F3;n, de tal calibre, que convierte en una tarea harto complicada el dise&#x00F1;o de una muestra que represente al universo del que procede.</p>

			<p>Krippendorff (<xref ref-type="bibr" rid="CIT31">1990</xref>), a colaci&#x00F3;n del proceso de dise&#x00F1;o muestral, declara que: “est&#x00E1; orientado por un plan de muestreo que especifica con suficiente detalle de qu&#x00E9; manera ha de proceder el investigador para obtener una muestra de unidades que, en su conjunto, sean representativas de la poblaci&#x00F3;n que le interesa” (p. 95). Pues bien, pasemos a explicar el plan de muestreo poliet&#x00E1;pico empleado en la presente investigaci&#x00F3;n.</p>

			<p>En primer lugar, el universo (los portales web del conjunto de municipios de Espa&#x00F1;a) se estratific&#x00F3; seg&#x00FA;n las provincias en las que se divide el territorio nacional: 50. La estratificaci&#x00F3;n efectuada atiende a criterios geogr&#x00E1;ficos, “en la que los estratos son &#x00E1;reas compactas, y que generalmente viene acompa&#x00F1;ada por un incremento en la precisi&#x00F3;n” (Cochran, <xref ref-type="bibr" rid="CIT11">1987</xref>). En un segundo paso, fue seleccionado, de forma intencional, un caso cr&#x00ED;tico por provincia: el sitio web de su capital. En lo que ata&#x00F1;e a este criterio, Henry (<xref ref-type="bibr" rid="CIT24">1990</xref>) asegura que “el investigador selecciona un n&#x00FA;mero limitado de casos donde la l&#x00F3;gica y la experiencia previa indican que van a permitir una generalizaci&#x00F3;n poblacional” (p. 21). En tercer y &#x00FA;ltimo lugar, se procedi&#x00F3; a realizar un muestreo aleatorio de sitios web por cada provincia, cuya afijaci&#x00F3;n fue uniforme; es decir, se asign&#x00F3; el mismo n&#x00FA;mero de unidades muestrales (en concreto, 9 sedes) a cada estrato. Las localidades entre las cuales se desarroll&#x00F3; el muestreo aleatorio, en el que “cada miembro de la poblaci&#x00F3;n de estudio tiene la misma probabilidad de ser seleccionado” (Henry, <xref ref-type="bibr" rid="CIT24">1990</xref>) (p. 27), deb&#x00ED;an cumplir un requisito indispensable basado en su tama&#x00F1;o poblacional: tener m&#x00E1;s de 1.000 habitantes.</p>

			<p>Inmediatamente, acudimos al directorio web del Instituto Nacional de Estad&#x00ED;stica (una fuente <italic>on-line</italic> en constante actualizaci&#x00F3;n) para definir el listado de municipios, empleando despu&#x00E9;s el motor de b&#x00FA;squeda <italic>Google</italic> para elaborar la correspondiente relaci&#x00F3;n de direcciones «http». En suma, la muestra final ascendi&#x00F3; a 500 sitios web, una cifra que supone el 6.15% de los municipios de Espa&#x00F1;a (8.117 en total), y que comporta un margen de error inferior al 5% recomendado (en concreto, un 4.25%<xref ref-type="fn" rid="NOTE1">1</xref>). En t&#x00E9;rminos demogr&#x00E1;ficos, los 500 municipios seleccionados suponen, en habitantes, el 43.32% de la poblaci&#x00F3;n espa&#x00F1;ola.</p>

		</sec>
			
		<sec id="S4.2">
			
			<title>4.2. Categor&#x00ED;as de an&#x00E1;lisis</title>

			<p>Una vez formuladas las preguntas de investigaci&#x00F3;n y seleccionada la muestra de entre una poblaci&#x00F3;n de an&#x00E1;lisis, “se debe elaborar un libro de c&#x00F3;digos (<italic>codebook</italic>) en el que se especifique con gran detalle c&#x00F3;mo debe evaluarse cada criterio o variable” (Igartua, <xref ref-type="bibr" rid="CIT27">2006</xref>) (p. 204). Antes de enumerar las categor&#x00ED;as que conforman el <italic>codebook</italic>, cabe concretar que nos hemos servido de ciertos datos para la identificaci&#x00F3;n de las unidades de an&#x00E1;lisis, como son: el n&#x00FA;mero de la sede web y el de la provincia a la cual pertenece el municipio; su n&#x00FA;mero de habitantes, gracias a los datos extra&#x00ED;dos del INE; el c&#x00F3;digo correspondiente a cada uno de los codificadores; y la fecha de an&#x00E1;lisis del sitio web.</p>

			<p>En cuanto a las variables (41 en total y que se muestran, de forma esquem&#x00E1;tica, al final del trabajo, en el <xref ref-type="fig" rid="A1">Anexo I</xref>), nuestro libro de c&#x00F3;digos alude a cuestiones relativas a la apariencia visual, la AI y la usabilidad. Las categor&#x00ED;as que nos han posibilitado la evaluaci&#x00F3;n de los portales municipales se sustentan en el criterio validado de m&#x00FA;ltiples autores, plasmado en investigaciones de gran relevancia (v&#x00E9;anse: Baloglu y Pekcan, <xref ref-type="bibr" rid="CIT02">2006</xref>; Bernal, <xref ref-type="bibr" rid="CIT05">2008</xref>; Cabrera, <xref ref-type="bibr" rid="CIT06">2009</xref>; Callahan, <xref ref-type="bibr" rid="CIT07">2005</xref>; Codina, <xref ref-type="bibr" rid="CIT12">2000</xref>; Jim&#x00E9;nez Piano, <xref ref-type="bibr" rid="CIT28">2001</xref>; Kim y Fesenmaier, <xref ref-type="bibr" rid="CIT30">2008</xref>; L&#x00F3;pez del Ramo, <xref ref-type="bibr" rid="CIT34">2010</xref>; Nathan y otros, <xref ref-type="bibr" rid="CIT40">2008</xref>; Pi&#x00F1;eiro-Naval e Igartua, <xref ref-type="bibr" rid="CIT46">2013</xref>; Zhao y otros, <xref ref-type="bibr" rid="CIT52">2003</xref>).</p>

			<p>As&#x00ED; pues, y en lo que ata&#x00F1;e a la «apariencia visual» de los portales municipales, se han tenido en cuenta cuestiones relacionadas con el <italic>look &amp; feel</italic>, observables &#x00FA;nicamente en la p&#x00E1;gina de inicio; la ventana de acceso al sitio y la que m&#x00E1;s visitas suele recibir (Garc&#x00ED;a G&#x00F3;mez, <xref ref-type="bibr" rid="CIT19">2004</xref>; Singh y otros, <xref ref-type="bibr" rid="CIT50">2005</xref>; Zhou, <xref ref-type="bibr" rid="CIT53">2004</xref>). Las citadas cuestiones son: las fotograf&#x00ED;as, las animaciones, los v&#x00ED;deos y el cromatismo. Las tres primeras comparten un mismo esquema de an&#x00E1;lisis, ya que fueron contabilizados el n&#x00FA;mero de fotograf&#x00ED;as, animaciones y v&#x00ED;deos presentes en las <italic>home pages</italic>, as&#x00ED; como su ubicaci&#x00F3;n y su contenido. Por otro lado, y al margen de las fotograf&#x00ED;as est&#x00E1;ticas, se evalu&#x00F3; la posibilidad de visualizar una galer&#x00ED;a fotogr&#x00E1;fica relativa a la localidad. En lo concerniente al cromatismo, se identific&#x00F3; el color predominante como fondo de la p&#x00E1;gina de inicio, el que personaliza el men&#x00FA; de contenidos y el que impera en el cuerpo del texto informativo.</p>

			<p>En cuanto a la «AI», se valoraron cuestiones relacionadas con la estructura textual, que pod&#x00ED;an ser observadas a lo largo de todas las p&#x00E1;ginas consultadas del sitio web. Los par&#x00E1;metros anal&#x00ED;ticos aqu&#x00ED; englobados son: la legibilidad del texto (tipograf&#x00ED;a y tama&#x00F1;o de la fuente), la facilitaci&#x00F3;n de la lectura (t&#x00ED;tulos, palabras clave, extensi&#x00F3;n de los p&#x00E1;rrafos o empleo de otros idiomas, adem&#x00E1;s del castellano) y los v&#x00ED;nculos (presencia de enlaces, adecuada visibilidad o correcta apertura de &#x00E9;stos).</p>

			<p>Para finalizar con los &#x00ED;tems del libro de c&#x00F3;digos empleado en la presente investigaci&#x00F3;n, hemos de aludir a los rasgos relacionados con el funcionamiento, o «usabilidad», agrupados en los siguientes bloques: la navegaci&#x00F3;n (men&#x00FA; de contenidos, mapa web y motor de b&#x00FA;squeda de contenidos) y la interfaz (limpieza, consistencia y calidad percibida).</p>

			<p>En relaci&#x00F3;n a la variable «calidad percibida» del sitio web, evaluada justo al t&#x00E9;rmino de la codificaci&#x00F3;n, conviene efectuar la siguiente precisi&#x00F3;n. Bien es cierto que la calidad supone un sofisticado constructo multidimensional, cuya valoraci&#x00F3;n debe atender al agrupamiento de una serie de atributos objetivos. No obstante, se estim&#x00F3; razonable solicitar al equipo de codificadores que emitiesen, en funci&#x00F3;n de su adecuada preparaci&#x00F3;n y la experiencia acumulada, una valoraci&#x00F3;n subjetiva como punto de partida para el establecimiento de un indicador global; creado, con posterioridad, a partir de la recodificaci&#x00F3;n y la computaci&#x00F3;n de aquellas variables que correlacionaban en mayor medida, y de forma estad&#x00ED;sticamente significativa, con la calidad percibida. Siguiendo este procedimiento fuimos capaces de instaurar nuestro propio «&#x00CD;ndice de Calidad Formal», que m&#x00E1;s adelante se detallar&#x00E1;, y que nos permiti&#x00F3; emitir un juicio m&#x00E1;s preciso acerca del estado del dise&#x00F1;o de las sedes web.</p>

		</sec>
			
		<sec id="S4.3">
			
			<title>4.3. Codificaci&#x00F3;n y fiabilidad</title>

			<p>El per&#x00ED;odo de codificaci&#x00F3;n transcurri&#x00F3; desde el 17 de febrero hasta el 11 de abril de 2014. En la codificaci&#x00F3;n de los 500 sitios web que conformaron la muestra se involucr&#x00F3; un equipo de 4 codificadores, y en el que no figur&#x00F3; el investigador principal. Todos los codificadores recibieron formaci&#x00F3;n acerca del an&#x00E1;lisis de contenido para familiarizarse con &#x00E9;l antes de comenzar su labor. En este sentido, Neuendorf (<xref ref-type="bibr" rid="CIT41">2002</xref>) resulta muy clarificadora cuando afirma que “tres palabras describen la preparaci&#x00F3;n de un buen codificador: entrenar, entrenar y entrenar” (p. 133). Por tanto, se llev&#x00F3; a cabo un estudio piloto sobre una selecci&#x00F3;n de cuatro sitios que no estaban incluidos en la muestra, con el fin de calibrar el funcionamiento de las categor&#x00ED;as, as&#x00ED; como la interpretaci&#x00F3;n que los codificadores hac&#x00ED;an de &#x00E9;stas.</p>

			<p>Habiendo consensuado con el equipo el dise&#x00F1;o final de la herramienta (es decir, el libro de c&#x00F3;digos), el siguiente paso fue la asignaci&#x00F3;n, proporcional y homog&#x00E9;nea, de unidades de an&#x00E1;lisis a cada miembro. Fueron encomendadas a cada codificador, aleatoriamente, 125 sedes que deb&#x00ED;an examinar de forma individual. Con el prop&#x00F3;sito de uniformizar las condiciones del an&#x00E1;lisis, se pidi&#x00F3; a los colaboradores que empleasen el mismo buscador (<italic>Google Chrome</italic>) y, en la medida de su disponibilidad, que realizasen el trabajo bajo la conexi&#x00F3;n a Internet de que dispone el Observatorio de los Contenidos Audiovisuales (OCA), lugar donde se coordin&#x00F3; y realiz&#x00F3; la mayor parte del trabajo.</p>

			<p>Por lo que respecta al chequeo de la fiabilidad intercodificadores, seleccionamos una sub-muestra del 12%; esto es, 60 sitios web codificados por todos los miembros del equipo. Esta parte cr&#x00ED;tica del trabajo s&#x00ED; se desarroll&#x00F3; &#x00ED;ntegramente en el OCA bajo la supervisi&#x00F3;n del investigador principal, pues resultaba muy importante que el examen de cada portal se produjese en el mismo lapso temporal; paliando, as&#x00ED;, uno de los principales inconvenientes que presenta la red: su volatilidad.</p>

			<p>En cuanto al &#x00ED;ndice empleado para calcular la fiabilidad intercodificadores, se opt&#x00F3; por el Alpha de Krippendorf, el m&#x00E1;s robusto a nivel estad&#x00ED;stico, as&#x00ED; como el que mejor se ajusta a los distintos tipos de escalas de medida y a un n&#x00FA;mero indeterminado de codificadores (Hayes y Krippendorff, <xref ref-type="bibr" rid="CIT23">2007</xref>; Krippendorff, <xref ref-type="bibr" rid="CIT33">2012</xref>). Sin embargo, y debido a que el paquete estad&#x00ED;stico SPSS no dispone de una funci&#x00F3;n espec&#x00ED;fica para realizar tales c&#x00E1;lculos, se procedi&#x00F3; a la instalaci&#x00F3;n de una extensi&#x00F3;n llamada «<italic>Macro</italic> <italic>Kalpha</italic>», desarrollada por Andrew F. Hayes. Gracias a dicha extensi&#x00F3;n, disponible para su descarga gratuita a trav&#x00E9;s de la web personal de su creador<xref ref-type="fn" rid="NOTE2">2</xref>, fue posible el chequeo del acuerdo entre los codificadores.</p>

			<p>Pues bien, la fiabilidad media de las 41 variables que integran el libro de c&#x00F3;digos asciende a α<sub>k</sub>=.79; un dato muy satisfactorio si se atiende a la recomendaci&#x00F3;n que efect&#x00FA;a el propio Krippendorf (2004), que asegura que cuando el &#x00ED;ndice α<sub>k</sub> ≥.66, se pueden establecer conclusiones v&#x00E1;lidas acerca del objeto de estudio tratado en la investigaci&#x00F3;n. La variable cuya fiabilidad fue menor es «extensi&#x00F3;n de los p&#x00E1;rrafos» (α<sub>k</sub>=.34).</p>

		</sec>
			
		</sec>
			
		<sec id="S5">
			
			<title>5. RESULTADOS</title>
			
			<sec id="S5.1">
			
			<title>5.1. Aproximaci&#x00F3;n descriptiva a los resultados</title>

			<p>En t&#x00E9;rminos de apariencia visual, se han cuantificado aspectos relacionados con las fotograf&#x00ED;as, las animaciones y los v&#x00ED;deos presentes en la p&#x00E1;gina de inicio. Los citados aspectos son el n&#x00FA;mero de elementos visuales, su ubicaci&#x00F3;n y su contenido (<xref ref-type="table" rid="T1">Tabla I</xref>).</p>
			
			
					<fig id="T1">
						<label>Tabla I</label>
						<caption>
							<title>Porcentajes de los elementos visuales (fotograf&#x00ED;as, animaciones y v&#x00ED;deos) en funci&#x00F3;n de su n&#x00FA;mero, ubicaci&#x00F3;n y contenido</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T1.jpg"/>
					</fig>
						
						

			<p>Se observa que el elemento visual que m&#x00E1;s abunda es el fotogr&#x00E1;fico, ubicado primordialmente en las partes superior y central, y cuyo contenido est&#x00E1; habitualmente ligado al entorno cultural material de los municipios. Por otra parte, y en relaci&#x00F3;n con las im&#x00E1;genes presentes en la p&#x00E1;gina de inicio, se midi&#x00F3; la presencia o la ausencia de una galer&#x00ED;a fotogr&#x00E1;fica; a este nivel, el 54.6% de los sitios gozan de este elemento.</p>

			<p>Con respecto al cromatismo, se han inspeccionado tres posibles aspectos para su aplicaci&#x00F3;n, como son: el fondo de la p&#x00E1;gina de inicio, el men&#x00FA; de contenidos y el hipertexto informativo. En la <xref ref-type="table" rid="T2">tabla II</xref> se pueden ver los porcentajes con arreglo a las 12 posibilidades crom&#x00E1;ticas contempladas.</p>
			
			
					<fig id="T2">
						<label>Tabla II</label>
						<caption>
							<title>Porcentajes que ostenta cada color en funci&#x00F3;n de los aspectos de aplicaci&#x00F3;n</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T2.jpg"/>
					</fig>
						
						

			<p>Se observa que el color que impera como fondo de la <italic>home page</italic> es el blanco, concretamente en el 92.2% de los sitios analizados; mientras que para el texto informativo priman el negro (73.6%) y el gris (22%). En cuanto al men&#x00FA;, su cromatismo est&#x00E1; mucho m&#x00E1;s atomizado, aunque azul (30.8%), gris (16.6%) y verde (12%) destacan sobre los dem&#x00E1;s.</p>

			<p>En lo concerniente a la AI, se han contemplado en el <italic>codebook</italic> variables agrupadas en tres apartados: legibilidad del texto, facilitaci&#x00F3;n de la lectura y v&#x00ED;nculos y enlaces. En la legibilidad del texto se han incluido dos cuestiones como: la fuente predominante en el cuerpo de texto y el tama&#x00F1;o de la fuente. Pues bien, el 89.6% de los sitios web emplean tipograf&#x00ED;as de palo seco, frente al 10.4% que opta por tipograf&#x00ED;as con serifa. En cuanto al tama&#x00F1;o, el 31.8% incluye fuente peque&#x00F1;a, el 67.6% mediana, y tan s&#x00F3;lo el 0.6% fuente grande.</p>

			<p>Para calibrar la facilitaci&#x00F3;n de la lectura de los portales, se han inspeccionado elementos como: la presencia de t&#x00ED;tulos o titulares en las p&#x00E1;ginas que componen el sitio (el 1.8% no los emplea en ninguna p&#x00E1;gina, el 3.8% s&#x00F3;lo en algunas p&#x00E1;ginas y el 94.4% en todas las p&#x00E1;ginas); la se&#x00F1;alizaci&#x00F3;n de ciertas palabras clave, que s&#x00F3;lo se produce en el 33% de los sitios; la extensi&#x00F3;n de los p&#x00E1;rrafos (el 49.4% suele valerse de p&#x00E1;rrafos cortos, de un m&#x00E1;ximo de 5 l&#x00ED;neas; mientras que el 50.6% restante aboga por los largos, a partir de 6 l&#x00ED;neas); el adecuado contraste entre la fuente y el fondo, patente en el 98.2% de los casos; y los distintos idiomas en los que se presenta el contenido, cuyos porcentajes se visualizan en la <xref ref-type="table" rid="T3">tabla III</xref>.</p>
			
			
					<fig id="T3">
						<label>Tabla III</label>
						<caption>
							<title>Porcentaje de portales web que incluyen sus contenidos, o parte, en los siguientes idiomas</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T3.jpg"/>
					</fig>
						
						

			<p>Resulta llamativo que exista un 5% de sitios que no utilizan el castellano, pertenecientes a las regiones de: Catalu&#x00F1;a (16 casos), Galicia (6 casos) y Comunidad Valenciana (3 casos). Asimismo, se echa en falta un mayor empleo de idiomas extranjeros, especialmente del ingl&#x00E9;s, &#x00FA;nicamente presente en el 28.8% de los portales web.</p>

			<p>Por &#x00FA;ltimo, y en cuanto a los v&#x00ED;nculos y enlaces, se ha cuantificado: la presencia de v&#x00ED;nculos insertos en el cuerpo del texto web (38.6%); la adecuada visibilidad de &#x00E9;stos (37.4%); su correcta apertura (72.8%); y, por &#x00FA;ltimo, la existencia de enlaces a las FAQ (3.4%), redes sociales (52.8%), foros (7.2%) y blogs (18%).</p>

			<p>Para finalizar esta panor&#x00E1;mica porcentual de los datos, nos topamos con los rasgos ligados al funcionamiento, o usabilidad, de los sitios web, que se agrupan en dos bloques: navegaci&#x00F3;n e interfaz. En la navegaci&#x00F3;n, y por lo que respecta al men&#x00FA; de contenidos, se evalu&#x00F3; si &#x00E9;ste era simple o complejo (el 70.6% es simple, pues presenta un nivel de categor&#x00ED;as principales; mientras que el 29.4% es complejo, ya que dispone de varios subniveles interactivos por cada categor&#x00ED;a principal, que se despliegan al situar el puntero sobre ellas), as&#x00ED; como su claridad y visibilidad (en el 95.8% de los casos), y su ubicaci&#x00F3;n (el 62.4% en la parte superior, el 35.2% en el margen izquierdo, y el 2.4% en el margen derecho). Tambi&#x00E9;n se cuantific&#x00F3; la existencia de un mapa web (en el 60.6% de los sitios) y un motor de b&#x00FA;squeda de contenidos (en el 74.6% de las sedes).</p>

			<p>Al respecto de la interfaz, se evalu&#x00F3; su consistencia (uniformidad y coherencia) y su limpieza (sencillez y armon&#x00ED;a), adem&#x00E1;s de la calidad percibida de la sede por parte de los codificadores. Pues bien, el 82.6% de los sitios son consistentes, mientras que el 73.6% se aprecian como sencillos y armoniosos. En t&#x00E9;rminos de la calidad percibida, en la <xref ref-type="table" rid="T4">tabla IV</xref> se visualizan los porcentajes con respecto a las 5 opciones de respuesta.</p>
			
			
					<fig id="T4">
						<label>Tabla IV</label>
						<caption>
							<title>Porcentaje de sitios web en funci&#x00F3;n del nivel de «calidad percibida»</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T4.jpg"/>
					</fig>
						
						

			<p>La calidad percibida de los portales tiende a la mediocridad, ya que su promedio se reduce a: M (calidad percibida)=2.35; DT=.91. De hecho, el porcentaje m&#x00E1;s amplio lo acaparan los sitios etiquetados como «mediocres», con un 40.2%. Por otra parte, y gracias a la prueba <italic>t</italic> de Student para una muestra, se ha comprobado que la media de la calidad percibida es menor que el punto medio (el valor 3) de su escala te&#x00F3;rica [<italic>t</italic> (499)=-15.99, <italic>p</italic>&lt;.001]. A saber: puesto que existen diferencias estad&#x00ED;sticamente significativas entre ambos valores, asumimos que la calidad percibida real dista del punto medio te&#x00F3;rico. De los 5 portales que han recibido la m&#x00E1;xima puntuaci&#x00F3;n por parte de los codificadores, uno de los m&#x00E1;s atractivos es el del municipio de &#x00C1;vila (<xref ref-type="fig" rid="F1">Figura 1</xref>).</p>
			
			
					<fig id="F1">
						<label>Figura 1</label>
						<caption>
							<title>Captura de pantalla del portal web municipal de &#x00C1;vila [www.avila.es]</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F1.jpg"/>
					</fig>
						
						

			<p>Pese a que la variable «calidad percibida» se basa en la experiencia subjetiva de los codificadores, ya da una primera muestra del estado global de la cuesti&#x00F3;n. En aras de ahondar en esta investigaci&#x00F3;n de forma objetiva y rigurosa, constan seguidamente todos los datos relativos al &#x00CD;ndice de Calidad Formal.</p>

			</sec>
			
			<sec id="S5.2">
			
			<title>5.2. Aproximaci&#x00F3;n inferencial: el &#x00CD;ndice de Calidad Formal</title>

			<p>Con el fin de obtener un valor fehaciente sobre el dise&#x00F1;o de los portales municipales, as&#x00ED; como de realizar una serie de comparaciones grupales, se procedi&#x00F3; a la creaci&#x00F3;n de un &#x00ED;ndice agregado partiendo de ciertos &#x00ED;tems del <italic>codebook</italic>. As&#x00ED; pues, y tomando como punto de partida la «calidad percibida», se configur&#x00F3; el «&#x00CD;ndice de Calidad Formal» (ICF) (<xref ref-type="table" rid="T5">Tabla V</xref>).</p>
			
			
					<fig id="T5">
						<label>Tabla V</label>
						<caption>
							<title>Asociaci&#x00F3;n entre los aspectos del dise&#x00F1;o y la calidad percibida (r de Pearson)</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T5.jpg"/>
					</fig>
						
						

			<p>Las variables que componen el ICF, que correlacionan en mayor medida, y de manera estad&#x00ED;sticamente m&#x00E1;s significativa, con la calidad percibida, son: el Indicador de Elementos Audiovisuales, el tama&#x00F1;o de la fuente, la se&#x00F1;alizaci&#x00F3;n de palabras clave, el adecuado contraste entre la fuente y el fondo, el &#x00CD;ndice de Idiomas de los Contenidos Web, la apertura de los v&#x00ED;nculos, la presencia de enlaces a redes sociales, la existencia de un mapa web, la consistencia de la interfaz y la limpieza de la misma<xref ref-type="fn" rid="NOTE3">3</xref>. Todas estas variables son bien dicot&#x00F3;micas, bien cuantitativas con un rango de 0 a 1, raz&#x00F3;n por la cual el ICF tambi&#x00E9;n presenta dicho rango. Su fiabilidad es de: α<sub>c</sub> =.40<xref ref-type="fn" rid="NOTE4">4</xref>; y los valores descriptivos muestrales son: M (ICF)=.61; DT=.15.</p>

			<p>En las pr&#x00F3;ximas p&#x00E1;ginas figuran, como se adelant&#x00F3; anteriormente, una serie de comparaciones establecidas en funci&#x00F3;n de tres criterios: el regional, el demogr&#x00E1;fico y el geogr&#x00E1;fico. Se utilizaron las pruebas estad&#x00ED;sticas del an&#x00E1;lisis de la varianza (ANOVA) y de la <italic>t</italic> de Student porque son las que permiten comparar medias (la primera, de tres o m&#x00E1;s grupos de casos; y la segunda, de dos grupos &#x00FA;nicamente).</p>

			<p>As&#x00ED; pues, y partiendo de la variable «n&#x00FA;mero de la provincia» a la cual pertenece el municipio, se recodificaron los sitios web siguiendo un criterio regional: las Comunidades Aut&#x00F3;nomas en que se divide el pa&#x00ED;s. De esta manera, se pas&#x00F3; de tener 50 provincias a 17 autonom&#x00ED;as, que constan en la <xref ref-type="fig" rid="F2">figura 2</xref> junto a los promedios que presentan en cuanto al ICF. Seg&#x00FA;n los guarismos reflejados en dicha figura, y gracias al an&#x00E1;lisis de la varianza (ANOVA), se percibe la existencia de diferencias significativas en lo referente a las medias del ICF seg&#x00FA;n las autonom&#x00ED;as [<italic>F</italic> (16, 483)=3.491, <italic>p</italic>&lt;.001]. A partir de la prueba <italic>post hoc</italic> T3 de Dunnett, se observ&#x00F3; que las diferencias m&#x00E1;s significativas se dan entre la Comunidad Valenciana y Asturias con respecto tanto a Castilla-La Mancha como a Castilla y Le&#x00F3;n (<italic>p</italic>&lt;.004).</p>
			
			
					<fig id="F2">
						<label>Figura 2</label>
						<caption>
							<title>Promedios del ICF en funci&#x00F3;n de las comunidades aut&#x00F3;nomas (ANOVA)</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F2.jpg"/>
					</fig>
						
						

			<p>Por otra parte, tomando esta vez como referencia la variable correspondiente al «n&#x00FA;mero de habitantes del municipio», establecimos una tipolog&#x00ED;a de sitios fundamentada en este criterio demogr&#x00E1;fico. As&#x00ED; pues, solicitamos al programa SPSS que dividiese la muestra en 7 grupos iguales para poder determinar los siguientes tipos de poblaci&#x00F3;n: muy peque&#x00F1;a (desde 1.008 habitantes hasta 1.496), peque&#x00F1;a (desde 1.497 hasta 2.406), algo peque&#x00F1;a (desde 2.407 hasta 3.537), mediana (desde 3.538 hasta 5.800), algo grande (desde 5.801 hasta 13.760), grande (desde 13.761 hasta 40.774) y, por &#x00FA;ltimo, muy grande (desde 40.775 hasta 3.207.247 habitantes, <xref ref-type="table" rid="T6">Tabla VI</xref>).</p>

			<p>En t&#x00E9;rminos demogr&#x00E1;ficos, los promedios correspondientes al ICF son los que aparecen en la <xref ref-type="table" rid="T6">tabla VI</xref>.</p>
			
			
					<fig id="T6">
						<label>Tabla VI</label>
						<caption>
							<title>Promedios del ICF seg&#x00FA;n los tipos de poblaciones (ANOVA)</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T6.jpg"/>
					</fig>
						
						

			<p>Los promedios de la tabla revelan diferencias, claras y significativas, en cuanto al ICF seg&#x00FA;n los tipos de poblaci&#x00F3;n [<italic>F</italic> (6, 493)=12.473, <italic>p</italic>&lt;.001]. Con arreglo a la prueba <italic>post hoc</italic> de Scheffe, comprobamos que las diferencias m&#x00E1;s significativas se producen entre las poblaciones muy grandes y las muy peque&#x00F1;as, peque&#x00F1;as, algo peque&#x00F1;as y medianas (<italic>p</italic>&lt;.001), que comparten la misma letra sub&#x00ED;ndice en la tabla. Asimismo, se ha detectado una correlaci&#x00F3;n positiva, y estad&#x00ED;sticamente significativa, entre el ICF y la variable «n&#x00FA;mero de habitantes» [<italic>r</italic> (498)=.14, <italic>p</italic>&lt;.002]; lo cual da a entender que: cuanto mayor sea la localidad, mayor ser&#x00E1; la calidad formal de su portal web.</p>

			<p>Continuando con esta estrategia comparativa, el siguiente criterio empleado ha sido el geogr&#x00E1;fico, que ha dado lugar a dos versiones diferentes. La primera es la que compara provincias costeras frente a interiores. Por ende, y teniendo de nuevo como soporte la variable «n&#x00FA;mero de la provincia», se recodific&#x00F3; el total de los municipios en dos grupos: costa (N=220 sitios web) e interior (N=280 sitios web) (<xref ref-type="fig" rid="F3">Figura 3</xref>).</p>
			
			
					<fig id="F3">
						<label>Figura 3</label>
						<caption>
							<title>Promedios del ICF seg&#x00FA;n el criterio geogr&#x00E1;fico «Costa vs. Interior» (t de Student)</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F3.jpg"/>
					</fig>
						
						

			<p>A tenor de la prueba <italic>t</italic> de Student para muestras independientes, se aprecia la existencia de diferencias, estad&#x00ED;sticamente significativas, entre las localidades pertenecientes al litoral espa&#x00F1;ol y las emplazadas en el interior del pa&#x00ED;s con relaci&#x00F3;n al ICF [<italic>t</italic> (498)=2.071, <italic>p</italic>&lt;.039]; circunstancia que evidencia el mayor esfuerzo de los municipios costeros en cuidar el dise&#x00F1;o web de sus portales.</p>

			<p>Antes de proceder con la segunda comparaci&#x00F3;n en t&#x00E9;rminos geogr&#x00E1;ficos, es interesante parangonar los municipios costeros y los interiores en relaci&#x00F3;n a los idiomas extranjeros que emplean para mostrar sus contenidos y, en concreto, el ingl&#x00E9;s; idioma hegem&#x00F3;nico a nivel planetario. Por ende, ¿qu&#x00E9; municipios abogan m&#x00E1;s por su empleo? V&#x00E9;ase la <xref ref-type="table" rid="T7">tabla VII</xref> (de contingencia) como soluci&#x00F3;n al interrogante, donde se observa que son los municipios costeros los que se sirven del ingl&#x00E9;s en mayor medida, ya que el 42.72% de localidades litorales aprovechan esta alternativa, frente al 17.85% de ayuntamientos de interior. En este sentido, cabe afirmar que existe una asociaci&#x00F3;n estad&#x00ED;sticamente significativa entre mostrar la informaci&#x00F3;n en este idioma y la ubicaci&#x00F3;n geogr&#x00E1;fica del municipio [χ<xref ref-type="fn" rid="NOTE2">2</xref>(1, N=500)=37.16, p&lt;.001].</p>
			
			
					<fig id="T7">
						<label>Tabla VII</label>
						<caption>
							<title>Relaci&#x00F3;n entre el empleo del ingl&#x00E9;s en los contenidos y la ubicaci&#x00F3;n geogr&#x00E1;fica de los municipios: Costa vs. Interior (% columna)</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T7.jpg"/>
					</fig>
						
						

			<p>La segunda comparaci&#x00F3;n, desde el punto de vista geogr&#x00E1;fico, implic&#x00F3; la creaci&#x00F3;n de 5 bloques territoriales en los que se ha dividido la superficie nacional; esto es, se han agrupado las provincias pertenecientes al noroeste, noreste, centro, suroeste y sureste del pa&#x00ED;s (<xref ref-type="table" rid="T8">Tabla VIII</xref>).</p>
			
			
					<fig id="T8">
						<label>Tabla VIII</label>
						<caption>
							<title>Promedios del ICF seg&#x00FA;n los bloques o cuadrantes geogr&#x00E1;ficos (ANOVA)</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T8.jpg"/>
					</fig>
						
						

			<p>Ci&#x00F1;&#x00E9;ndonos a los datos que desprende el ICF en funci&#x00F3;n de los bloques geogr&#x00E1;ficos se puede constatar, gracias a un an&#x00E1;lisis de la varianza (ANOVA), que existen diferencias significativas entre ellos [<italic>F</italic> (4, 495)=2.982, <italic>p</italic>&lt;.019]. Concretamente, y tras la prueba <italic>post hoc</italic> de Scheffe, comprobamos que las diferencias m&#x00E1;s significativas se producen entre los portales municipales del suroeste y los del centro (<italic>p</italic>&lt;.044), que comparten la misma letra sub&#x00ED;ndice en la tabla.</p>

		</sec>
			
		</sec>
			
		<sec id="S6">
			
			<title>6. CONCLUSIONES</title>

			<p>En primera instancia interpretaremos, sustantiva y ordenadamente, los resultados obtenidos en cada uno de los elementos nucleares del dise&#x00F1;o web. De esta forma, el objetivo primigenio de nuestro trabajo ser&#x00E1; cubierto, dando respuesta, adem&#x00E1;s, a la primera pregunta de investigaci&#x00F3;n planteada.</p>

			<p>En t&#x00E9;rminos de apariencia visual, fueron cuantificados una serie de aspectos relacionados con las fotograf&#x00ED;as, las animaciones y los v&#x00ED;deos presentes en la p&#x00E1;gina de inicio, que es el escaparate de la sede al mundo y su secci&#x00F3;n m&#x00E1;s visitada. Tras el an&#x00E1;lisis, se refrendaba que el elemento visual m&#x00E1;s abundante es el fotogr&#x00E1;fico, presente en la pr&#x00E1;ctica totalidad de los casos. Por lo habitual, el n&#x00FA;mero de fotograf&#x00ED;as oscila entre uno y tres, evitando, as&#x00ED;, el abigarramiento de im&#x00E1;genes en las <italic>home pages</italic>. A&#x00F1;adimos, tambi&#x00E9;n, que los elementos fotogr&#x00E1;ficos suelen estar emplazados bien en la parte superior, bien en la central; opciones que otorgan una notable jerarqu&#x00ED;a al componente visual. En cuanto a los distintos tipos de contenidos que pueden reflejar las fotograf&#x00ED;as, los m&#x00E1;s recurrentes son el entorno cultural tangible, seguido a corta distancia del factor humano; es decir, los municipios se sirven de sus activos materiales y de sus gentes para fomentar, a nivel visual, su imagen. Igualmente, aprovechan el valor del componente fotogr&#x00E1;fico para cautivar a los posibles visitantes que inspeccionan sus portales web, ya que, en m&#x00E1;s de la mitad de los casos, gozan de galer&#x00ED;as fotogr&#x00E1;ficas que incluyen im&#x00E1;genes de las localidades, a modo de postales.</p>

			<p>Con respecto al cromatismo, hay que subrayar que el color que impera como fondo de pantalla es el blanco; mientras que, para el texto informativo, priman el negro y el gris, facilitando un buen contraste entre la fuente y el fondo. En cuanto al men&#x00FA;, el cromatismo est&#x00E1; mucho m&#x00E1;s atomizado, aunque el azul y el verde destacan sobre los dem&#x00E1;s. De forma intuitiva, se puede afirmar que el azul evoca el mar, la costa; y el verde remite a la naturaleza, al campo. No resulta extra&#x00F1;o, pues, que buena parte de los municipios costeros aboguen por el azul como el color que personaliza el <italic>look &amp; feel</italic> de sus portales, mientras que el verde sea la opci&#x00F3;n m&#x00E1;s habitual en municipios de interior o rurales.</p>

			<p>En lo concerniente a la AI, se tiende a potenciar la legibilidad del texto mediante el empleo de tipograf&#x00ED;as de palo seco, m&#x00E1;s c&#x00F3;modamente legibles en pantalla que las tipograf&#x00ED;as con serifa. En cuanto al tama&#x00F1;o de la fuente, siete de cada diez sedes optan por la mediana, oscilante entre los 10 y 12 puntos; a saber, el tama&#x00F1;o ideal para una persona con unas capacidades visuales normales, pues un tama&#x00F1;o menor ser&#x00ED;a dif&#x00ED;cilmente legible y uno mayor resultar&#x00ED;a est&#x00E9;ticamente desafortunado. La lectura de la informaci&#x00F3;n de los portales web se ve facilitada por el empleo recurrente de t&#x00ED;tulos o titulares en las p&#x00E1;ginas que componen el sitio, pero es obstaculizada por la poca se&#x00F1;alizaci&#x00F3;n de ciertas palabras clave, y por la primac&#x00ED;a de los p&#x00E1;rrafos largos que entorpecen la lectura en pantalla.</p>

			<p>En cuanto a los idiomas, sorprende que no todos los sitios web posibiliten inspeccionar sus contenidos en castellano. En Espa&#x00F1;a conviven cuatro lenguas oficiales: el catal&#x00E1;n, el euskera, el gallego y el propio castellano; pero es sorprendente que en algunas de las regiones con idioma propio se desestime el uso del com&#x00FA;n a todo el territorio. Esta circunstancia podr&#x00ED;a ser entendida como una fuerte expresi&#x00F3;n de la identidad regional, reforzada por el porcentaje de sitios que emplean el idioma cooficial de su comunidad aut&#x00F3;noma como opci&#x00F3;n en la lectura de la informaci&#x00F3;n. Por otra parte, el nivel de idiomas extranjeros (en especial, en lo referente al ingl&#x00E9;s) es claramente insuficiente. Si los municipios de Espa&#x00F1;a desean atraer, por caso, a turistas internacionales, deben esforzarse en mostrar sus atractivos en el idioma hegem&#x00F3;nico a nivel planetario, tal y como parecen haber asumido casi la mitad de las localidades litorales (aunque no as&#x00ED; las del interior de la geograf&#x00ED;a espa&#x00F1;ola). De otra manera, el alcance de su industria tur&#x00ED;stica se limitar&#x00E1; m&#x00E1;s bien al espectro nacional o, a lo sumo, latinoamericano.</p>

			<p>Aludiendo ahora a los v&#x00ED;nculos y enlaces, queremos destacar los relacionados con la Web 2.0 y, muy especialmente, con las redes sociales, presentes en la mitad de los sitios. Si tenemos en cuenta, por una parte, el nivel de madurez en que se encuentra la Web Social o Colaborativa y, por otra parte, el poder que ostentan en la propagaci&#x00F3;n de la informaci&#x00F3;n (ya que, hoy en d&#x00ED;a, una gran parte de la poblaci&#x00F3;n mundial est&#x00E1; presente en el ciberespacio gracias a la tenencia de distintos perfiles), resulta coherente recalcar la necesidad de que los municipios realicen un mayor esfuerzo no s&#x00F3;lo por estar en, sino tambi&#x00E9;n por interactuar con, las redes sociales.</p>

			<p>Para finalizar con los elementos constitutivos del dise&#x00F1;o nos topamos con la usabilidad, supeditada, a su vez, a la navegaci&#x00F3;n y a la interfaz. Como variables integradas en la navegaci&#x00F3;n, cabe decir que el men&#x00FA; de contenidos suele ser simple, presentando un &#x00FA;nico nivel de categor&#x00ED;as principales; adem&#x00E1;s, y por norma general, es claro y visible, figurando bien en la parte superior, bien en el margen izquierdo. Estos rasgos hablan del correcto planteamiento general del men&#x00FA;, que acostumbra a apoyarse en un mapa web y en un motor de b&#x00FA;squeda como herramientas complementarias para una &#x00E1;gil inspecci&#x00F3;n de los contenidos a cargo del usuario.</p>

			<p>A colaci&#x00F3;n de la interfaz, predominan la consistencia, as&#x00ED; como la sencillez y la armon&#x00ED;a. En t&#x00E9;rminos de calidad percibida, no obstante, se observa que tiende a ser insuficiente, ya que su promedio queda claramente por debajo del punto medio te&#x00F3;rico de la escala en que fue medida, de 1 a 5 puntos de valoraci&#x00F3;n.</p>

			<p>Una vez perge&#x00F1;ado cada uno de los elementos constituyentes del dise&#x00F1;o web, es momento ahora de hacer referencia al ICF, que condensa, por s&#x00ED; mismo, los principales rasgos tenidos en cuenta en nuestro an&#x00E1;lisis. Su promedio llega a «.61»; un dato que manifiesta un dise&#x00F1;o web con amplio margen de mejora teniendo en cuenta su rango (0–1). Por expresarlo de otra forma, la calificaci&#x00F3;n de los portales alcanza el aprobado; hecho que debe invitar a los responsables de estos servicios a practicar un <italic>restyling</italic> para regenerar y optimizar sus sedes.</p>

			<p>Y es que, como anteriormente precis&#x00E1;bamos, la importancia del dise&#x00F1;o es innegable en tanto que modela la interacci&#x00F3;n entre la aplicaci&#x00F3;n y los usuarios (Hassan y otros, <xref ref-type="bibr" rid="CIT22">2004</xref>). Asimismo, debido a que un buen dise&#x00F1;o proyecta una buena imagen (Gullikson y otros, <xref ref-type="bibr" rid="CIT20">1999</xref>), los entes locales deben esmerarse en cuidar lo m&#x00E1;ximo posible la factura t&#x00E9;cnica de sus portales, que son, adem&#x00E1;s de una de carta de presentaci&#x00F3;n, la puerta de acceso virtual a sus dependencias. En este sentido, son los municipios de mayor tama&#x00F1;o poblacional los que gozan de portales web de una notable calidad formal; mientras que, a nivel territorial, son las zonas costeras las que se preocupan en mayor medida por fomentar una mejor imagen hacia el exterior. Asimismo, y contradiciendo la l&#x00F3;gica de las brechas digitales (que dictamina que los territorios del norte est&#x00E1;n, por norma general, m&#x00E1;s desarrollados tecnol&#x00F3;gicamente que los del sur), es el cuadrante suroeste de Espa&#x00F1;a el que goza de unas sedes web m&#x00E1;s pulidas formalmente.</p>

			<p>Por &#x00FA;ltimo, y desde un punto de vista metodol&#x00F3;gico, queda manifiesta la utilidad del an&#x00E1;lisis de contenido como t&#x00E9;cnica para la evaluaci&#x00F3;n de los rasgos formales de sitios web. A diferencia de otro tipo de aproximaciones, como pueden ser las evaluaciones heur&#x00ED;sticas, este m&#x00E9;todo se caracteriza por ser sistem&#x00E1;tico, objetivo y cuantitativo, adem&#x00E1;s de supeditarse a ciertas pautas de acreditan su validez y consistencia como, por caso, el chequeo de la fiabilidad intercodificadores. Por tanto, y habida cuenta de la ingente cantidad de propuestas anal&#x00ED;ticas que se desprende de la literatura cient&#x00ED;fica, entendemos que la detallada en este trabajo, deudora de las Ciencias de la Comunicaci&#x00F3;n, puede suponer una interesante referencia para otros estudios que examinen una muestra de sedes en Internet, y lo hagan no s&#x00F3;lo a partir de su dimensi&#x00F3;n informativa, sino tambi&#x00E9;n desde el punto de vista de su dise&#x00F1;o.</p>
								
		</sec>
			

	</body>

	<back>
	
		<ack>
			<title>AGRADECIMIENTOS</title>

			<p>Este trabajo ha sido financiado por la Fundaci&#x00F3;n Santa Mar&#x00ED;a la Real del Patrimonio Hist&#x00F3;rico (CIF G–34147827). Igualmente, queremos agradecer su colaboraci&#x00F3;n en esta investigaci&#x00F3;n a Isabel Rodr&#x00ED;guez de Dios, Luc&#x00ED;a Alejandra S&#x00E1;nchez Nuevo y Laura Arranz Hern&#x00E1;ndez, por su apoyo en la codificaci&#x00F3;n de los sitios web de la muestra de estudio.</p>

			<p><bold>ACKNOWLEDGEMENTS</bold></p>

			<p><italic>This work was funded by the Foundation Santa Mar&#x00ED;a la Real del Patrimonio Hist&#x00F3;rico (CIF G-34147827). We also want to thank their assistance in this research to Isabel Rodr&#x00ED;guez de Dios, Luc&#x00ED;a Alejandra S&#x00E1;nchez Nuevo and Laura Arranz Hern&#x00E1;ndez, for their support of the websites codification of the study sample.</italic></p>
			
		</ack>
	
		<sec id="notas">
			<title>NOTAS</title>
		
			<fn-group>
		
				<fn id="NOTE1"><label>1</label>
					<p>Para el c&#x00E1;lculo del margen de error que supon&#x00ED;a la muestra seleccionada de 500 sitios web acudimos al siguiente enlace: <uri>www.netquest.com</uri> [01/06/2015].</p>
				</fn>
				
				<fn id="NOTE2"><label>2</label>
					<p>Sitio web personal de Andrew F. Hayes: <uri>www.afhayes.com</uri>.</p>
				</fn>
				
				<fn id="NOTE3"><label>3</label>
					<p>Algunas de las variables que componen el ICF han sido recodificadas y/o calculadas en el SPSS, como por caso: el Indicador de Elementos Audiovisuales, generado a partir de la recodificaci&#x00F3;n de las variables «n&#x00FA;mero de fotograf&#x00ED;as», «n&#x00FA;mero de animaciones» y «n&#x00FA;mero de v&#x00ED;deos», y su consiguiente suma; el «tama&#x00F1;o de la fuente», tambi&#x00E9;n recodificada para que presentase un rango de 0 a 1; y el &#x00CD;ndice de Idiomas de los Contenidos Web, creado a partir de la computaci&#x00F3;n de los 7 idiomas contemplados en el libro de c&#x00F3;digos (α<sub>c</sub>=.75).</p>
				</fn>
				
				<fn id="NOTE4"><label>4</label>
					<p>La circunstancia que puede justificar la baja fiabilidad, o consistencia interna, del ICF (α<sub>c</sub>=.40) se debe al hecho de estar compuesto por elementos muy heterog&#x00E9;neos entre s&#x00ED;, relativos a los conceptos de apariencia visual, AI y usabilidad que, a su vez, conforman un constructo complejo como es el dise&#x00F1;o web.</p>
				</fn>
				
			</fn-group>
		</sec>
	
	
	
		<ref-list>
			<title>REFERENCIAS</title>
				<ref id="CIT01">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Baeza-Yates</surname>
					  <given-names>R.</given-names>	  
				  </name>
				  <name>
					  <surname>Rivera</surname>
					  <given-names>C.</given-names>	  
				  </name>
				  <name>
					  <surname>Velasco</surname>
					  <given-names>J.</given-names>	  
				  </name>				  				  
			  </person-group>
			  <year>2004</year>
			  <article-title>Arquitectura de la informaci&#x00F3;n y usabilidad en la web</article-title>
			  <source>El Profesional de la Informaci&#x00F3;n</source>
			  <volume>13</volume>
			  <issue>3</issue>
			  <fpage>168</fpage>
			  <lpage>178</lpage>
			  <comment><uri>http://www.elprofesionaldelainformacion.com/contenidos/2004/mayo/1.pdf</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT02"> 
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Baloglu</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Pekcan</surname>
					  <given-names>Y. A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2006</year>
			  <article-title>The website design and Internet site marketing practices of upscale and luxury hotels in Turkey</article-title>
			  <source>Tourism Management</source>
			  <volume>27</volume>
			  <fpage>171</fpage>
			  <lpage>176</lpage>
			  <comment><uri>https://doi.org/10.1016/j.tourman.2004.07.003</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT03">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Bardin</surname>
					  <given-names>L.</given-names>	  
				  </name>
			  </person-group>
			  <year>1996</year>
			  <source>El an&#x00E1;lisis de contenido</source>
			  <publisher-loc>Madrid</publisher-loc>
			  <publisher-name>Ediciones Akal Universitaria</publisher-name>
			</element-citation>
			</ref>

			<ref id="CIT04">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Berger</surname>
					  <given-names>A. A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2000</year>
			  <source>Media and communication research methods. An introduction to qualitative and quantitative approaches</source>
			  <publisher-loc>Thousand Oaks, California</publisher-loc>
			  <publisher-name>Sage Publications</publisher-name>
			</element-citation>
			</ref>

			<ref id="CIT05">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Bernal</surname>
					  <given-names>A. I.</given-names>	  
				  </name>
			  </person-group>
			  <year>2008</year>
			  <article-title>Preferencias de la informaci&#x00F3;n en Internet. Una nueva propuesta metodol&#x00F3;gica, ensayada con un grupo de universitarios</article-title>
			  <source>Revista Latina de Comunicaci&#x00F3;n Social</source>
			  <volume>63</volume>
			  <fpage>189</fpage>
			  <lpage>219</lpage> 
			</element-citation>
			</ref>

			<ref id="CIT06">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Cabrera</surname>
					  <given-names>M. &#x00C1;.</given-names>	  
				  </name>
			  </person-group>
			  <year>2009</year>
			  <article-title>El dise&#x00F1;o de la prensa digital espa&#x00F1;ola en el contexto de la convergencia tecnol&#x00F3;gica. La identidad visual del ciberperiodismo</article-title>
			  <source>Revista Latina de Comunicaci&#x00F3;n Social</source>
			  <volume>64</volume>
			  <fpage>766</fpage>
			  <lpage>786</lpage>
			</element-citation>
			</ref>

			<ref id="CIT07">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Callahan</surname>
					  <given-names>E.</given-names>	  
				  </name>
			  </person-group>
			  <year>2005</year>
			  <article-title>Interface design and culture</article-title>
			  <source>Annual Review of Information Science and Technology</source>
			  <volume>39</volume>
			  <issue>1</issue>
			  <fpage>255</fpage>
			  <lpage>310</lpage>
			  <comment><uri>https://doi.org/10.1002/aris.1440390114</uri></comment>  
			</element-citation>
			</ref>

			<ref id="CIT08">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Cardoso de Miranda</surname>
					  <given-names>E. A.</given-names>	  
				  </name>
				  <name>
					  <surname>Mu&#x00F1;oz Ca&#x00F1;avate</surname>
					  <given-names>A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2015</year>
			  <article-title>Los sitios web como servicios de informaci&#x00F3;n al ciudadano: un estudio sobre los 308 ayuntamientos de Portugal</article-title>
			  <source>Anales de Documentaci&#x00F3;n</source>
			  <volume>18</volume>
			  <issue>1</issue>
			  <fpage>1</fpage>
			  <lpage>15</lpage>
			  <comment><uri>https://doi.org/10.6018/analesdoc.18.1.212681</uri></comment> 
			</element-citation>
			</ref>


			<ref id="CIT09">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Cebi</surname>
					  <given-names>S.</given-names>	  
				  </name>
			  </person-group>
			  <year>2013</year>
			  <article-title>Determining importance degrees of website design parameters based on interactions and types of websites</article-title>
			  <source>Decision Support Systems</source>
			  <volume>54</volume>
			  <issue>2</issue>
			  <fpage>1030</fpage>
			  <lpage>1043</lpage>
			  <comment><uri>https://doi.org/10.1016/j.dss.2012.10.036</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT10"> 
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Cha&#x00ED;n</surname>
					  <given-names>C.</given-names>	  
				  </name>
				  <name>
					  <surname>Mu&#x00F1;oz Ca&#x00F1;avate</surname>
					  <given-names>A.</given-names>	  
				  </name>
				  <name>
					  <surname>M&#x00E1;s</surname>
					  <given-names>A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2008</year>
			  <article-title>La gesti&#x00F3;n de la informaci&#x00F3;n en las sedes web de los ayuntamientos espa&#x00F1;oles</article-title>
			  <source>Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica</source>
			  <volume>31</volume>
			  <issue>4</issue>
			  <fpage>612</fpage>
			  <lpage>638</lpage>
			</element-citation>
			</ref>

			<ref id="CIT11">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Cochran</surname>
					  <given-names>W. G.</given-names>	  
				  </name>
			  </person-group>
			  <year>1987</year>
			  <source>T&#x00E9;cnicas de muestreo</source>
			  <publisher-loc>M&#x00E9;xico, D. F.</publisher-loc>
			  <publisher-name>CECSA</publisher-name>
			</element-citation>
			</ref>

			<ref id="CIT12">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Codina</surname>
					  <given-names>L.</given-names>	  
				  </name>
			  </person-group>
			  <year>2000</year>
			  <article-title>Evaluaci&#x00F3;n de recursos digitales en l&#x00ED;nea: conceptos, indicadores y m&#x00E9;todos</article-title>
			  <source>Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica</source>
			  <volume>23</volume>
			  <issue>1</issue>
			  <fpage>9</fpage>
			  <lpage>44</lpage>
			  <comment><uri>https://doi.org/10.3989/redc.2000.v23.i1.315</uri></comment> 
			</element-citation>
			</ref>

			<ref id="CIT13">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Coursaris</surname>
					  <given-names>C. K.</given-names>	  
				  </name>
				  <name>
					  <surname>Kim</surname>
					  <given-names>D. J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2011</year>
			  <article-title>A meta-analytical review of empirical mobile usability studies</article-title>
			  <source>Journal of Usability Studies</source>
			  <volume>6</volume>
			  <issue>3</issue>
			  <fpage>117</fpage>
			  <lpage>171</lpage>
			</element-citation>
			</ref>

			<ref id="CIT14">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Crovi</surname>
					  <given-names>D.</given-names>	  
				  </name>
				  <name>
					  <surname>Aguirre</surname>
					  <given-names>D.</given-names>	  
				  </name>
				  <name>
					  <surname>Apodaca</surname>
					  <given-names>J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2002</year>
			  <article-title>P&#x00E1;gina web. Una propuesta para su an&#x00E1;lisis</article-title>
			  <source>Revista Mexicana de Ciencias Pol&#x00ED;ticas y Sociales</source>
			  <volume>145</volume>
			  <issue>185</issue>
			  <fpage>167</fpage>
			  <lpage>185</lpage>
			</element-citation>
			</ref>

			<ref id="CIT15">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>de Moragas</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2015</year>
			  <article-title>Cruce de caminos. Tecnolog&#x00ED;as de la comunicaci&#x00F3;n y convivencia en la ciudad global</article-title>
			  <source>Revista Telos</source>
			  <volume>100</volume>
			  <fpage>78</fpage>
			  <lpage>80</lpage>
			</element-citation>
			</ref>

			<ref id="CIT16">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Fern&#x00E1;ndez-Cavia</surname>
					  <given-names>J.</given-names>	  
				  </name>
				  <name>
					  <surname>Rovira</surname>
					  <given-names>C.</given-names>	  
				  </name>
				  <name>
					  <surname>D&#x00ED;az-Luque</surname>
					  <given-names>P.</given-names>	  
				  </name>
				  <name>
					  <surname>Cavaller</surname>
					  <given-names>V.</given-names>	  
				  </name>
			  </person-group>
			  <year>2014</year>
			  <article-title>Web quality index (WQI) for official tourist destination websites. Proposal for an assessment system</article-title>
			  <source>Tourism Management Perspectives</source>
			  <volume>9</volume>
			  <fpage>5</fpage>
			  <lpage>13</lpage>
			  <comment><uri>https://doi.org/10.1016/j.tmp.2013.10.003</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT17">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Fern&#x00E1;ndez-Cavia</surname>
					  <given-names>J.</given-names>	  
				  </name>
				  <name>
					  <surname>Vinyals</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>L&#x00F3;pez P&#x00E9;rez</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2013</year>
			  <article-title>Calidad de los sitios web tur&#x00ED;sticos oficiales de las comunidades aut&#x00F3;nomas espa&#x00F1;olas</article-title>
			  <source>BiD: Textos universitaris de biblioteconomia i documentaci&#x00F3;</source>
			  <volume>31</volume>
			  <issue>3</issue>
			  <comment>en l&#x00ED;nea</comment>
			</element-citation>
			</ref>

			<ref id="CIT18">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Garc&#x00ED;a</surname>
					  <given-names>R.</given-names>	  
				  </name>
				  <name>
					  <surname>Botella</surname>
					  <given-names>F.</given-names>	  
				  </name>
				  <name>
					  <surname>Marcos</surname>
					  <given-names>M. C.</given-names>	  
				  </name>
			  </person-group>
			  <year>2010</year>
			  <article-title>Hacia la arquitectura de la informaci&#x00F3;n 3.0: pasado, presente y futuro</article-title>
			  <source>El Profesional de la Informaci&#x00F3;n</source>
			  <volume>19</volume>
			  <issue>4</issue>
			  <fpage>339</fpage>
			  <lpage>347</lpage>
			  <comment><uri>https://doi.org/10.3145/epi.2010.jul.02</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT19">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Garc&#x00ED;a G&#x00F3;mez</surname>
					  <given-names>J. C.</given-names>	  
				  </name>
			  </person-group>
			  <year>2004</year>
			  <article-title>Usabilidad de las p&#x00E1;ginas de inicio de los diarios digitales espa&#x00F1;oles</article-title>
			  <source>Scire</source>
			  <volume>10</volume>
			  <issue>2</issue>
			  <fpage>123</fpage>
			  <lpage>136</lpage>
			</element-citation>
			</ref>

			<ref id="CIT20">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Gullikson</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Blades</surname>
					  <given-names>R.</given-names>	  
				  </name>
				  <name>
					  <surname>Bragdon</surname>
					  <given-names>M.</given-names>	  
				  </name>
				  <name>
					  <surname>McKibbon</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Sparling</surname>
					  <given-names>M.</given-names>	  
				  </name>
				  <name>
					  <surname>Toms</surname>
					  <given-names>E. G.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>1999</year>
			  <article-title>The impact of information architecture on academic web site usability</article-title>
			  <source>The Electronic Library</source>
			  <volume>17</volume>
			  <issue>5</issue>
			  <fpage>293</fpage>
			  <lpage>304</lpage>
			  <comment><uri>https://doi.org/10.1108/02640479910330714</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT21">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Hassan</surname>
					  <given-names>Y.</given-names>	  
				  </name>
			  </person-group>
			  <year>2006</year>
			  <article-title>Factores del dise&#x00F1;o web orientado a la satisfacci&#x00F3;n y no-frustraci&#x00F3;n de uso</article-title>
			  <source>Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica</source>
			  <volume>40</volume>
			  <issue>2</issue>
			  <fpage>239</fpage>
			  <lpage>257</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT22">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Hassan</surname>
					  <given-names>Y.</given-names>	  
				  </name>
				  <name>
					  <surname>Mart&#x00ED;n</surname>
					  <given-names>F. J.</given-names>	  
				  </name>
				  <name>
					  <surname>Iazza</surname>
					  <given-names>G.</given-names>	  
				  </name>
			  </person-group>
			  <year>2004</year>
			  <article-title>Dise&#x00F1;o web centrado en el usuario: usabilidad y arquitectura de la informaci&#x00F3;n</article-title>
			  <source>Hipertext</source>
			  <volume>40</volume>
			  <comment>Recuperado el 22/09/2011. Disponible en: <uri>http://raco.cat/index.php/Hipertext/article/view/57783</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT23">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Hayes</surname>
					  <given-names>A. F.</given-names>	  
				  </name>
				  <name>
					  <surname>Krippendorff</surname>
					  <given-names>K.</given-names>	  
				  </name>
			  </person-group>
			  <year>2007</year>
			  <article-title>Answering the call for a standard reliability measure for coding data</article-title>
			  <source>Communication methods and measures</source>
			  <volume>1</volume>
			  <issue>1</issue>
			  <fpage>77</fpage>
			  <lpage>89</lpage>
			  <comment><uri>https://doi.org/10.1080/19312450709336664</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT24">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Henry</surname>
					  <given-names>G. T.</given-names>	  
				  </name>
			  </person-group>
			  <year>1990</year>
			  <source>Practical sampling</source>
			  <publisher-loc>Newbury Park, California</publisher-loc>
			  <publisher-name>Sage Publications</publisher-name>
			  <comment><uri>https://doi.org/10.4135/9781412985451</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT25">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Hermeking</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2006</year>
			  <article-title>Culture and Internet consumption: contributions from cross-cultural marketing and advertising research</article-title>
			  <source>Journal of Computer-Mediated Communication</source>
			  <volume>11</volume>
			  <issue>1</issue>
			  <fpage>192</fpage>
			  <lpage>216</lpage>
			  <comment><uri>https://doi.org/10.1111/j.1083-6101.2006.tb00310.x</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT26">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Huizingh</surname>
					  <given-names>E.</given-names>	  
				  </name>
			  </person-group>
			  <year>2000</year>
			  <article-title>The content and design of web sites: an empirical study</article-title>
			  <source>Information &#x0026; Management</source>
			  <volume>37</volume>
			  <fpage>123</fpage>
			  <lpage>134</lpage>
			  <comment><uri>https://doi.org/10.1016/S0378-7206(99)00044-0</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT27">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Igartua</surname>
					  <given-names>J. J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2006</year>
			  <source>M&#x00E9;todos cuantitativos de investigaci&#x00F3;n en comunicaci&#x00F3;n</source>
			  <publisher-loc>Barcelona</publisher-loc>
			  <publisher-name>Editorial Bosch</publisher-name>
			</element-citation>
			</ref>

			<ref id="CIT28">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Jim&#x00E9;nez Piano</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2001</year>
			  <article-title>Evaluaci&#x00F3;n de sedes web</article-title>
			  <source>Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica</source>
			  <volume>24</volume>
			  <issue>4</issue>
			  <fpage>405</fpage>
			  <lpage>432</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT29">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Karkin</surname>
					  <given-names>N.</given-names>	  
				  </name>
				  <name>
					  <surname>Janssen</surname>
					  <given-names>M.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>2014</year>
			  <article-title>Evaluating websites from a public value perspective: a review of Turkish local government websites</article-title>
			  <source>International Journal of Information Management</source>
			  <volume>34</volume>
			  <issue>3</issue>
			  <fpage>351</fpage>
			  <lpage>363</lpage>
			  <comment><uri>https://doi.org/10.1016/j.ijinfomgt.2013.11.004</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT30">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Kim</surname>
					  <given-names>H.</given-names>	  
				  </name>
				  <name>
					  <surname>Fesenmaier</surname>
					  <given-names>D. R.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>2008</year>
			  <article-title>Persuasive design of destination websites: an analysis of first impression</article-title>
			  <source>Journal of Travel Research</source>
			  <volume>20</volume>
			  <issue>40</issue>
			  <fpage>1</fpage>
			  <lpage>11</lpage>
			</element-citation>
			</ref>

			<ref id="CIT31">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Krippendorff</surname>
					  <given-names>K.</given-names>	  
				  </name>
			  </person-group>
			  <year>1990</year>
			  <source>Metodolog&#x00ED;a de an&#x00E1;lisis de contenido. Teor&#x00ED;a y pr&#x00E1;ctica</source>
			  <publisher-loc>Barcelona</publisher-loc>
			  <publisher-name>Paid&#x00F3;s Comunicaci&#x00F3;n</publisher-name>
			</element-citation>
			</ref>
			
			<ref id="CIT32">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Krippendorff</surname>
					  <given-names>K.</given-names>	  
				  </name>
			  </person-group>
			  <year>2004</year>
			  <article-title>Reliability in content analysis. Some common misconceptions and recommendations</article-title>
			  <source>Human Communication Research</source>
			  <volume>30</volume>
			  <issue>3</issue>
			  <fpage>411</fpage>
			  <lpage>433</lpage>
			  <comment><uri>https://doi.org/10.1111/j.1468-2958.2004.tb00738.x</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT33">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Krippendorff</surname>
					  <given-names>K.</given-names>	  
				  </name>
			  </person-group>
			  <year>2012</year>
			  <chapter-title>A dissenting view on so-called paradoxes of reliability coefficients</chapter-title>
			  <person-group person-group-type="editor">
				  <name>
					  <surname>Salmon</surname>
					  <given-names>C. T.</given-names>	  
				  </name>
			  </person-group>			  
			  <source>Communication Yearbook 36</source>
			  <publisher-loc>New York</publisher-loc>
			  <publisher-name>Routledge</publisher-name>
			  <fpage>481</fpage>
			  <lpage>499</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT34">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>L&#x00F3;pez del Ramo</surname>
					  <given-names>J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2010</year>
			  <article-title>Caracter&#x00ED;sticas estructurales de la web y su incidencia en la usabilidad. An&#x00E1;lisis del caso en los portales de la Comunidad de Madrid</article-title>
			  <source>Scire</source>
			  <volume>16</volume>
			  <issue>1</issue>
			  <fpage>81</fpage>
			  <lpage>92</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT35">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>L&#x00F3;pez Noguero</surname>
					  <given-names>F.</given-names>	  
				  </name>
			  </person-group>
			  <year>2002</year>
			  <article-title>El an&#x00E1;lisis de contenido como m&#x00E9;todo de investigaci&#x00F3;n</article-title>
			  <source>XXI Revista de Educaci&#x00F3;n</source>
			  <volume>4</volume>
			  <fpage>167</fpage>
			  <lpage>179</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT36">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Luciano</surname>
					  <given-names>R.</given-names>	  
				  </name>
				  <name>
					  <surname>Carniello</surname>
					  <given-names>M.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>2014</year>
			  <article-title>Tecnologia de informa&#x00E7;&#x00E3;o e comunica&#x00E7;&#x00E3;o na gest&#x00E3;o p&#x00FA;blica nos munic&#x00ED;pios do Sudoeste Goiano</article-title>
			  <source>Estudos em Comunica&#x00E7;&#x00E3;o</source>
			  <volume>17</volume>
			  <fpage>117</fpage>
			  <lpage>142</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT37">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>McMillan</surname>
					  <given-names>S. J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2000</year>
			  <article-title>The microscope and the moving target: the challenge of applying content analysis to the World Wide Web</article-title>
			  <source>Journalism and Mass Communication Quarterly</source>
			  <volume>77</volume>
			  <issue>1</issue>
			  <fpage>80</fpage>
			  <lpage>98</lpage>
			  <comment><uri>https://doi.org/10.1177/107769900007700107</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT38">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Miranda</surname>
					  <given-names>F. J.</given-names>	  
				  </name>
				  <name>
					  <surname>Sanguino</surname>
					  <given-names>R.</given-names>	  
				  </name>
				  <name>
					  <surname>Ba&#x00F1;eguil</surname>
					  <given-names>T. M.</given-names>	  
				  </name>				  				  
			  </person-group>
			  <year>2009</year>
			  <article-title>Quantitative assessment of European municipal websites</article-title>
			  <source>Internet Research</source>
			  <volume>19</volume>
			  <issue>4</issue>
			  <fpage>425</fpage>
			  <lpage>441</lpage>
			  <comment><uri>https://doi.org/10.1108/10662240910981380</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT39">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Morville</surname>
					  <given-names>P.</given-names>	  
				  </name>
				  <name>
					  <surname>Rosenfeld</surname>
					  <given-names>L.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>2002</year>
			  <source>Information architecture for the World Wide Web, Second Edition</source>
			  <publisher-name>O´Reilly Media</publisher-name>
			</element-citation>
			</ref>
			
			<ref id="CIT40">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Nathan</surname>
					  <given-names>R. J.</given-names>	  
				  </name>
				  <name>
					  <surname>Yeow</surname>
					  <given-names>P. H. P.</given-names>	  
				  </name>
				  <name>
					  <surname>Murugesan</surname>
					  <given-names>S.</given-names>	  
				  </name>				  				  
			  </person-group>
			  <year>2008</year>
			  <article-title>Key usability factors of service-oriented web sites for students: an empirical study</article-title>
			  <source>Online Information Review</source>
			  <volume>32</volume>
			  <issue>3</issue>
			  <fpage>302</fpage>
			  <lpage>324</lpage>
			  <comment><uri>https://doi.org/10.1108/14684520810889646</uri></comment>
			</element-citation>
			</ref>

			<ref id="CIT41">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Neuendorf</surname>
					  <given-names>K. A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2002</year>
			  <source>The content analysis guidebook</source>
			  <publisher-loc>Thousand Oaks, California</publisher-loc>
			  <publisher-name>Sage Publications</publisher-name>
			</element-citation>
			</ref>
			
			<ref id="CIT42">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Nielsen</surname>
					  <given-names>J.</given-names>	  
				  </name>
				  <name>
					  <surname>Loranger</surname>
					  <given-names>H.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>2006</year>
			  <source>Usabilidad. Prioridad en el dise&#x00F1;o web</source>
			  <publisher-loc>Madrid</publisher-loc>
			  <publisher-name>Ediciones Anaya Multimedia</publisher-name>
			</element-citation>
			</ref>
			
			<ref id="CIT43">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Pastor</surname>
					  <given-names>J. A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2010</year>
			  <article-title>Bases para un dise&#x00F1;o web integral a trav&#x00E9;s de la convergencia de la accesibilidad, usabilidad y arquitectura de la informaci&#x00F3;n</article-title>
			  <source>Scire</source>
			  <volume>16</volume>
			  <issue>1</issue>
			  <fpage>65</fpage>
			  <lpage>80</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT44">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>P&#x00E9;rez-Montoro</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2010</year>
			  <article-title>Arquitectura de la informaci&#x00F3;n en entornos web</article-title>
			  <source>El Profesional de la Informaci&#x00F3;n</source>
			  <volume>19</volume>
			  <issue>4</issue>
			  <fpage>333</fpage>
			  <lpage>337</lpage>
			  <comment><uri>https://doi.org/10.3145/epi.2010.jul.01</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT45">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Pi&#x00F1;eiro-Naval</surname>
					  <given-names>V.</given-names>	  
				  </name>
				  <name>
					  <surname>Igartua</surname>
					  <given-names>J. J.</given-names>	  
				  </name>				  
			  </person-group>
			  <year>2012</year>
			  <article-title>La difusi&#x00F3;n del patrimonio a trav&#x00E9;s de Internet. El caso de Castilla y Le&#x00F3;n</article-title>
			  <source>Cuadernos de Turismo</source>
			  <volume>30</volume>
			  <fpage>191</fpage>
			  <lpage>217</lpage>
			</element-citation>
			</ref>

			<ref id="CIT46">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Pi&#x00F1;eiro-Naval</surname>
					  <given-names>V.</given-names>	  
				  </name>
				  <name>
					  <surname>Igartua</surname>
					  <given-names>J. J.</given-names>	  	  
				  </name>
			  </person-group>
			  <year>2013</year>
			  <article-title>El an&#x00E1;lisis formal de sitios web y su papel en la promoci&#x00F3;n del e-turismo</article-title>
			  <source>Comunicaci&#x00F3;n. Revista Internacional de Comunicaci&#x00F3;n Audiovisual, Publicidad y Estudios Culturales</source>
			  <volume>1</volume>
			  <issue>11</issue>
			  <fpage>82</fpage>
			  <lpage>98</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT47">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Pi&#x00F1;eiro-Naval</surname>
					  <given-names>V.</given-names>	  
				  </name>
				  <name>
					  <surname>Igartua</surname>
					  <given-names>J. J.</given-names>	  	  
				  </name>
				  <name>
					  <surname>Rodr&#x00ED;guez-de-Dios</surname>
					  <given-names>I.</given-names>	  
				  </name>
			  </person-group>
			  <year>2015</year>
			  <article-title>La informaci&#x00F3;n tur&#x00ED;stica a escala local. Un an&#x00E1;lisis de contenido de los portales web municipales de Espa&#x00F1;a</article-title>
			  <source>Telos. Revista de Pensamiento sobre Comunicaci&#x00F3;n, Tecnolog&#x00ED;a y Sociedad</source>
			  <volume>102</volume>
			  <fpage>77</fpage>
			  <lpage>87</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT48">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Riffe</surname>
					  <given-names>D.</given-names>	  
				  </name>
				  <name>
					  <surname>Lacy</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Fico</surname>
					  <given-names>F. G.</given-names>	  
				  </name>				  				  
			  </person-group>
			  <year>1998</year>
			  <source>Analyzing media messages. Using quantitative content analysis in research</source>
			  <publisher-loc>Mahwah, New Jersey</publisher-loc>
			  <publisher-name>Lawrence Erlbaum Associates</publisher-name>
			</element-citation>
			</ref>
			
			<ref id="CIT49">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Shackel</surname>
					  <given-names>B.</given-names>	  
				  </name>
			  </person-group>
			  <year>2009</year>
			  <article-title>Usability: context, framework, definition, design and evaluation</article-title>
			  <source>Interacting with Computers</source>
			  <volume>21</volume>
			  <fpage>339</fpage>
			  <lpage>346</lpage>
			  <comment><uri>https://doi.org/10.1016/j.intcom.2009.04.007</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT50">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Singh</surname>
					  <given-names>S. N.</given-names>	  
				  </name>
				  <name>
					  <surname>Dalal</surname>
					  <given-names>N.</given-names>	  
				  </name>
				  <name>
					  <surname>Spears</surname>
					  <given-names>N.</given-names>	  
				  </name>				  				  
			  </person-group>
			  <year>2005</year>
			  <article-title>Understanding web home page perception</article-title>
			  <source>European Journal of Information Systems</source>
			  <volume>14</volume>
			  <fpage>288</fpage>
			  <lpage>302</lpage>
			  <comment><uri>https://doi.org/10.1057/palgrave.ejis.3000525</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT51">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Yates</surname>
					  <given-names>R.</given-names>	  
				  </name>
			  </person-group>
			  <year>2005</year>
			  <article-title>Web site accessibility and usability: towards more functional sites for all</article-title>
			  <source>Campus-Wide Information Systems</source>
			  <volume>22</volume>
			  <issue>4</issue>
			  <fpage>180</fpage>
			  <lpage>188</lpage>
			  <comment><uri>https://doi.org/10.1108/10650740510617494</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT52">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Zhao</surname>
					  <given-names>W.</given-names>	  
				  </name>
				  <name>
					  <surname>Massey</surname>
					  <given-names>B. L.</given-names>	  
				  </name>
				  <name>
					  <surname>Murphy</surname>
					  <given-names>J.</given-names>	  
				  </name>
				  <name>
					  <surname>Fang</surname>
					  <given-names>L.</given-names>	  
				  </name>				  				  				  
			  </person-group>
			  <year>2003</year>
			  <article-title>Cultural dimensions of website design and content</article-title>
			  <source>Prometheus</source>
			  <volume>21</volume>
			  <issue>1</issue>
			  <fpage>75</fpage>
			  <lpage>84</lpage>
			  <comment><uri>https://doi.org/10.1080/0810902032000051027</uri></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT53">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Zhou</surname>
					  <given-names>X.</given-names>	  
				  </name>
			  </person-group>
			  <year>2004</year>
			  <article-title>E-government in China: a content analysis of national and provincial web sites</article-title>
			  <source>Journal of Computer-Mediated Communication</source>
			  <volume>9</volume>
			  <issue>4</issue>
			  <comment>en l&#x00ED;nea. <uri>https://doi.org/10.1111/j.1083-6101.2004.tb00297.x</uri></comment>
			</element-citation>
			</ref>
			
		</ref-list>
		
		<app-group>
			<app>
				<title>ANEXO</title>
				
					<fig id="A1">
						<label>Anexo 1</label>
						<caption>
							<title>Esquema de categor&#x00ED;as que integran el libro de c&#x00F3;digos de la investigaci&#x00F3;n</title>
						</caption>
						<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/A1.jpg"/>
					</fig>
			</app>
		</app-group>
			
			
		
	</back>
</article>
