SciELO - Scientific Electronic Library Online

 
 número11Avaliação de Usabilidade: Uma Revisão Sistemática da LiteraturaMolecule: Sistema de organização e visualização de Tags índice de autoresíndice de assuntospesquisa de artigos
Home Pagelista alfabética de periódicos  

Serviços Personalizados

Journal

Artigo

Indicadores

Links relacionados

  • Não possue artigos similaresSimilares em SciELO

Compartilhar


RISTI - Revista Ibérica de Sistemas e Tecnologias de Informação

versão impressa ISSN 1646-9895

RISTI  no.11 Porto jun. 2013

http://dx.doi.org/10.4304/risti.11.45-59 

Análisis de usabilidad de cooperativas del sector de la fruta y aceite en el área de Lleida

 

Toni Granollers Saltiveri1, Eduard Cristóbal Fransi2, Yolanda Montegut Salla2

1 GRIHO research group. Escola Politècnica Superior. Universitat de Lleida. España. E-mail: antoni.granollers@udl.cat

2 Dept. de Administración de Empresas. Fac. de Derecho y Economía. Universitat de Lleida. España. E-mail: ecristobal@aegern.udl.cat, ymontegut@aegern.udl.cat

 

RESUMEN

El presente artículo muestra el proceso, la investigación y los resultados de un análisis de usabilidad en los sitios web de las cooperativas agroalimentarias del sector frutícola y oleícola de la provincia de Lleida. El estudio nace de la necesidad de analizar el estado de la presencia y uso de Internet en general y de la web en particular para una industria vital para la citada provincia. Ambos sectores, aceite y fruta dulce, son de vital importancia para la economía de esta zona.

La evaluación del espacio zonal de la página de inicio de la web y la evaluación heurística son las técnicas de evaluación utilizadas, pues ambas se adaptan a la amplia muestra a analizar. Una vez identificados los problemas y errores se aportan las posibles mejoras o soluciones a los problemas detectados.

Palabras-clave: Usabilidad, evaluación heurística, evaluación del espacio zonal, cooperativas agrarias.

 

ABSTRACT

This article shows the process, the research and the results of a usability analysis carried out in a set of fruit and olive-growing websites cooperatives. The study comes from the need of analyzing the presence and the use of the Internet and the Web for this vital industry in the province of Lleida (Spain). Both sectors, olive-oil and sweet fruit, are of vital importance to the economy of this area. The evaluation of the homepage spatial distribution of the site and the heuristc evaluation are the used techniques. Both cater to the large sample to be analyzed. Once the problems and errors have been identified, the possible improvements or solutions to the problems identified are proposed.

Keywords: Usability, evaluation, agricultural cooperatives.

 

1, Introducción

La aparición de Internet y el desarrollo de las Tecnologías de la Información y Comunicación (TIC), ha originado grandes cambios en la sociedad en general y en las empresas en particular, dando lugar a la llamada Sociedad de la Información. Se considera como un nuevo paradigma social que ofrece una gran oportunidad, en la medida que la mayoría de las personas se encuentren conectadas a través de cualquier dispositivo electrónico a los sistemas de telecomunicaciones, y más concretamente a Internet (Banegas, 2001; Laudon y Traver, 2001; Molla y Heeks, 2007).

Esta situación potencia de una manera casi ilimitada la posibilidad de disponer de información, y lo que aún es más importante, compartir el conocimiento. Dicha posibilidad afecta a todos los ámbitos, tanto a nivel social como económico, convirtiéndose en la expresión de la globalización, modernidad y progreso (Avgerou, 2008; Suárez, 2001).

A pesar de que las TIC están presentes en la actualidad en todos los sectores de producción y en la sociedad en general, el presente estudio se centra en un sector muy específico como es el de las cooperativas agroalimentarias de la provincia de Lleida por dos razones principales:

  • En primer lugar debido al peso económico y social que tienen las cooperativas en España. Según la Confederación de Cooperativas Agrarias de España, las cooperativas agrícolas representan una parte importante de la actividad económica en el sector agroalimentario español con una facturación de 18.322 millones de euros en 2010 (Sagarna, 2010). Las cooperativas agroalimentarias agrupan a 2.849 empresas y a 1.012.265 miembros en todo del país. Estas cooperativas proporcionan ocupación a más de 79.567 trabajadores, mayoritariamente en áreas rurales, representando un motor económico, social y cultural en zonas rurales y poco pobladas del país. Este sector representa un 10% del PIB de la economía española (Monzón, 2010). Por otro lado, de las 2.849 cooperativas agroalimentarias, 683 están localizadas en Andalucía, 480 en Castila-La Mancha, 244 en Cataluña y el resto están repartidas en el resto de las regiones. Por otro lado, Cataluña es la tercera región en importancia con una facturación anual de 10,4% del total. Dentro de Cataluña, Lleida es la principal provincia en el sector agroalimentario catalán.
  • En segundo lugar por la importancia que tienen estas entidades como medio para contribuir al desarrollo económico, social y medioambiental, de forma sostenible y responsable, en la medida que su actividad se fundamenta en la utilización de recursos endógenos de la zona, por crear ocupación estable, constituir un factor de progreso en las zonas rurales, conseguir una mejor redistribución de recursos y prestar con más eficacia los servicios de naturaleza social.

Las cooperativas como empresas que actúan en los mercados, no pueden ni deben quedarse atrás. Si dichas entidades quieren conservar un lugar en el mercado y competir exitosamente con el resto de sectores económicos, deben estar en la vanguardia de esta revolución tecnológica (Montegut et al., 2013).

Así pues, nace la necesidad de realizar un estudio relacionado con el uso de las TICs en el contexto descrito. Para ello se diseña un conjunto de acciones, una de las cuales es la realización de un estudio de usabilidad. Analizar la usabilidad es algo que hoy en día ya nadie discute, pues, la usabilidad, es un atributo que como el mismo estándar ISO/IEC 25010:2011 define, forma parte del modelo de calidad de cualquier sistema interactivo, tanto en referencia a la calidad de uso cómo a la calidad del producto en sí mismo.

 

2. Configuración del análisis

2.1. Conjunto de webs a analizar

En relación a la selección de sitios web a analizar, se ha escogido ámbitos que tienen una significativa importancia en la zona objeto de estudio como es el sector del aceite y el sector de la fruta dulce. Los datos para la determinación de la población real se han obtenido de la Federación de Cooperativas Agrarias de Cataluña.

El total de cooperativas a analizar era de 55. En primer lugar cabe destacar que el estudio se realizó en tan solo 36 de ellas, que eran las que disponían de presencia en Internet, lo cual supone un 65,45% de la muestra. Por sectores, se puede afirmar que de las 33 cooperativas del sector frutícola 19 (57,58%) tenían web y 14 (42,42%) no, y que del sector del aceite, de las 22 cooperativas, 17 (77,27%) disponían de sitio web y 5 (22,73%) no.

Se puede observar que porcentualmente el número de cooperativas que tienen sitio web es considerablemente más importante en el sector del aceite que en el de la fruta. Este hecho se debe en parte a que el sector de la fruta está mucho más agrupado y algunas cooperativas están adheridas a cooperativas de segundo grado. Mientras que el sector del aceite tiende a ser más localizado sin necesidad de mayores agrupaciones. También hay que tener presente que la mayor parte de la fruta es vendida a través de intermediarios a las grandes superficies. Por el contrario, el aceite es vendido en gran parte, directamente por la propia cooperativa.

2.2. Técnicas de evaluación de usabilidad utilizadas

Del conjunto de técnicas para evaluar la usabilidad de un sistema interactivo, para el estudio actual se han escogido la Evaluación Heurística (EH) (Nielsen y Molich, 1990) y la Evaluación de la Página de Inicio (EPI) (Nielsen y Tahir, 2001). Ambas técnicas responden perfectamente a las necesidades del estudio, pues, permiten realizar una evaluación “masiva” en un espacio relativamente corto de tiempo a la vez que no requieren participación directa de usuarios finales, factores determinantes para el estudio que se muestra.

La primera altamente conocida mientras que la segunda no lo es tanto, al menos cómo técnica para evaluar la usabilidad.

2.3. Evaluación heurística

La evaluación heurística (EH) es una de las metodologías de inspección de evaluación de la usabilidad más conocidas y utilizadas. Johnson, Clegg y Ravden (1989) fueron los creadores de la metodología y Molich y Nielsen (1990) quienes realmente la difunden. Esta técnica, no requiere participación directa de usuarios finales, es un método más rápido y económico que las técnicas participativas, y es muy adecuado para el contexto web (Karoulis y Pombortsis, 2004). Esquemáticamente, el procedimiento de la EH consiste en:

  • Preparación. El administrador de la evaluación escoge el conjunto de heurísticas más adecuado para evaluar la interfaz en cuestión. Elige también los evaluadores que posteriormente puntuarán cada una de las reglas y, finalmente, selecciona los factores de severidad para que todos los evaluadores puntúen las heurísticas con el mismo rango de valores.
  • Evaluación. Los evaluadores, tras una primera toma de contacto con la interfaz a evaluar, puntúan cada una de las heurísticas utilizando los factores de severidad previamente establecidos.
  • Síntesis final. Una finalizadas las evaluaciones individuales, se realiza una reunión conjunta para sintetizar los resultados. En esta fase, adquiere mayor importancia la discusión de aquellas heurísticas que han sido puntuadas de forma distinta para llegar a un consenso y obtener así los resultados finales, los cuales principalmente serán de tipo cualitativo.

Evaluación de Páginas de Inicio (EPI)

Objetivamente, la bibliografía no redefine la técnica EPI como técnica de evaluación de la usabilidad. Sin embargo Nielsen y Tahir (2001), asumiendo que la página inicial de un sitio web es la más relevante, definen una técnica o metodología útil para evaluar las páginas de inicio de los sitios web. Dicha técnica evaluar la interfaz partir de analizar la distribución del espacio de la misma.

Concretamente, cuando se analiza la interfaz de una página de inicio de un sitio web, se puede observar que ésta dispone de una zona dedicada a la bienvenida, otra a la navegación, otra muestra el contenido textual, etc. Así pues, con esta técnica se determinan unos valores de ocupación estándar (o medios, o aceptables) que cada página de inicio debería dedicar a cada una de las zonas anteriores. Estos valores (porcentuales) deben fijarse para cada evaluación concreta.

Una vez determinadas las zonas y sus correspondientes valores de ocupación ideales, se evaluar cada homepage comparando la ocupación de cada zona respecto a dichos valores de referencia. Como resultado se obtiene un conjunto de valores que permite saber cuánto se distancian las interfaces analizadas respecto a los valores preestablecidos, evidenciando puntos fuertes y débiles de cada interfaz.

 

3. Resultados obtenidos

3.1. Con la Evaluación Heurística

La EH se ha realizado utilizando la primera parte del repositorio abierto Open-Heredeux (Masip et al., 2011; 2012) mediante la herramienta online de dicho proyecto. Una de las principales características de Open-Heredeux es que dispone de una base de datos que proporciona el conjunto de heurísticas que más adecuado para casa situación. En nuestro caso, cómo pretendemos evaluar la faceta “usabilidad” de un “sitio web con un alto componente de comercio electrónico”, la herramienta nos proporcionó el conjunto de heurísticas de la Tabla 1.

 

 

La evaluación, realizada por dos evaluadores experimentados (en el anexo B del trabajo realizado por Ortiz (2011, pp. 158-244) pueden consultarse todas las evaluaciones heurísticas realizadas) evidenció las siguientes características.

La facilidad de uso, de forma general, puede considerarse como buena, sobre todo respecto a las tareas y la familiaridad de la información para el usuario.

En general, los elementos más importantes están bien resaltados, sin zonas con exceso de elementos ni más información de la imprescindible. A pesar de que en algunos casos se han detectado textos demasiado largos, el vocabulario es familiar para el tipo de usuario destinatario.

En muchos casos, la navegación por un mismo sitio web abre nuevas instancias del navegador, dificultando las acciones habituales de avance o retroceso.

Otro error frecuente ha sido la muy mala resolución de imágenes. Las cuales, además, están sin etiquetar y abusando de incómodos elementos animados.

Asimismo, la fecha de la última actualización o algún dato indicativo de la actualidad de la información, son datos que suelen estar desactualizados, restando veracidad en noticias o precios. Más grave es un significativo número de webs con noticias totalmente desactualizadas.

Bastantes sitios muestran URLs difíciles de recordar. En las páginas que requieren un proceso de identificación para acceder a una parte del contenido, se ha visto que no utilizan protocolos seguros o que no esconden los caracteres para la contraseña.

3.2. Con la EPI

Como se ha mencionado, el segundo estudio de usabilidad del conjunto de webs analizado se ha realizado con la herramienta desarrollada en el grupo GRIHO para realizar este tipo de análisis (Laudon y Traver, 2001) y siguiendo las indicaciones de J. Nielsen y Tahir (2001).

Un caso como ejemplo

La imagen de Figura 1 muestra la página principal de una de las cooperativas estudiadas con las zonas marcadas. A partir de estas distribuciones espaciales, la herramienta proporciona los gráficos de análisis de porcentajes de ocupación de cada zona y un gráfico de comparación respecto a los valores ideales determinados.

 

 

Este análisis particular permite deducir que los porcentajes de bienvenida, navegación y autopromoción de esta página web se ajustan bastante a los valores de referencia preestablecidos. En cambio, el contenido textual queda algo lejos. No tiene contenido audiovisual, publicidad y deja bastante espacio sin utilizar.

Del estudio se puede comentar, además, que no destaca por su calidad de diseño visual. Aun así en la página principal se puede encontrar mucha información en lo referente a la cooperativa. Es una de las pocas webs de este sector, que introduce un buscador.

La URL del sitio web, http://www.paraguayo.com, no tiene nada a ver con el nombre de la cooperativa, sino que hace referencia a una clase de melocotón.

Todo ello, finalmente, permite realizar con poco esfuerzo y tiempo dedicado, la serie siguiente de recomendaciones de mejora:

  • Cambiar el títulos de la barra de navegación que traen por nombre, confecciones y Global Gap, haciéndolos más intuitivos.
  • Diferenciar con márgenes o colores diferentes, la cabecera, la barra lateral de navegación, el cuerpo y el pie de página.
  • Juntar más la barra de navegación y el cuerpo con la cabecera, por tal de no dejar tanto espacio en blanco.
  • El vínculo que trae por nombre ver mapa, se podría cambiar por “cómo llegar”, por ejemplo.
  • Cambiar el nombre que tiene actualmente la URL por el nombre de la cooperativa con la finalidad de que esta sea más fácil de recordar.
  • No realiza comercio electrónico.

Evaluación del conjunto analizado

Como punto inicial, el responsable del análisis determina las zonas que cada homepage tendrá y los correspondientes valores porcentuales de referencia. En el presente estudio, y tomando los valores definidos en el trabajo de Banegas (2001), han sido los que podemos ver en la Tabla 2.

 

 

Para cada página del conjunto a analizar, los pasos a seguir son:

Análisis respecto a la distribución de las zonas

En la Tabla 3 puede observarse que aparte de la media hay otra fila que muestra los valores de la media sin los casos extremos. La primera, como su nombre indica, muestra el valor de la media de la ocupación de cada zona y la segunda es la misma media pero sin tener en cuenta los “valores extremos”. Se entienden “valores extremos” para cada categoría aquellos que, bien por exceso bien por defecto, difieren por encima del 50% del valor “ideal”. Por ejemplo, si para una determinada categoría el valor ideal es 20% es descartan aquellos valores inferiores al 10% y los superiores al 30% (20±(50% de 2)).

 

 

Esto se ha realizado así para tener otra medida comparativa que nos ayude a evitar aquellos casos (extremos) que desvirtúan la media y, consecuentemente, restan consistencia a los valores obtenidos (en Ortiz, 2011, pp. 34-35, puede consultarse cuales fueron las cooperativas descartadas para los casos extremos y para cada categoría).

Los siguientes gráficos muestran los valores medios de cada zona (Figura 2, izquierda) y los valores medios sin los casos extremos (Figura 2, derecha).

 

 

Y el gráfico de barras de la Figura 3 nos permite observar gráficamente las diferencias existentes entre los valores ideales respecto a ambas medias.

 

 

Discusión

Como se observa, las únicas zonas cuyos valores están cercanos a los ideales son “identidad y bienvenida” y “autopromoción”. En el primer caso, la mayoría de les páginas analizadas disponen de una buena cabecera que muestra claramente el nombre de la cooperativa junto a su logotipo, los cuales ocupan cerca del 20% de la ocupación de la página. Respecto la autopromoción, se observa que casi todas las homepages introducen los datos administrativos de la cooperativa junto a otros sellos de calidad con la finalidad de promocionarse externamente.

Respecto a la navegación, la media resultante queda ligeramente por debajo del valor de referencia. En gran parte, este hecho es debido al alto porcentaje de espacio sin utilizar que tienen la mayoría de webs. En cambio el valor del contenido textual dista mucho del ideal. Se observa que solo dos de cada tres páginas tienen contenido textual en forma de noticias de la cooperativa, una breve historia o un texto de presentación simple. Por contra, una de cada tres no tiene nada, substituyendo este contenido a base de fotografías, más indicativos de autopromoción o simplemente espacio sin utilizar. Esta es la zona en la que el valor dista más del ideal.

Al mismo tiempo, observamos un elevado porcentaje de espacio sin utilizar en la mayoría de las páginas, espacio que bien podría ocuparse con otros propósitos.

Finalmente, se observan tres zonas (“contenido audiovisual”, “publicidad” y “patrocinio y redes sociales”) con una media de 0,00%, lo cual nos demuestra la poca madurez del sector analizado en el uso de este tipo de recursos.

Errores detectados con más frecuencia

  • Mucho espacio sin utilizar: casi todas las páginas analizadas tienen este valor por encima del valor de referencia, es el error más frecuente.

En muchos casos, este error podría solucionarse simplemente con un texto de presentación o una reseña histórica de la cooperativa en la parte central. También podrían introducirse fotografías o contenido audiovisual.

  • Títulos de secciones inadecuados: se detecta un elevado número de títulos de secciones inadecuados y/o confusos (no queda claro dónde puede llevar un clic sobre ellos). Esto crea confusión, bien sea porqué induce a secciones erróneas, bien sea, porqué queden secciones importantes por visitar.
  • No mostrar los datos administrativos de la empresa: es habitual acceder a la homepage en busca de los datos administrativos (dirección, teléfono, correo electrónico, etc.) de la empresa. Se ha detectado que en bastantes casos esta información no existe en la página principal, siendo necesaria una navegación por el sitio para poder encontrar dichos datos.
  • URL’s inadecuadas: durante el estudio se ha comprobado un elevado número de páginas que no utilizan el nombre de la cooperativa como dirección URL. Esto sucede mayormente en las cooperativas del sector del aceite, destacando, además, que utilizan la marca que comercializan, dificultando el recuerdo de la URL (es más fácil recordar la cooperativa por su nombre que no por la marca que comercializa).

Este factor adquiere todavía mayor relevancia, pues esto hace disminuir considerablemente la probabilidad de éxito en los buscadores web.

  • Títulos inadecuados o inexistentes en páginas del sitio: muchas páginas descuidan poner un título adecuado a cada sección del sitio. En estos casos, el navegador muestra una dirección nula de la información de la página o una dirección que no indica nada (y generalmente muy larga).

El título de la sección proporciona una información inteligible para el navegador que indirectamente ayuda al usuario a identificar en qué lugar de la estructura de información se encuentra en cada momento. Esta información puede acompañarse, además, del propio nombre de la cooperativa, aumentando todavía más su visibilidad.

 

4. Discusión de los resultados

A continuación se procede a destacar los principales errores detectados tras el análisis realizado después de utilizar ambas técnicas (EPI y EH).

En primer lugar se observa que la mayoría de las páginas dejan mucho espacio sin utilizar y casi ninguna de ellas dispone de publicidad, de contenido audiovisual ni interacción con las redes sociales. Los factores anteriores favorecen la desactualización de la información presentada.

Por el contrario, las zonas dedicadas a “identidad y bienvenida” y “autopromoción” sí que se ajustan a los valores de referencia (o ideales); la mayoría de webs muestran una buena cabecera con el nombre y el logotipo representativo de la cooperativa, mostrando, además, los datos administrativos y los sellos de calidad disponibles con la intención de transmitir mayor confianza al cliente.

Los porcentajes de las zonas de navegación y contenido textual quedan por debajo de los ideales. En gran parte, esto se debe al alto porcentaje de espacio sin utilizar.

Uno de los errores que se repiten con más frecuencia son los nombres inadecuados de algunos vínculos o nombres de secciones, no son intuitivos y son difíciles de deducir cuál es su destino u objetivo. Este hecho aumenta considerablemente la probabilidad de que ciertas secciones del sitio web queden sin ser visitadas. Algo parecido sucede con algunas URL’s que se corresponden con el producto que se comercializa y no el de la propia cooperativa, dificultando su recuerdo.

El análisis de los resultados obtenidos con la EH demuestra que la mayoría de sitios web analizados son fáciles de usar. En general, no presentan una cantidad enorme de contenidos, sobre todo en las del sector de la fruta, pues se limitan a mostrar una pequeña presentación de la cooperativa y algunos de sus productos.

Sí que se comprueba que ninguna página de las analizadas etiqueta las imágenes. Este hecho suele ser importante, aunque para el caso de la muestra la afectación respecto la usabilidad no es muy destacable pues muchas de dichas imágenes cumplen más bien una función decorativa.

La seguridad de las webs con opción para identificarse o que ofrecen servicio de venta queda en entredicho. No se enmascaran los caracteres de la contraseña así cómo ninguna ofrece una conexión de transferencia de datos segura (https).

Para finalizar, se ha detectado un elevado grado de desactualitzación. Se encuentran contenidos, noticias, precios, etc. introducidos desde hace mucho tiempo, repercutiendo negativamente en la credibilidad de la empresa.

 

5. Conclusiones

El análisis de las cooperativas en el contexto analizado ha permitido realizar las siguientes conclusiones:

  • Las cooperativas del sector de la fruta cuidan menos su sitio web que las de aceite. Se localizan además un conjunto importante de webs que se han quedado obsoletas, desactualizadas o no tienen porque están adheridas a asociaciones de cooperativas mayores que comercializar su producto.
  • La fruta es un producto cuya venta al por mayor es más importante que en el caso del aceite y en el que intervienen más intermediarios. Esta característica se refleja en aspectos de las correspondientes web en detalles como la carencia de elementos de fidelización de clientes y un bajo nivel de cooperativas que plantean realizar venta directa por Internet mediante comercio electrónico.
  • El sector oleícola, por el contrario, es un producto que se comercializa más al por menor que la fruta, consecuentemente el número de cooperativas que disponen de página web es notablemente más elevado. Se observa además que el diseño es más minucioso y cuidado así como la actualización de la información mostrada (tienen una mayor necesitad de captar clientes y de mantener los que ya lo son). Aun así, también son escasas las cooperativas que realizan comercio electrónico.
  • En general, las páginas web de este tipo de entidades están más destinadas a informar al usuario sobre aspectos de la cooperativa como su historia, presentación, instalaciones, qué productos vende o cómo los vende que no dirigidas a utilizar la plataforma TIC para vender propiamente el producto.
  • Así pues, las webs analizadas, al no tener una cantidad importante de contenidos para mostrar, se puede concluir que de forma genérica muestran un grado de usabilidad elevado. Aunque cabe recalcar una vez más la necesidad de actualizar los contenidos en la gran mayoría (denotando un efecto bastante común: se realiza una inversión inicial para el diseño y puesta en servicio del sitio web pero su mantenimiento es residual o nulo).

Respecto al propio uso de las técnicas utilizadas, nuestra experiencia nos permite transmitir las siguientes conclusiones:

Finalmente comentar, como línea futura de trabajo y con la finalidad de comunicar las implicaciones en la gestión de esta investigación, se tiene la intención de elaborar una guía práctica para el desarrollo y la mejora de los sitios web de las cooperativas de los sectores analizados. Asimismo, también se ha planteado la aplicación de este análisis de usabilidad en otros sectores cooperativos como el de cereales o el vitivinícola, para contrastar los resultados y aumentar su impacto en la gestión empresarial.

 

6. Referencias

Avgerou, C. (2008). Information systems in developing countries: a critical research review. Journal of Information Technology, 23, 133–146.         [ Links ]

Banegas, J. (2001). Efectos de las tecnologías de la información y comunicación en la vida empresarial. Revista Instituto de Estudios Económicos, 1 & 2. 415-440.         [ Links ]

González, M.P., Lorés, J., Pascual, A.; Granollers, A. (2006). Evaluación heurística de sitios web académicos Latinoamericanos. Interacción. pp. 143-153.         [ Links ]

Griho (2010). Herramienta de evaluación de la usabilidad de las páginas de inicio en páginas web. Disponible en: http://www.grihotools.udl.cat/upi        [ Links ]

ISO/IEC 25010:2011. Systems and software engineering -- Systems and software Quality Requirements and Evaluation (SQuaRE) -- System and software quality models.

Johnson, G.I.; Clegg, C.W.; Ravden, S.J. (1989). Towards a practical method for user interface evaluation. Applied Ergonomics, 20(4), pp. 255-260.         [ Links ]

Karoulis, A. Pombortsis, A. (2004). The Heuristc Evaluation of Web-Sites Concerning the Evaluators’ Expertise and the Appropriate Criteria List. Informatics in Education, 2004, Vol. 3, No. 1, 55–74

Kemp E.; Setungamudalige D. T. (2006). A resource support toolkit (R-IDE): supporting the DECIDE framework. Proceedings of the 7th ACM SIGCHI New Zealand Chapter's international Conference on Computer-Human interaction: Design Centered HCI ACM. - New York . - Vol. 158. - pp. 61-66.         [ Links ]

Laudon, K.; Traver C. (2001). E-commerce: Business, technology, society. Boston: Addison-Wesley.         [ Links ]

Masip, L., Oliva, M. & Granollers, T. (2011). OPEN-HEREDEUX: open heuristc resource for designing and evaluating user experience. Proc. 13th IFIP TC 13 intl. Conf. on Human-computer interaction - (INTERACT'11), P. Campos, N. Nunes, N. Graham, J. Jorge and P. Palanque (Eds.), Part IV. Springer-Verlag, Berlin, Heidelberg, 2011 pp. 418-421.

Masip, L.; Oliva, M.; Granollers, T. (2012). Repositorio Abierto de Heurísticas. XIII Congreso Interacción 2012. Elche, España.         [ Links ]

Molla, A.; Heeks, R. (2007). Exploring E-Commerce Benefits for Businesses in a Developing Country. Information Society, 23 (2), 95–108.         [ Links ]

Montegut Y.; Cristóbal E.; Gómez Adillón, M. J. (2013). “La implementación de las TIC en la gestión de las cooperativas agroalimentarias: el caso de la provincia de Lleida”. REVESCO: Revista de Estudios Cooperativos. nº 110, Primer Cuatrimestre 2013, pp. 223-254        [ Links ]

Monzón, J. L. (2010). Las grandes cifras de la economía social en España. Ed. CIRIEC-España. Valencia.         [ Links ]

Mur, C. (2007). Diseño e implementación de un gestor para realizar evaluaciones heurísticas. Trabajo Final de Carrera. DIEI. Universidad de Lleida.         [ Links ]

Nielsen, J.; Tahir, M. (2001). Homepage Usability: 50 Websites Deconstructed. New Riders.         [ Links ]

Nielsen, J., Molich, R. (1990). Heuristc evaluation of user interfaces. En: CHI ’90: Proc. SIGCHI conf. on human factors in computing systems, pp. 249-256

Ortiz, X. (2011). Anàlisi d'usabilitat de les cooperatives de fruita i oli de Lleida. Trabajo Final de Carrera, ETIG. Universidad de Lleida. Disponible en: http://www.recercat.cat/handle/2072/202286        [ Links ]

Pallás, C. (2010). “Desarrollo de una herramienta para gestionar la Usabilidad en las páginas de inicio”. Final de Carrera, ETIG. Universidad de Lleida.         [ Links ]

Sagarna, J. (2010). Macromagnitudes del cooperativismo agroalimentario español. OSCAE (Observatorio Socioeconómico del Cooperativismo Agroalimentario Español). Disponible en: http://www.agro-alimentarias.coop        [ Links ]

Squac Grupo Accusa (2012). Herramienta de soporte para las evaluaciones herurísticas. Marzo. http://squac.iti.upv.es/blog/category/AccUsa.         [ Links ]

Suárez, A. (2001). Nueva Economía y Nueva Sociedad, Madrid, Prentice-Hall Ed.         [ Links ]

 

Recebido / Recibido: 11/04/2013

Aceitação / Aceptación: 10/06/2013