HOME | ÍNDICE POR TÍTULO | NORMAS PUBLICACIÓN

Espacios. Vol. 37 (Nº 10) Año 2016. Pág. 18

Uma revisão sistemática da bibliografia sobre usabilidade móvel utilizando o enfoque meta-analítico

A systematic review of bibliography on mobile usability using meta-analytic approach

Angelica Toffano Seidel CALAZANS 1; Roberto Avila PALDES 2; Eloisa Toffano Seidel MASSON 3

Recibido: 08/12/15 • Aprobado: 14/01/2016

Contenido

1. Introdução

2. Metodologia da pesquisa

3. Revisão através de enfoque meta analítico e resultados

4. Conclusões

Referências

1. Introdução

A constante expansão do segmento de tecnologia móvel (mobile) vem dando origem a novos produtos de hardware e software, bem como, a novas necessidades dos clientes para utilizarem esses produtos de forma eficaz. Esses dispositivos móveis podem ser definidos como um computador portátil que o usuário carrega facilmente e que se comunica com outros dispositivos através de uma tecnologia de comunicação sem fio (Dantas, 2009). Exemplos de dispositivos móveis são os laptops, smartphones, tablets.

Com relação aos smartphones, a curva de seu crescimento, ao longo dos anos, tem sido acentuada. Em 2010, 5% da população mundial tinha smartphones. No fim de 2014, a estimativa é que essa porcentagem seja cerca de 22%. Dados de uma pesquisa do site Business Insider apontavam que ao final de 2014, existiriam 1,4 bilhão de smartphones no mundo, o que representaria dois aparelhos para cada nove pessoas no mundo (Estadão, 2013).

O Brasil, segundo Exame (2014), tem a quinta maior base de smartphones do mundo, com 89,5 milhões de unidades ao fim de setembro de 2014. O total de conexões móveis na América Latina vai aumentar de 694 para 890 milhões, entre 2013 e 2020, segundo previsões da GSMA (Groupe Speciale Mobile Association).

Com as novas tecnologias móveis e com o aumento substancial de clientes cresce, cada vez mais, a necessidade de que a interação homem/computador seja realizada com interfaces projetadas de um modo ergonômico, funcional e preciso, visando a atratividade e a usabilidade.       A ISO 9241-11 (2011) define usabilidade como medida na qual um produto pode ser usado para alcançar objetivos específicos com eficácia, eficiência e satisfação em um determinado contexto de uso.

Para se avaliar a usabilidade de um sistema, segundo Nielsen (2014), deve-se verificar se ele é fácil de usar, de aprender, de memorizar, isento de erros e se causa satisfação ao usuário. No contexto móvel, principalmente com relação a smartphones e            tablets, os testes de usabilidade são mais importantes pois esses dispositivos possuem algumas características diferenciadas tais como: o tamanho reduzido, as dimensões de telas, o uso de dedos no dispositivo de entrada, a quantidade de memória do aparelho, a tipografia, os gráficos, os símbolos e os ícones específicos (Oliveira; Stein 2012), (Nielsen, 2014).

Para que a tecnologia móvel funcione bem e seja eficaz para o cliente, é importante compreender os aspectos de usabilidade envolvidos e a sua dinâmica. A usabilidade nos dispositivos móveis está alinhada a evolução das pesquisas realizadas nos últimos anos? Os estudos realizados nos últimos anos propõem ou identificam como implementar uma melhor usabilidade nesse contexto? Quais os principais países que investigam esse assunto?

Uma vez delimitado o problema, esse estudo tem como objetivo geral investigar as propostas mais relevantes com relação a usabilidade móvel, identificando os principais e mais atuais estudos realizados no mundo nos últimos 20 anos. Para tanto, apresenta uma revisão com enfoque meta analítico (Ramirez Correa; Garcia Cruz, 2005) sobre usabilidade móvel.

O artigo apresenta, na seção 2, a metodologia da pesquisa, e na seção 3 descreve os resultados obtidos através de enfoque meta analítico. Na seção 4, apresentam-se as conclusões da pesquisa e sugerem-se futuros trabalhos.

2. Metodologia da pesquisa

A metodologia adotada foi a pesquisa bibliográfica de caráter exploratório por meio do enfoque meta analítico. O enfoque utiliza o critério de impacto de revistas e artigos para escolha do material a ser utilizado. Tem como objetivo combinar bases de dados conceituadas, para, dessa forma, apresentar uma base de material confiável. A meta análise possibilita obter os melhores autores, artigos e revistas, e também realizar uma análise das técnicas estatísticas, das técnicas amostrais, das linhas mais pesquisadas e das abordagens utilizadas. Segundo Mariano et al. (2011), o enfoque meta analítico "consegue selecionar e filtrar os dados de maneira sistemática logrando realizar um estado da arte completo sobre determinado assunto".

O enfoque meta analítico pode ser implementado em quatro etapas (Ramirez Correa; Garcia Cruz, 2005) ou em sete etapas (Mariano et al.,2011). Nesse trabalho, adotaram-se as sete etapas descritas a seguir.

1. Análise e apresentação das revistas da disciplina: engloba identificar as revistas mais utilizadas no contexto estudado. Nessa fase são pesquisadas as revistas relacionadas aos principais congressos, encontros da área de conhecimento de usabilidade móvel. São utilizadas, também, as orientações de profissionais especialistas da área.
2. Seleção de revistas relevantes da disciplina: nessa fase selecionam-se as revistas mais relevantes. Para realizar esta seleção recomenda-se utilizar alguns critérios de relevância tais como: fator de impacto, revistas com maior quantidade de citações, revistas selecionadas de grandes conferencias nas áreas de interesse, entre outros. O fator de impacto de determinado periódico é definido como a razão entre o número de citações feitas no corrente ano a itens publicados neste periódico nos últimos dois anos e o número de artigos (itens fonte) publicados nos mesmos dois anos pelo mesmo periódico (Institute for scientific information, 1998).
3. Coleta de dados para alimentação da base de dados: engloba a realização da pesquisa sobre o tema usando como filtro as palavras chaves do estudo e as publicações selecionadas anteriormente. Realiza-se, então, uma busca dentro de um espaço temporal a ser definido pelo pesquisador.
4. Análise dos autores e artigos: a primeira análise é realizada com base no cálculo da média anual de artigos sobre o tema pesquisado, e também suas citações. O objetivo desta análise é avaliar a importância do tema ao longo dos anos. Esta análise vai permitir visualizar a relação das revistas selecionadas em relação à pesquisa no período estudado. Serão identificados os autores mais publicados nesse contexto com a finalidade de identificar quais os autores que lideram em termos quantitativos.
5. Determinação dos enfoques teóricos de pesquisa: esse passo trata da identificação dos principais enfoques teóricos que abordaram o tema. A fase é alcançada estudando os enfoques dos artigos selecionados na base de dados.
6. Análise das palavras chave dos artigos: proporciona importantes elementos a respeito da evolução do tema em questão e das linhas de pesquisa.
7. Estudo das relações: abrange o estudo das relações dos artigos previamente selecionados nas fases anteriores e tem como objetivo descobrir os tamanhos das amostras dos estudos, técnicas estatísticas utilizadas, locais de estudo.

3. Revisão através de enfoque meta analítico e resultados

A seguir, detalha-se cada fase do enfoque meta analítico.

3.1. Fase 1 - Análise e apresentação das revistas da disciplina

Essa análise foi realizada por meio da base de dados da ISI Web of Science no período de 03 à 30 de janeiro de 2015. Segundo Garcia e Ramirez (2004), a ISI Web of Science é conhecida internacionalmente como uma das melhores e mais completas bases de dados. Foram pesquisadas as revistas relacionadas aos principais congressos e encontros relacionados ao domínio relacionado ao tema. A base do ISI Journal Citation Report Edition apresenta 503 revistas, considerando a área do conhecimento relacionada ao tema (mobile usability).

3.2. Fase 2 - Seleção de revistas relevantes da disciplina

As revistas foram selecionadas segundo o fator de impacto ISI (Institute for Scientific Information). Dessa base foram selecionadas as revistas com fator de impacto superior a 5.0, apresentadas na Tabela 1.

Tabela1. Revistas com maior fator de impacto (acima de 5.0)

Com relação as publicações brasileiras utilizou-se o site do SCIamo Journal&Country pois esse site é referência e possibilita o filtro das revistas brasileiras de maior impacto. Essa base, consultada no período de 03.01 a 30.01.2015, não apresenta revistas mais citadas nessa base com os parâmetros Subject Area:Computer e Science subject Category:Human-Computer Interaction nos anos de 2008 a 2013.

3.3 Fase 3 - Coleta de dados para alimentação da base de dados

Identificadas as revistas com maior fator de impacto e/ou citações, foi realizada a busca "usability mobile" (usabilidade móvel) no espaço temporal de vinte anos (1995-2014). O resultado nas revistas/Conferências consultadas foram 1616 artigos na Web of Science sobre o tema. As Tabelas 2 e 3 apresentam as Revistas/Conferências que mais pesquisaram sobre este tema.

Tabela 2. Revistas com maior quantitativo de publicações (revistas com mais de 10 artigos)

Tabela 3. Conferências com maior quantitativo
de publicações (Conferências com mais de 10 artigos)

É interessante ressaltar que nenhuma das Revistas/Conferências que mais publicaram artigos com o tema, está inserida entre as primeiras 100 revistas com maior fator de impacto (parte delas apresentadas na Tabela 3).

A Figura 01 apresenta o quantitativo de publicações desde 1995, segundo a Web of Science.

Figura 1.Evolução do quantitativo de publicações segundo a Web of Science

A Figura 2 apresenta a evolução do quantitativo de citações desde 1996, considerando a base da Web of Science As citações e os artigos da base Web of Science têm crescido substancialmente. Isso demonstra o interesse dos pesquisadores nesse assunto.

Figura 2.Evolução do quantitativo de citações Web of Science

A Tabela 5 apresenta o quantitativo de citações por revista, considerando revistas mais citadas (base da Web of Science). Os resultados permitem inferir que existem, na base consultada, revistas que publicaram menos artigos, mas que obtiveram uma quantidade maior de citações (International journal of ad hoc and ubiquitous computing, International journal of high performance computing applications e Software quality journal). Esse fenômeno ocorre com outras revistas nessa base.

As revistas Personal and ubiquitous computing, International journal of ad hoc and ubiquitous computing e International journal of medical informatics obtiveram as maiores citações: 516, 317 e 232 citações, respectivamente. O total de citações das 10 revistas mais citadas é de 2138. Isso corresponde a, aproximadamente, 39% das citações totais (5528).

Tabela 5. Revistas/Conferencias e quantitativo de citações
(considerando as 10 revistas mais citadas) – Web of Science

3.4 Fase 4 - Análise dos autores e artigos

Autores com artigos mais citados – Base Web of Science

Para análise dos autores com os artigos mais citados, optou-se por identificar 10 autores com artigos mais citados que estão apresentados na Tabela 6. Optou-se por indicar somente o 1º. Autor. O total de citações dos autores mais citados é de 1149. Isso corresponde a, aproximadamente, 21% do total de citações (5528).

Tabela 6. Dez autores mais citados e data de
publicação considerando a base da Web of Science

Autores com mais citações e quant. de artigos publicados-– Base Web of Science

A Tabela 7 apresenta os 20 autores que receberam mais citações no período da pesquisa e o quantitativo de artigos publicados. Ao todo, os artigos identificados receberam 1910 citações, do total de 5528 citações de toda a base da Web of Science. Isso corresponde a 34,55% das citações. Dos 20 autores, só 7 autores produziram no período selecionado dois ou mais artigos.

Estes dados permitem concluir que esses autores têm um significativo fator de impacto na literatura sobre mobile usability. Em um processo de revisão de literatura a ausência destes artigos nas referências bibliográficas ou na bibliografia poderia ser considerada uma falta importante, pois estes artigos formam a base da pesquisa científica sobre este tema pesquisado.

Tabela 7. Autores com mais citações - quant.
citações vs quant. artigos – Base Web of Science

Artigos dos autores com mais publicações e citações -– Base Web of Science

Considerando o número de citações significativo e a quantidade de publicações baixa por autor, nesta análise foram destacados 8 autores. O autor que possui o artigo com mais citações e os autores que possuem mais de 1 artigo sobre o assunto e entre eles, os com mais citações. O somatório das citações desses trabalhos corresponde a 18,5%. A Tabela 8 apresenta parte dos dados analisados, somente os artigos dos últimos 10 anos.

Tabela 8. Artigos dos autores com mais publicações e citações (últimos 10 anos) – Base Web of Science

Revistas e Conferências mais citadas – base Web of Science

A Tabela 9 apresenta as Revistas mais citadas e que publicaram acima de 10 artigos. A análise da Tabela 9 permite inferir que as poucas revistas que mais publicaram sobre o assunto tem um alto quantitativo de citações. O percentual de citações das revistas da Tabela 9 corresponde a 24,46% das 5528 citações da base da Web of Science.

Tabela 9. Revistas e conferências mais citadas e que publicaram acima de 10 artigos

Distribuição dos artigos pelos países de origem

A Tabela 10 apresenta os artigos classificados pelos países de origem. Estão citados na Tabela somente os primeiros 10 países. A análise dos dados mostra que 57 países ao todo contribuem com a pesquisa desse tema, considerando a base de Web of Science. O Brasil possui 20 artigos com 21 citações, o que representa, nessa base, um percentual pouco representativo.

Tabela 10. Países

3.5. Fase 5 - Determinar Linhas e Enfoques Teóricos de Pesquisa

Para determinar as principais linhas de pesquisa e enfoques que trataram do tema usabilidade móvel é necessário fazer uma análise dos principais artigos (Tabela 8). Revisando os artigos, chegou-se à conclusão que as linhas de pesquisa que mais trataram do tema usabilidade móvel foram:

1. estudos e avaliações de usabilidade, context aware e location aware;
2. revisões de propostas, técnicas, metodologias, restrições sobre usabilidade;
3. estudos e avaliações de usabilidade no campo da saúde;
4. estudos e avaliações de usabilidade por perfis (idosos, idosos vs jovens, novos vs especialistas, adolescentes, crianças vs adultos).

Com relação a metodologia adotada nos artigos analisados, parte das avaliações de usabilidade foi laboratorial e parte foi realizada por meio de pesquisa em campo. Existem trabalhos que comparam os resultados das avaliações em campo e em laboratório.

A Figura 3 apresenta o word cloud criado pela ferramenta Nvivo que realiza análise de conteúdo. Essa análise foi realizada utilizando o título dos 500 artigos mais citados e, a Figura 3 ilustra as palavras, que tiveram maior número de ocorrências, em tamanho maior.

Figura 3. Word cloud com os títulos dos principais artigos

3.6. Fase 6 - Análise das Palavras Chaves

Com a finalidade de saber o rumo das novas pesquisas, foram usados critérios objetivos através de uma busca das palavras chaves. Estas palavras revelam características próprias de cada trabalho, permitindo agrupar os estudos e classificá-los. A Figura 4 apresenta as palavras chaves que obtiveram mais de 3 citações.

Figura 4. Palavras chaves

3.7. Fase 7: Estudo das Relações.

É importante investigar quais os enfoques que mais foram abordados, como têm sido elaboradas as pesquisas (laboratório ou em campo), qual a população/amostra/participantes entre outras informações. Foi realizada a análise considerando os autores mais citados e com mais de 2 artigos. Foi possível analisar que a maior parte dos artigos citados realiza avaliação em campo ou laboratorial. Há um número significativo de investigações na área hospitalar, pesquisas de usabilidade sensíveis ao contexto, e também, a avaliação de usabilidade para determinados perfis (idosos, adolescentes, especialistas) o que demonstra experimentações com dados reais, em campo ou em laboratório. A Tabela 11 apresenta sucintamente parte dos artigos analisados considerando os últimos 10 anos.

Tabela 11. Estudo das relações

4. Conclusões

Esse estudo teve como objetivo geral investigar as propostas mais relevantes com relação a usabilidade móvel, identificando os principais e mais atuais estudos realizados no mundo nos últimos 20 anos.

Foram seguidos os sete passos do enfoque meta analítico e, inicialmente, foram identificadas e selecionadas as principais revistas do domínio estudado. A coleta de dados permitiu identificar que, o crescimento do quantitativo de artigos sobre esse assunto é significativo, o que se justifica pela necessidade da academia e da indústria de investigar cada vez mais a usabilidade móvel, considerando os avanços tecnológicos dos últimos anos e o lançamento constante de novos produtos móveis no mercado.

A análise dos autores e artigos possibilitou identificar o interesse de todos os países com relação a esse tema. A participação do Brasil, na base da Web of Science, é pouco representativa com relação usabilidade móvel.

A determinação dos enfoques e a análise das palavras chaves e relacionamentos permitiu inferir que parte dos estudos de usabilidade móvel abrange investigações na área hospitalar, estudos de usabilidade e context aware e também, a avaliação de usabilidade para determinados perfis (idosos, adolescentes, especialistas) o que demonstra experimentações com dados reais, em laboratório ou em campo.    

Aplicando as sete fases do enfoque meta analítico, foi possível responder aos questionamentos da pesquisa. A usabilidade nos dispositivos móveis está alinhada a evolução das pesquisas e os estudos realizados nos últimos anos propõem ou identificam como implementar uma melhor usabilidade nesse contexto. Com relação aos países que mais investigam sobre esse assunto, identificaram-se vários países, entre eles, USA, Germany e South Korea, o que aponta o interesse internacional sobre o tema.

Mas também foi possível analisar que nenhuma das Revistas/Conferências que mais publicaram artigos com o tema, está inserida entre as primeiras 100 revistas com maior fator de impacto. Isso permite inferir que esse tema, na base consultada, apesar de muito importante para o mercado tem tido poucas pesquisas representativas (considerando o quantitativo de citações no contexto pesquisado e o quantitativo total de citações desta área do conhecimento) no meio acadêmico e na indústria.          

Como sugestão de trabalhos futuros, a pesquisa poderá ser expandida para outras bases, possibilitando uma abrangência maior.

Referências

ABNT NBR ISO. ABNT NBR ISO 9241-11:2011 - Ergonomic requirements for office work with visual display terminals (VDTs) - Part 11: Guidance on usability. São Paulo, Brasil: ABNT. 2011. Disponível em <http://www.abntcatalogo.com.br/norma.aspx?ID=86090>. Acesso em <22 de 02 de 2015>.

DANTAS, V. L. Requisitos para Testes de Aplicações Móveis. Dissertação (Mestrado em Ciência da Computação). Fortaleza: Departamento de Computação, Universidade Federal do Ceará, Fortaleza, 2009.

ESTADÃO. Smartphones devem superar PCs em 2014. Estadao: São Paulo, SP, Brasil. 2013. Disponível em <http://blogs.estadao.com.br/link/smartphones-devem-superar-pcs-em-2014/>. Acesso em <22 de 02 de 2015>.

EXAME. Brasil tem a quinta maior base de smartphones do mundo. São Paulo, Brasil. 2014. Disponível em <http://exame.abril.com.br/tecnologia/noticias/brasil-tem-a-quinta-maior-base-de-smartphones-do-mundo>. Acesso em <22 de 02 de 2015>.

GARCIA, C. & RAMIREZ, C. El meta análisis como instrumento de investigación en la determinacion y análisis del objeto del estudio: Aplicado al estudio de sistema de información. Congresso de Alicante, 2004. pp. 1-13.

INSTITUTE FOR SCIENTIFIC INFORMATION. Journal of citation reports. Fonte: JCR.1998.

MARIANO, A. M., GARCIA CRUZ, R., & ARENAS GAITAN, J. Meta Análises como instrumento de pesquisa: uma revisão sistemática da bibliografia aplicada ao estudo das alianças estratégicas internacionais. Congresso internacional de Administração: Gestão Estratégica: inovação colaborativa e competitividade (p. 12 pp). Ponta Grossa Parana: UEPG, 2011.

NIELSEN, J. Usabilty Engineering. San Francisco: Morgan Kaufmann, 1993.

NIELSEN, J. Usabilidade móvel. Rio de Janeiro: Campus, 2014.

OLIVEIRA, L. & STEIN, M. Usabilidade em aplicativos para celular e gestão de design. Programa de Pós-Graduação da UFSC. Santa Catarina, Santa Catarina, Brasil, 2012.

RAMIREZ CORREA, P. & GARCIA CRUZ, R. Meta-analisis sobre la implantacion de sistemas de planificacion de recursos empresariales. (T. F. USP, Ed.) Journal of information systems and technology management, 2(3), 2005. pp. 245-273.

1. Centro Universitário de Brasilia (UNICEUB) Brasília – Brazil. Email: angelica.calazans@uniceub.br

2. Centro Universitário de Brasilia (UNICEUB) Brasília – Brazil. Email: roberto.paldes@uniceub.br

3. Caixa Econômica Federal Brasília - Brazil. Email: eloisa.masson@caixa.gov.br