Para Jick (1979, p. 603), o uso de técnicas complementares é considerado como guia para validação de resultados. Isso porque, o uso de múltiplas técnicas permite obter informações que tenham sido negligenciadas por uma das técnicas
adotadas. Denzin (1978, p. 291 apud Jick, 1979, p. 602) define a triangulação como a combinação de metodologias no estudo de um fenômeno. Para o autor, o uso de diversas técnicas para o estudo de um fenômeno possibilita um exame mais congruente, ao permitir a obtenção de diversos pontos de vista de um mesmo objeto e assim ter uma visão mais clara do objeto de estudo. O uso combinado de técnicas permite examinar um mesmo fenômeno de várias perspectivas, bem como enriquecer a compreensão do que é novo, ou aprofundar a compreensão sobre as dimensões envolvidas.
Jick (1979, p. 602) afirma que “os métodos qualitativos e quantitativos devem ser vistos como complementares e não como rivais”. A afirmação reflete a tentativa de usar a triangulação de técnicas para integrar o trabalho de campo e o levantamento de dados (survey), mas considera principalmente que a eficácia do uso de diversas técnicas consiste em contrabalancear forças e fraquezas de cada técnica individualmente. Assim, o uso de técnicas de coleta de dados variadas contribui para a confiabilidade dos resultados e identificação de teorias e modelos que devem ser refeitos ou sintetizados. (JICK, 1979, p. 609)
Pelas justificativas apresentadas, foi utilizada a triangulação de técnicas nesta pesquisa: análise documental, questionário eletrônico disponível em link para ser respondido on-line e entrevistas por telefone.
A análise documental foi realizada por meio do exame de documentos internos da CAPES sobre o histórico do Portal de Periódicos, relatórios técnicos e anuais e ainda legislação sobre o PAAP. Também foi consultado o Portal de Periódicos da CAPES para observar os procedimentos de interação com os usuários para uso das possibilidades de personalização dos serviços de informação oferecidos no Portal. Para apoiar a observação, foi elaborado um roteiro (Apêndice D) dos pontos a serem observados durante a coleta destes dados. A análise documental e a observação direta do Portal tiveram o objetivo de descrever a oferta de serviços de informação, indicando os tipos de serviços oferecidos, os propósitos e a abrangência do Portal e o público a que se destina o Portal de Periódicos da CAPES.
Os serviços de informação oferecidos pelo Portal identificados foram confrontados com os estudos sobre essa temática abordados na revisão de literatura em relação aos serviços e produtos de informação considerados relevantes sob a
ótica dos conceitos de bibliotecas virtuais, portais e oferta desses serviços na web com a possibilidade de personalização. Esta análise fundamentou a discussão dos dados coletados com a análise documental, a observação direta do Portal e a análise das respostas obtidas por questionários e entrevistas com os mediadores e
helpdesks do Portal que participaram desta pesquisa. Este procedimento foi
determinante, em especial para o entendimento da personalização oferecida no Portal em estudo.
A coleta de dados realizou-se por meio de levantamento do tipo survey, por
meio de questionário eletrônico cujo link para acesso
(http://www.surveymonkey.com/s/questionario_novo_portal_periodicos_capes) foi encaminhado por e-mail para os 55 diretores de bibliotecas das instituições participantes da pesquisa para solicitar a colaboração mediante o preenchimento do questionário pelos mediadores que prestam serviço de informação no Portal de Periódicos da CAPES aos usuários finais do Portal na instituição. Segundo Cunha (1982, p. 8), “o uso de questionários permite atingir, ao mesmo tempo, uma grande população dispersa numa ampla região geográfica.” E “dá maior grau de liberdade e tempo ao respondente, pois o mesmo não é constrangido pela presença do entrevistador”.
O questionário foi elaborado de forma a coletar dados sobre o perfil dos mediadores, bem como a forma de prestação de serviço nas IES, caracterização da infra-estrutura utilizada para a prestação do serviço na IES, e ainda para obter a opinião destes profissionais sobre as alterações realizadas no Portal com as possibilidades de personalização dos serviços de informação oferecidos. Para isso, foi encaminhado por e-mail o link para acesso ao questionário que ficou disponível on-line com 46 questões divididas em quatro tópicos: (1) perfil do mediador com 6 questões; (2) preferências do mediador com relação a serviços de personalização com 9 questões; (3) infra-estrutura da IES onde o mediador presta serviço com 19 questões; (4) opinião do mediador sobre os serviços de informação do Portal com relação à personalização com 12 questões.
Para a validação e adequação do questionário foram realizados pré-testes com sete profissionais considerando todos os aspectos do questionário (conteúdo das perguntas, seqüência e formato). Por necessidade de semelhança de características dos sujeitos que participaram do pré-teste com os sujeitos que
comporiam a população a ser pesquisada e pela necessidade de familiaridade dos sujeitos com o assunto abordado nos questionários, foram utilizadas 11 instituições participantes do Portal de Periódicos, localizadas em Brasília, excluindo as instituições federais, que integrariam a amostra a ser pesquisada. Os pré-testes foram úteis para que verificação das possíveis dificuldades no preenchimento do questionário e por essa razão, os questionários foram distribuídos e aplicados pessoalmente para que a verificação das dificuldades no preenchimento do questionário fossem acompanhadas pessoalmente.
Os pré-testes foram aplicados em maio de 2010. As questões apresentadas foram reagrupadas e algumas foram reformuladas de forma a tornarem-se mais claras de acordo com as sugestões dos profissionais que participaram do pré-teste.
Foram necessárias muitas questões, já que a personalização de serviços de informação na web é um assunto novo e por isso as perguntas precisavam ser redigidas de modo que a abordagem do tema fosse introduzida paulatinamente. Esse cuidado permitiu que os respondentes tivessem melhor entendimento das questões, principalmente as específicas sobre a personalização. Entretanto, o questionário foi estruturado de forma a permitir respostas negativas e positivas com possibilidade de complementação, caso fosse do interesse do respondente esclarecer. Esta providência contribuiu para que o preenchimento fosse mais rápido.
Reformatado, o questionário foi colocado à disposição para preenchimento por meio do website SurveyMonkey (https://www.surveymonkey.com/) que permite a criação de web surveys a ser preenchido pelos mediadores de serviços de informação do Portal de Periódicos da CAPES nesta pesquisa.
A coleta de dados com as helpdesks foi realizada por meio de entrevista por telefone, utilizando como base para elaboração do roteiro o questionário elaborado para ser respondido pelos mediadores (Apêndice B), complementado com outras perguntas mais específicas sobre a personalização dos serviços oferecidos pelo Portal em estudo. O objetivo da entrevista foi esclarecer possíveis dúvidas surgidas a partir da análise das respostas dos mediadores obtidas por questionário, em especial as respostas específicas sobre a personalização dos serviços oferecidos pelo Portal.
Como entre os mediadores identificados para responder o questionário pelos diretores das bibliotecas para responderem ao questionário, em alguns casos foram
incluídos as helpdesks, na elaboração dos roteiros das entrevistas com essas profissionais, houve a preocupação em personalizar cada roteiro, de acordo com a participação de cada helpdesk, respondendo ou não aos questionários enviados.