what the hell is a field trial

Clique para editar os estilos •  Segundo nível

•  Terceiro nível

1

What the hell is a Field trial

Jorge Ferraz de Abreu | Pedro Almeida | seminário mcmm 2011

?



2

Field Trial – O quê e para quê? O caso das aplicações de TV interativa

O problema

As 3 fases de um FT

Trabalho de grupo

Discussão – os casos WeOnTV e Wize

2

Estrutura do seminário

What the hell is a FT



3

Metodologia de avaliação no terreno

Integração em contexto real de utilização

3

O que é?

Field trial



4

+ Liberta dos constrangimentos do laboratório

+ Menos invasivo para os utilizadores

+ Mais natural - Menos controlo - Mais difícil de implementar

4

Para que (e porque) serve?

Field trial



5 5

N aplicações... Que necessitam de um Field Trial



6 6

As aplicações de iTV



7

full screen option channel info

buddy list (TV & PC)



8 channel recommendation

text messages



9 9


um sítio de suporte



10



11 11


um SID secondary input device



12 12



13 13




14

Execução do Field Trial

01. A Aplicação

Colocar vídeo



15 15


um use case



16



17



18



19

testar apps em STB comerciais cenário reais (casa das pessoas) sem intervenção direta dos avaliadores

19

O problema

O problema



20

Fase 1

Fase 2

Fase 3

20

Venham elas!

As 3 fases do FT o antes

o durante

o depois



21

Fase 1 – o que contempla? 1.  definição dos objetivos do FT

2.  como angariar utilizadores

3.  definição das variáveis (caracterização da amostra)

4.  definição dos instrumentos de recolha

21

Macro-temas

As 3 fases do FT



22

Fase 2 – o que contempla? 5.  Como garantir que usam as funcionalidades e como

dinamizar?

22

Macro-temas

As 3 fases do FT

Fase 3 – o que contempla? 6.  Recolha de dados e aferição das conclusões



23

6 grupos 15 minutos algumas ideias

análise | problemas | soluções 23

Trabalho de grupo



24 24

Vamos a isto!

Trabalho de grupo



25 25

Objetivos do Field Trial

Conclusões vs factos Usabilidade

Integração nas rotinas diárias

Adequação a modelo de negócio



26 26

Como angariar utilizadores?

Conclusões vs factos

1. Telefonar a anónimos?

§  200 contactos;

§  38 telefonemas iniciais com sucesso

§  2 mostraram-se eventualmente disponíveis!



27 27



1b. Estratégia FOAF

§  Friend of a Friend



28


28

03. Os usos



29


29

03. Os usos



30 30



2. Recorrer a beta testers?

§  30 beta-testers da PT

§  22 utilizaram

§  11 responderam ao questionário final



31 31



3. Recorrer a instituições?

§  Para públicos específicos

§  Eventuais problemas de homogeneização da amostra



32 32

Variáveis de caraterização da amostra

Conclusões vs factos Idade

Género

Consumo televisivo

Atividade e laços sociais

Literacia digital

Agregado familiar



33

Fase 1 §  Questionários à 1 ou 2?

§  Entrevistas

33

Instrumentos de recolha de dados




34 34

Instrumentos de recolha de dados

Conclusões vs factos Fase 2 §  Registos de interação

§  Contactos diretos

§  Cultural probes

§  Diários



35

muitas opiniões

35



36

muitas opiniões

36



37 37

Como incentivar e dinamizar o FT?

Conclusões vs factos Faseamento de funcionalidades Guião de tarefas Serviço de helpdesk



38 38


Conclusões vs factos Desafios e jogos em rede



39 39


Conclusões vs factos Informação e atualizações



40 40


Conclusões vs factos Acompanhar os instrumentos de recolha de dados



41 41

Recolha final de dados

Conclusões vs factos Questionário final assistido ou à distância

Entrevistas Focus Groups



42 42



43 43

Colocar imagem a jantar – pizas e afins!!!!!



44 44

Colocar imagem a jantar – pizas e afins!!!!!



45 45

Quero ter gratuitamente uma aplicação de TV social?

0% 0%

36%

64%

0%

50%

100%

Muito Pouco Interesse Pouco Interesse Interesse Médio Muito Interesse

Já agora!

what the hell is a field trial

Education

segundo nvel terceiro

clique para editar os

clique para editar os

nvel segundo registos

clique para editaravaliao

segundo nvelrecorrer

segundo nveltelefonar

tarefas terceiro nvelservio