Return to Video

Lecture 1.3: Evaluating Designs

  • 0:01 - 0:06
    De muitas maneiras, o mais criativo, desafiador, e subestimado aspecto de design de interação
  • 0:06 - 0:08
    é a avaliação de designs com pessoas.
  • 0:08 - 0:12
    As percepções que você vai começar adquirir a partir do teste de designs com pessoas
  • 0:12 - 0:16
    podem ajudá-lo a ter novas idéias, fazer mudanças, decidir sabiamente, e corrigir erros
  • 0:16 - 0:21
    Uma razão que acho que design é um campo tão interessante é sua relação com a verdade e objetividade.
  • 0:21 - 0:26
    Acho design tão incrivelmente fascinante porque nós podemos dizer mais em resposta a uma pergunta como:
  • 0:26 - 0:33
    "Como podemos medir o sucesso?" do que "É apenas uma preferência pessoal" ou "qualquer coisa que faça sentido."
  • 0:33 - 0:37
    Ao mesmo tempo, as respostas são mais complexas e mais abertas, mais subjetivas,
  • 0:37 - 0:42
    e requerem mais sabedoria que apenas um número como 7 ou 3.
  • 0:42 - 0:44
    Uma das coisas que vamos aprender nesta aula
  • 0:44 - 0:48
    são os diferentes tipos de conhecimento que você pode tirar de diferentes tipos de métodos.
  • 0:48 - 0:53
    Por que avaliar designs com pessoas? Por que aprender sobre como as pessoas usam sistemas interativos?
  • 0:53 - 0:58
    Acho que uma das principais razões é que pode ser difícil dizer o quão boa uma interface de usuário é
  • 0:58 - 1:04
    até que você a tenha testado com usuários reais.
    Isso é porque clientes, designers e desenvolvedores,
  • 1:04 - 1:07
    podem saber demais sobre o domínio e a interface do usuário,
  • 1:07 - 1:11
    ou ter adquirido uma visão limitada do design e construção dessas interfaces.
  • 1:11 - 1:15
    Ao mesmo tempo, eles podem não saber o suficiente sobre as tarefas reais do usuário.
  • 1:15 - 1:21
    E, embora a experiência e a teoria possam ajudar, ainda pode ser difícil prever o que os usuários reais vão realmente fazer.
  • 1:22 - 1:25
    Você pode querer saber, "As pessoas podem descobrir como usar isto?"
  • 1:25 - 1:29
    ou "Será que eles praguejam ou riem quando utilizam esta interface?"
  • 1:29 - 1:31
    "Como comparar este design àquele design?"
  • 1:31 - 1:35
    e, "Se nós mudamos a interface, como muda o comportamento das pessoas?"
  • 1:35 - 1:39
    "Que novas práticas podem surgir?" "Como as coisas mudam ao longo do tempo?"
  • 1:39 - 1:45
    Estas são todas grandes questões a fazer sobre uma interface, e cada uma virá de diferentes métodos.
  • 1:45 - 1:50
    O valor de ter uma caixa de ferramentas com muitos métodos diferentes pode ser especialmente claro em áreas emergentes
  • 1:50 - 1:56
    como software móvel e social onde as práticas de uso das pessoas pode ser particularmente dependentes do contexto
  • 1:56 - 2:01
    e também evoluir significativamente ao longo do tempo em resposta a como as pessoas usam o software
  • 2:01 - 2:03
    através de efeitos de networking e coisas assim.
  • 2:03 - 2:09
    Para lhe dar um sabor disso, gostaria de mostrar rapidamente alguns tipos comuns de pesquisa empírica em HCI.
  • 2:09 - 2:12
    Os exemplos que vou mostrar são, na sua maioria, trabalhos publicados de um tipo ou outro,
  • 2:12 - 2:14
    porque essas são as coisas mais fáceis de compartilhar.
  • 2:14 - 2:19
    Se você tem bons exemplos de sistemas atuais do mundo real, publique-os no fórum!
  • 2:19 - 2:21
    Eu mantenho um arquivo de exemplos de interfaces do usuário,
  • 2:21 - 2:24
    e eu e os outros estudantes gostaríamos de ver o que você pode contribuir.
  • 2:24 - 2:27
    Uma maneira de aprender sobre a experiência do usuário de um design
  • 2:27 - 2:31
    é trazer as pessoas para seu laboratório ou escritório e fazê-las experimentá-lo.
  • 2:31 - 2:33
    Costumamos chamar isso de estudos de usabilidade.
  • 2:33 - 2:37
    Essa abordagem de "observar alguém usar a minha interface" é comum em HCI.
  • 2:37 - 2:44
    Esta estratégia básica para o projeto centrado no usuário tradicional consiste em trazer as pessoas de forma interativa
  • 2:44 - 2:48
    para seu laboratório ou escritório até que você não tenha mais tempo. E em seguida, distribuir seu software.
  • 2:48 - 2:52
    E, se você tiver dinheiro, as salas usadas podem ter um espelho de vidro unidireccional,
  • 2:52 - 2:55
    e a equipe de desenvolvimento pode ficar no outro lado.
  • 2:55 - 2:59
    Em um ambiente mais modesto, você pode trazer as pessoas para seu escritório ou alojamento estudantil.
  • 2:59 - 3:02
    Você vai aprender muito fazendo isso.
  • 3:02 - 3:05
    Toda vez que eu ou um estudante, amigo, ou colega
  • 3:05 - 3:08
    assistiu alguém novo usar um novo sistema interativo,
  • 3:08 - 3:14
    nós aprendemos alguma coisa, como designers ficamos cegos a peculiaridades , bugs e falsas premissas dos sistemas.
  • 3:15 - 3:20
    No entanto, há algumas desvantagens importantes nessa abordagem.
  • 3:20 - 3:24
    Em particular, o cenário não é provavelmente muito ecologicamente válido.
  • 3:24 - 3:29
    No mundo real, as pessoas podem ter diferentes tarefas, objetivos, motivações, e ambientes físicos
  • 3:29 - 3:32
    que seu escritório ou laboratório.
  • 3:32 - 3:35
    Isso pode ser especialmente verdade para interfaces que você acha que as pessoas possam usar em qualquer lugar,
  • 3:35 - 3:38
    como em uma parada de ônibus ou enquanto esperam numa fila.
  • 3:38 - 3:41
    Em segundo lugar, pode haver um viés experimental de "me satisfaça",
  • 3:41 - 3:44
    onde quando você traz alguém para experimentar uma interface de usuário,
  • 3:44 - 3:47
    eles sabem que eles estão testando a tecnologia que você desenvolveu
  • 3:47 - 3:51
    e assim eles podem trabalhar mais ou ser mais agradáveis
  • 3:51 - 3:55
    do que seriam se tivessem que usá-la sem as limitações de uma configuração de laboratório
  • 3:55 - 3:58
    com a pessoa que a desenvolveu assistindo-as.
  • 3:58 - 4:03
    Em terceiro lugar, em sua forma mais básica, onde você está testandi apenas uma interface de usuário, não há ponto de comparação.
  • 4:03 - 4:09
    Apesar de você poder controlar quando as pessoas riem, ou xingam, ou sorriem de alegria,
  • 4:09 - 4:12
    você não vai saber se elas ririam mais, ou xingariam menos, ou sorririam mais
  • 4:12 - 4:15
    se você tivesse uma interface de usuário diferente.
  • 4:15 - 4:18
    E, finalmente, requer levar as pessoas a sua localização física.
  • 4:18 - 4:21
    Isso é muitas vezes mais fácil do que muita gente pensa.
  • 4:21 - 4:24
    Mas pode ser, se mais nada, um fardo psicológico.
  • 4:24 - 4:28
    Uma maneira muito diferente de receber feedback das pessoas é a utilização de uma survey.
  • 4:28 - 4:31
    Aqui está um exemplo de uma survey que recebi recentemente de São Francisco
  • 4:31 - 4:34
    perguntando sobre designs de luzes de rua diferentes.
  • 4:34 - 4:38
    Surveys são ótimas porque você pode rapidamente obter feedback de um grande número de pessoas.
  • 4:38 - 4:41
    E é relativamente fácil comparar múltiplas alternativas.
  • 4:41 - 4:44
    Você pode também automaticamente contar os resultados.
  • 4:44 - 4:48
    Você não precisa nem mesmo construir qualquer coisa, você pode mostrar apenas telas de computador ou maquetes.
  • 4:48 - 4:51
    Porém, uma das coisas que aprendi, da maneira mais difícil,
  • 4:51 - 4:55
    é a diferença entre o que as pessoas dizem que vão fazer e o que elas realmente fazem.
  • 4:55 - 4:59
    Pergunte às pessoas quantas vezes elas se exercitam e você provavelmente vai receber uma resposta muito mais otimista
  • 4:59 - 5:02
    do que que quantas vezes eles realmente fazem exercícios.
  • 5:02 - 5:05
    O mesmo vale para esse exemplo da luz de rua.
  • 5:05 - 5:09
    Tentar imaginar como uma série de desenhos de luzes de rua diferentes poderão ser
  • 5:09 - 5:12
    é realmente diferente do que realmente observá-los na rua
  • 5:12 - 5:15
    e vê-los se tornar parte da vida cotidiana normal.
  • 5:15 - 5:18
    Ainda assim, ela pode ser útil para obter feedback.
  • 5:18 - 5:20
    Outro tipo de estratégia são os grupos de foco.
  • 5:20 - 5:26
    Em um grupo de foco, você reune um pequeno grupo de pessoas para discutir um projeto ou ideia.
  • 5:26 - 5:31
    O fato de que grupos de foco envolvem um grupo de pessoas é uma faca de dois gumes.
  • 5:31 - 5:38
    Por um lado, você pode levar as pessoas a tirar coisas de seus colegas que eles poderiam não ter pensado
  • 5:38 - 5:45
    em dizer por conta própria; por outro lado, por uma variedade de razões psicológicas, as pessoas podem ser inclinados
  • 5:45 - 5:49
    dizer coisas gentis ou gerar respostas completamente de momento
  • 5:49 - 5:54
    que são totalmente não correlacionado com o que eles acreditam ou o que eles realmente fazem.
  • 5:55 - 6:00
    Os grupos de foco pode ser um método particularmente problemático quando você está tentando coletar dados
  • 6:00 - 6:04
    sobre temas tabu ou sobre preconceitos culturais.
  • 6:04 - 6:07
    Com essas ressalvas - nós estamos apenas fazendo apenas uma lista de opções -
  • 6:07 - 6:12
    Acho que grupos de foco, como quase qualquer outro método, poden desempenhar um papel importante em seu cinto de ferramentas.
  • 6:13 - 6:17
    Nossa terceira categoria de técnicas é obter feedback de especialistas.
  • 6:17 - 6:23
    Por exemplo, neste curso vamos fazer um monte de crítica aos pares nas suas atribuições de projetos semanais.
  • 6:23 - 6:25
    Além de ter usuários testando a sua interface,
  • 6:25 - 6:30
    pode ser importante usar e testar as ferramentas que você montou.
  • 6:30 - 6:35
    Quando você está recebendo feedback de especialistas, muitas vezes pode ser útil ter algum tipo de formato estruturado,
  • 6:35 - 6:39
    parecem com os pontos que você verá nas descrições de seu projeto.
  • 6:39 - 6:45
    E, para obter feedback sobre interfaces de usuário, uma abordagem comum desse feedback estruturado
  • 6:45 - 6:48
    é chamada de avaliação heurística, e você vai aprender como fazer isso neste curso;
  • 6:48 - 6:51
    Seu pioneiro foi Jacob Nielson.
  • 6:51 - 6:53
    Nosso próximo tópico são experimentos comparativos:
  • 6:53 - 6:58
    tendo duas ou mais opções distintas e comparando o desempenho de cada.
  • 6:58 - 7:00
    Essas comparações podem ocorrer em muitos locais diferentes:
  • 7:00 - 7:04
    Laboratório, no campo, pode ser online.
  • 7:04 - 7:07
    Essas experiências podem ser mais ou menos controladas,
  • 7:07 - 7:10
    e podem ter lugar ao longo de períodos mais curtos ou mais longos.
  • 7:10 - 7:14
    O que você está tentando aprender aqui é qual é a opção mais eficaz,
  • 7:14 - 7:17
    e, mais frequentemente, quais são os ingredientes ativos,
  • 7:17 - 7:21
    quais são as variáveis que importam na criação da experiência do usuário que você procura.
  • 7:22 - 7:27
    Aqui está um exemplo: Meu ex-aluno de doutorado Joel Brandt, e seu colega da Adobe,
  • 7:27 - 7:31
    publicaram uma série de estudos que comparam as interfaces de ajuda para programadores.
  • 7:32 - 7:38
    Em particular, eles compararam uma interface de usuário no estilo de busca tradicional para encontrar ajuda de programação
  • 7:38 - 7:43
    com uma interface de busca que integrava ajuda de programação diretamente no ambiente de trabalho.
  • 7:43 - 7:47
    Ao executar essas comparações eram capazes de ver como o comportamento dos programadores diferiam
  • 7:47 - 7:51
    baseado na mudando da interface de ajuda ao usuário.
  • 7:51 - 7:54
    Experimentos comparativos têm uma vantagem sobre pesquisas
  • 7:54 - 7:57
    em que você começa a ver o comportamento real, em oposição ao que o usuário diz,
  • 7:57 - 8:02
    e eles podem ser melhores do que estudos de usabilidade, porque você está comparando múltiplas alternativas.
  • 8:02 - 8:07
    Isso permite que você veja o que funciona melhor ou pior, ou pelo menos o que funciona diferente.
  • 8:07 - 8:10
    Também acho que, frequentemente, dá para fazer mais coisas a partir do feedback comparativo.
  • 8:11 - 8:14
    No entanto, se você estiver executando experimentos controlados on-line,
  • 8:14 - 8:18
    você não consegue ver muito sobre a pessoa do outro lado da tela.
  • 8:18 - 8:21
    E se você convida pessoas para seu escritório ou laboratório,
  • 8:21 - 8:24
    o comportamento que você está medindo pode não ser muito realista.
  • 8:24 - 8:30
    Se o comportamento longitudinal realista é o que você está querendo, a observação participante pode ser a abordagem para você.
  • 8:30 - 8:36
    Esta abordagem é apenas o que parece: observar o que as pessoas realmente fazem em seu ambiente de trabalho real.
  • 8:36 - 8:40
    E essa avaliação de mais longo prazo pode ser importante para descobrir as coisas
  • 8:40 - 8:44
    que você não pôde ver no curto prazo, em cenários mais controlados.
  • 8:44 - 8:48
    Por exemplo, os meus colegas Bob Sutton e Andrew Hargadon estudaram brainstorming.
  • 8:48 - 8:52
    A literatura sobre o brainstorming anterior tinha se concentrado principalmente em questões como
  • 8:52 - 8:54
    "As pessoas vêm com mais ideias?"
  • 8:54 - 8:57
    O que Bob e Andrew perceberam indo para o campo
  • 8:57 - 9:01
    foi que o brainstorming servia a um número de outras funções também,
  • 9:01 - 9:05
    como, por exemplo, brainstorming fornece uma maneira para que os membros da equipe de design
  • 9:05 - 9:08
    demonstrem a sua criatividade para seus pares;
  • 9:08 - 9:13
    o que lhes permite passar adiante conhecimentos que podem então ser reutilizados em outros projetos;
  • 9:13 - 9:19
    e cria um ambiente divertido e excitante onde as pessoas gostam de trabalhar e que os clientes gostam de participar.
  • 9:19 - 9:22
    Em um ecossistema real, todas essas coisas são importantes,
  • 9:22 - 9:26
    além de apenas se coletar as ideias que as pessoas têm.
  • 9:26 - 9:33
    Quase todos os experimentos procuram construir uma teoria em algum nível - não quero dizer nada complicado com isso,
  • 9:33 - 9:37
    só que nós decidimos que algumas coisas são mais relevante, e outras coisas menos relevantes.
  • 9:37 - 9:39
    Poderíamos, por exemplo, assumir
  • 9:39 - 9:43
    que a ordem dos resultados de pesquisa podem desempenhar um papel importante no que as pessoas clicam,
  • 9:43 - 9:46
    mas que a média de acertos das rebatidas dos Tigres de Detroit não faz,
  • 9:46 - 9:50
    a menos, é claro, se alguém estiver procurando por beisebol.
  • 9:50 - 9:55
    Se você tem uma teoria que suficientemente formal matematicamente, você pode fazer previsões.
  • 9:55 - 10:00
    Então você pode comparar interfaces alternativas que utilizem esse modelo, sem ter que involver pessoas.
  • 10:00 - 10:06
    Nós vamos falar um pouco sobre isso nest e curso, no que diz respeito a modelos de entrada.
  • 10:06 - 10:10
    Isto torna possível experimentar um certo número de alternativas muito rápido.
  • 10:10 - 10:12
    Consequentemente, quando as pessoas usam simulações,
  • 10:12 - 10:16
    é muitas vezes em conjunto com algo como Monte Carlo otimização.
  • 10:16 - 10:20
    Um exemplo disto pode ser encontrado no sistema ShapeWriter,
  • 10:20 - 10:23
    onde Shuman Zhai e seus colegas descobriram como construir um teclado
  • 10:23 - 10:26
    onde as pessoas pudem introduzir uma palavra inteira em um único golpe.
  • 10:26 - 10:31
    Eles foram capazes de fazer isso com o benefício de modelos formais e abordagens baseadas em otimização.
  • 10:31 - 10:34
    Simulação tem sido usada principalmente para técnicas de entrada
  • 10:34 - 10:40
    porque o desempenho motor das pessoas é provavelmente a área mais bem quantificada em HCI.
  • 10:40 - 10:43
    E, apesar de que não teremos muito de simulação neste curso introdutório,
  • 10:43 - 10:46
    ela pode também ser utilizada para tarefas de nível cognitivo mais alto;
  • 10:46 - 10:48
    por exemplo, Pete Pirolli e colegas do PARC
  • 10:48 - 10:52
    construíram modelos impressionantes do comportamento das pessoas "surfando" na web.
  • 10:52 - 10:57
    Estes modelos lhes permitam estimar, por exemplo, que links alguém é mais propensos a clicar
  • 10:57 - 11:00
    ao olhar para os textos de links relevantes.
  • 11:00 - 11:05
    Esse foi nossa excursão rápida de uma série de métodos empíricos que este curso vai introduzir.
  • 11:05 - 11:09
    Você vai querer escolher o método certo para a tarefa certa, e aqui temos algumas questões a considerar:
  • 11:09 - 11:13
    Se você fizer novamente, você vai conseguir a mesma coisa?
  • 11:13 - 11:19
    Outra é a generalização e realismo - Será que isto é verdade para outras pessoas além de estudantes
  • 11:19 - 11:23
    de faculdade com 18 anos e de classe média que estão fazendo isto por crédito em um curso ou um vale presente?
  • 11:23 - 11:29
    Este é um comportamento que você vê também no mundo real, ou apenas num ambiente de laboratório sofisticado?
  • 11:29 - 11:31
    As comparações são importantes, porque elas podem te dizer
  • 11:31 - 11:34
    como a experiência do usuário mudaria com escolhas de interfaces diferentes,
  • 11:34 - 11:39
    ao invés de apenas um estudo tipo "as pessoas gostaram" .
  • 11:39 - 11:43
    Também é importante pensar sobre como alcançar como essas metas de forma eficiente,
  • 11:43 - 11:49
    e não desperdiçar um monte de recursos, especialmente quando o objetivo é prático.
  • 11:49 - 11:54
    Minha experiência como designer, pesquisador, professor, consultor, conselheiro e mentor me ensinou
  • 11:54 - 12:01
    que a avaliação de projetos com as pessoas é mais fácil e mais valiosa do que muitas pessoas esperam,
  • 12:01 - 12:05
    e há um momento de eureka incrível que acontece
  • 12:05 - 12:09
    quando você realmente coloca designs na frente das pessoas e vê como elas os usam.
  • 12:09 - 12:13
    Então, para resumir este vídeo, gostaria de perguntar o que poderia ser a pergunta mais importante:
  • 12:13 - 12:15
    "O que você quer aprender?"
Title:
Lecture 1.3: Evaluating Designs
Description:

Lecture 1.3: Evaluating Designs

more » « less
Video Language:
English

Portuguese, Brazilian subtitles

Revisions