Vista previa del material en texto
Módulo 1 Fundamentos de Product Discovery Como fazer Discovery no Dia a Dia Dan Printes Atualmente Dan Mark Printes Chief Product Officer na Tapps Games Mini-currículo - + 20 anos de experiência em Internet sendo os últimos 6 anos em Produto - Background Técnico - Trabalhos envolvendo usabilidade e UX desde 2006 - Gestor de Times Multidisciplinares - Consultor de Produto e Growth Life Achievements 💻 Cientista da computação com pós em análise de sistemas 🚼🚼 Pai dos gêmeos Erick e Natália Quem sou eu https://br.linkedin.com/in/danmarkprintes Agenda desta aula 1. Como fazer Discovery no Dia a Dia 3. Encontrando oportunidades e entregando resultados 4. Case Tapps Games 2. Divisão de Papéis e Responsabilida des Agenda desta aula 1. Como fazer Discovery no Dia a Dia 3. Encontrando oportunidades e entregando resultados 4. Case Tapps Games 2. Divisão de Papéis e Responsabilida des 1 Como fazer discovery no Dia a Dia Relembrando: Discovery -> Delivery Protótipos são feitos em Discovery. Produtos são feitos em Delivery. O Objetivo do Discovery é aprendermos rápido sobre o problema e explorarmos qual a melhor solução para nossos usuários dado um determinado objetivo ou oportunidade. O resultado de um bom Discovery é um backlog de Produto validado e com menor risco para o Delivery. Relembrando: Discovery -> Delivery Protótipos são feitos em Discovery. Produtos são feitos em Delivery. O Objetivo do Delivery é entregarmos valor rápido para os usuários. O resultado de um bom Delivery é software em produção que performa bem e é fácil de manter. Relembrando: Discovery -> Delivery Partimos de um resultado de negócio e entregamos resultado por meio do usuário WATERFALL ? NÃO :) Mas isso não é, basicamente... WATERFALL ? Vejamos por que não ● No waterfall, normalmente o PM passa os requisitos para os designers, que gera um wireframe de alta fidelidade com anotações que são entregues para os Devs para desenvolverem e testarem a solução e colocar no ar. ● Discovery e Delivery não são fases. São atividades. Elas acontecem em paralelo e não uma depois da outra. ● O Discovery deve acontecer ao mesmo tempo que o Delivery, onde o Discovery Team (Designers, PM e Tech Lead) colaboram na rápida validação de hipóteses de solução e o Delivery Team (engenheiros e o restante do time) constroem algo já validado no backlog. ● Mais importante: ao contrário do waterfall, a validação da solução acontece durante o Discovery, da forma mais rápida e lean possível, idealmente sem uso de código de produção de forma a reduzir os riscos de valor, usabilidade, factibilidade e viabilidade. ● Assim reduzimos desperdícios e entregamos valor real aos usuários e para a empresa! Mas isso não é, basicamente... Fazemos Discovery e Delivery de forma complementar Usando o melhor do Design Thinking, Lean e Agile Fazemos Discovery e Delivery de forma complementar O Double Diamond nos ajuda a visualizar o processo todo Queremos fazer Descobertas e Entregas contínuamente Simplificando, temos um ciclo sem fim e contínuo Queremos fazer Descobertas e Entregas contínuamente Com as seguintes atividades sendo feitas de forma iterativa: E quem faz essas atividades? Idealmente, o time todo! " " Encontros semanais com os usuários, pelo time que está construindo o produto, onde eles conduzem pequenas atividades de pesquisa e experimentos, sempre em busca do resultado desejado Isso é Continuous Discovery! Teresa Torres Product Discovery Coach E o que é mesmo um time de produto (ou squad) ? O time é composto por PM, PDs, Devs, QA e eventuais especialistas que estão em busca de um objetivo de negócio Missão clara com uma métrica de sucesso bem definida Buscando um Objetivo de negócio SQUAD E as demais áreas ? User Research Data Analysis Customer Success muita interação! Marketing Comercial O time tem que se comunicar com elas e promover muita interação e troca de informação SQUAD " " Queremos evitar handoffs. Precisamos quebrar os silos entre áreas e mesmo dentro do time. Devemos nos unir como solucionadores de problemas e trabalharmos juntos para co-criar soluções. Fazer Discovery é sobre quebrar silos e co-criar soluções Teresa Torres Product Discovery Coach " " Enquanto queremos cultivar um mindset de colaboração, não dá para consultar todo mundo para toda decisão. Você vai se mover muito devagar. Teresa Torres Product Discovery Coach Mas não é sobre ser uma democracia Agenda desta aula 1. Como fazer Discovery no Dia a Dia 3. Encontrando oportunidades e entregando resultados 4. Case Tapps Games 2. Divisão de Papéis e Responsabilida des 2 Divisão de Papéis e Responsabilidades Divisão de Papéis e Responsabilidades O foco muda de acordo com os papéis e responsabilidades Discovery Delivery OBJETIVOS PM PD TECH 80-90% DO TEMPO 80-90% DO TEMPO 10-20% DO TEMPO 10-20% DO TEMPO " " Divisão de Papéis e Responsabilidades Marty Cagan Consultor de Product Management Fundador do Silicon Valley Product Group Nós dizemos que se você está apenas usando seu engenheiros para escrever código, você está aproveitando apenas cerca de metade do seu valor. Um pequeno segredo em produto é que os engenheiros são normalmente a melhor fonte de inovação ainda que eles frequentemente nem são chamados para participar do Discovery. Divisão de Papéis e Responsabilidades Time Principal Divisão de Papéis e Responsabilidades ● Criar visão de produto para o Squad alinhada junto ao squad e os stakeholders ● Achar o produto certo para construir e evoluir, liderando o Discovery ● Balancear objetivos de negócio, usuario e tecnologia na priorização ● Documentar e detalhar as iniciativas ● Informar outras áreas e stakeholders sobre os resultados e aprendizados alcançados ● Define, acompanha e evolui KPIs (métricas) do TIme Lidera Participa / Acompanha Visão / Estratégia do Time Pesquisas / testes / protótipos Product Discovery Desenho da Solução KPIs do Squad Desenvolvimento da Solução Definir e priorizar backlog Análise e comunicação dos resultados OBJETIVOS PRODUCT MANAGER Divisão de Papéis e Responsabilidades ● Entender as dores e a jornada do usuário ● Facilitar os workshops e atividades de concepção dentro do time ● Criar fluxos e protótipos de baixa, média ou alta fidelidade ● Desenho da interface das soluções; ● Coletar feedbacks e iterar rapidamente em conceitos e materializações das soluções ● No Discovery é quem organiza as informações, executa os testes e conversa com o time de User Research Lidera Participa / Acompanha Workshops de Concepção de Soluções KPIs do TIme Pesquisas e Testes com o usuário Priorização backlog Criação de Protótipos Especificações funcionais das interfaces Estrutura da Solução Desenvolvimento da Solução Desenho das interface / Telas OBJETIVOS PRODUCT DESIGNER / UX DESIGNER Divisão de Papéis e Responsabilidades ● Criar e manter a arquitetura técnica da solução ● Garantir a qualidade e escalabilidade da solução ● Manter o código organizado e com poucos débitos técnicos ● Realizar o Product Delivery com o escopo e o prazo acordados ● No Discovery ajuda com POCs e protótipos com dados reais Lidera Participa / Acompanha Arquitetura da Solução Pesquisas / testes / protótipos Testes não funcionais Product Discovery Desenvolvimento da Solução Priorização backlog Product Delivery KPIs do Time OBJETIVOS ENGENHEIROS / DESENVOLVEDORES Papeis e Responsabilidades Outros papéis importantes Divisão de Papéis e Responsabilidades TECH LEAD / LÍDER TÉCNICO ● Líder funcional dos engenheiros ● Reponsável por representar o time no processo de Discovery ● Lidera a arquitetura das soluções que o time desenvolve ● Ajuda na evolução técnica do time e na comunicação com os demais times PESQUISADOR DE UX (UXRESEARCHER) ● Ajudar no planejamento dos estudos e pesquisas dos times com as técnicas e ferramentas corretas ● Cria uma base de conhecimento compartilhada sobre o usuário, suas dores e sua jornada ● Ajuda o PD com as melhores práticas nos testes de usabilidade, entrevistas, pesquisas quanti e quali ● Trabalha em pesquisas de mais longo prazo e que influencia o business como um todo Divisão de Papéis e Responsabilidades ANALISTA DE DADOS ● Ajuda o time a coletar e analisar os dados que o produto gera ● Realiza estudos e análises em profundidade para entender problemas de negócio ● Responsável pela acurácia das ferramentas de Analytics e coleta de eventos ● Ajuda o PM a tomar as decisões baseadas em dados e a encontrar oportunidades com base no uso do produto PRODUCT MARKETING MANAGER ● Orquestra ações de comunicação com o público interno e externo ● Coleta feedbacks internos e externos para melhorias no Produto ● Entende o mercado e o posicionamento que o produto deve ter ● Auxiliar o PM com o processo de Discovery de soluções ● Apoiar na análise da concorrência e do mercado ● Liderar o desenvolvimento do plano de Go-to-Market " " Divisão de Papéis e Responsabilidades Marty Cagan Consultor de Product Management Fundador do Silicon Valley Product Group Em bons times de produto, design, engenharia e as demais áreas trabalham lado a lado para encontrarem as melhores soluções para nossos usuários e que funcionam para o negócio. Agenda desta aula 1. Como fazer Discovery no Dia a Dia 3. Encontrando oportunidades e entregando resultados 4. Case Tapps Games 2. Divisão de Papéis e Responsabilida des 3 Encontrando oportunidades e entregando resultados Em busca do Outcome e não do Output Aprendemos tudo sobre Discovery! Faz muito sentido! Como não pensamos nisso antes ? Em busca do Outcome e não do Output Convencemos todos (stakeholders, diretoria, e time) a mudar o Mindset! Em busca do Outcome e não do Output Então começamos deixando um objetivo de negócio claro Em busca do Outcome e não do Output Empoderamos o time e fazemos pesquisa…. Em busca do Outcome e não do Output Apresentamos a pesquisa e partimos para um brainstorm, com todos stakeholders participando Em busca do Outcome e não do Output Aí separamos as melhores ideias, por votação, e priorizamos a melhor Em busca do Outcome e não do Output Então, fazemos o design…. Em busca do Outcome e não do Output Fazemos testes de usabilidade com os usuários Em busca do Outcome e não do Output Desenvolvemos a solução, já refinada Em busca do Outcome e não do Output Depois de semanas (meses ?!), colocamos nossa solução no ar e…. Em busca do Outcome e não do Output Mas fizemos tudo certo, como nos artigos!! Por que falhamos ? Em busca do Outcome e não do Output Estamos fazendo Waterfall informado por usuários e não Product Discovery Em busca do Outcome e não do Output Falhamos porque não exploramos o problema antes de pensar na solução! ● Não aprofundamos melhor nossas ideias antes de investir nelas; Temos que ter tempo para estudar as ideias mais promissoras e entender quais se conectam melhor com o problema e são mais valiosas para os usuários e para a empresa. Temos que fazer isso por comparação e contraste, entendemos pontos fracos e fortes, número de usuários impactados e os riscos e custos envolvidos para cada uma delas. ● Não pensamos em soluções diferentes de uma forma eficiente; Uma ideia sempre tem mais de uma abordagem de solução possível. Então, precisamos desenhar e testar com nossos usuários soluções diferentes (e não variações da mesma solução) para então ter mais informações e escolher qual desenvolver. ● Nossas soluções não conectam diretamente com a oportunidade correta ou com o resultado esperado; Quando pulamos direto para soluções, sem antes entender melhor o problema que ela ataca, corremos o risco de nos apaixonar pela solução sem ter evidências que ela de fato vá trazer o resultado esperado Em busca do Outcome e não do Output E a Opportunity Solution Tree nos ajuda a conectar melhor Outcome e output Resultado Esperado Oportunidade Solução Solução Experimento Experimento Resultado Esperado Idéia 1 Ideia N Aumentar Engajamento Facebook Adicionar uma nova Reação Aumentar Engajamento Facebook Melhorar engajamento com os posts Aumentar compartilhar posts Adicionar uma nova reação Adicionar salvar post Sugerir lembranças para compartilhar Fake door Não Gostei Fake door Amei X X Em busca do Outcome e não do Output O Design Thinking, com o Double Diamond, nos guia nesse processo: O U TC O M E O U TP U T Problem Space Solution Space FINAL SOLUTION DELIVERABLE Problem Space: Encontrando Oportunidades Mas de onde vêm as oportunidades ? Principalmente de: ● Pesquisa de Mercado ● Benchmark com concorrentes diretos ou indiretos ● Análise de dados de uso do produto ● Pesquisa qualitativa ● Entrevista com os usuários ● User Reviews e chamados no suporte Problem Space: Encontrando Oportunidades Pesquisa de Mercado e Benchmarking ● Qual é o tamanho da problema que você está atacando ? ● Quantos usuários ele afeta ? ● Como o mercado resolve o problema hoje ? ● Como seus concorrentes (diretos e indiretos) atuam frente a isso ? ● Como esse problema é resolvido mundo a fora ? ● O que você pode aprender com essas soluções para aplicar em seu produto ? Problem Space: Encontrando Oportunidades Pesquisa de Mercado e Benchmarking Dicas importantes: ● Não é porque um concorrente resolve o problema de uma determinada forma que você deve copiá-lo. ● A solução pode não ser boa e aí você só estará cometendo o mesmo erro que ele e gerando disperdício Problem Space: Encontrando Oportunidades Análise de dados do uso do seu produto Utilize toda a informação disponível nas ferramentas (GA, Amplitude, Mix Panel, HotJar, etc) e banco e dados para descobrir: ● Como os usuários estão usando seu produto ? ● Onde eles estão abandonando ? Como estão os funis de conversão ? ● Analise seu onboarding e os eventos de ativação. Eles são pontos frequentes de melhoria. ● Como os melhores usuários usam o produto ? É possível replicar esse comportamento ? Problem Space: Encontrando Oportunidades Análise de dados do uso do seu produto Dicas importantes: ● Não deixe de segmentar a análise (por região, pagantes ou não, plataforma, fonte de tráfego, etc) para encontrar as oportunidades. ● Não olhe apenas para médias ou comportamento geral. Segmente e se aprofunde na análise para encontrar as melhores oportunidades. Problem Space: Encontrando Oportunidades Pesquisa Qualitativa, Entrevista com os usuários, User Reviews e chamados no suporte Por meio de pesquisa e entrevista frequente vocês conseguem entender: ● Como seus usuários resolvem o problema hoje ? Qual alternativa utilizam ? Algum concorrente ? Ou uma solução do mundo analógico? ● Quais são suas dores ? E seus analgésicos ? ● Como eles de fato usam seu produto ? Será que usam da forma como foi pensado ou estão usando de uma forma que você não esperava ? ● Do que eles mais gostam no seu produto ? E do que não gostam ? Porquê eles o usam frente aos concorrentes ? ● O que eles falam nas reviews das lojas e nos emails de suporte ? O que mais dá trabalho para o atendimento ? Problem Space: Encontrando Oportunidades Pesquisa Qualitativa, Entrevista com os usuários, User Reviews e chamados no suporte Dicas importantes: ● Não delegue sua pesquisa ou entrevista! ● Você e seu time devem fazer o máximo possível de pesquisa ou participar junto ao time de user research para vocês tenham empatia pelo seu usuário ● Ao fazer isso, vocês possam ser donos desse conhecimento, para usá-lo no dia a dia e ele não fica engavetado em algum relatório Problem Space: Encontrando Oportunidades Como sumarizar todas as informações ? Atomic Research :) Experimentos/ Pesquisas Fatos InsightsAcionáveis/ Oportunidades Problem Space: Encontrando Oportunidades Exemplo: Aumentar Engajamento no Facebook (obs: dados fictícios) Analytics Experimentos/ Pesquisas Entrevista Suporte Fatos Users usam o produto diariamente Gostariam de reagir de mais formas diferentes Não conseguem consumir todo o conteúdo da sua timeline Insights Geramos mais conteúdo do que conseguem consumir Com mais reações podemos entender mais sobre seus gostos Acionáveis/ Oportunidades Gostaria de poder ver conteúdos novamente Gostaria de ver apenas assuntos do meu interesse Usuários não gostam de ver posts de determinados assuntos " " Eu gosto de escrever oportunidades como algo que o usuário diria. Isso ajuda a lembrar que estamos resolvendo dores reais do usuário e não do negócio, de forma disfarçada. Teresa Torres Product Discovery Coach Problem Space: Encontrando Oportunidades Problem Space: Encontrando Oportunidades Com isso, nossa árvore de oportunidade atualizada ficou assim: Aumentar Engajamento Facebook Gostaria de ver apenas assuntos do meu interesse Gostaria de poder ver conteúdos novamente Adicionar uma nova reação Sugerir lembranças para compartilhar Adicionar salvar post Fake door Não Gostei Fake door Amei Problem Space: Encontrando Oportunidades Priorizando oportunidades para atacar Priorizar oportunidades não é uma ciência exata. Mas você pode olhar para esses parâmetros para te ajudar a tomar uma melhor decisão: ● Quantos usuários a oportunidade ataca percentualmente ? Com que frequência ? ● Como a oportunidade se encaixa dentro da visão e estratégia do seu produto ? ● Quanto seus usuários vão gostar ? Ela ataca dores diretamente ? ● Quanto impacto podemos gerar na nossa métrica de sucesso ? É possível estimar ? Se não for, o risco aumenta e a prioridade diminui. Problem Space: Encontrando Oportunidades Priorizando oportunidades para atacar ● Essa decisão é facilmente reversível ? Se sim, podemos nos mover rápido e qualquer coisa revertemos. Caso contrário é melhor colher mais dados. ● Essa oportunidade é financeiramente viável ? Quais riscos ela contém ? Nosso time é capaz de desenvolvê-la ? Dica: Faça uma planilha e analise essas informações de todas as oportunidades que você está estudando. Compartilhe com o time e stakeholders para que eles acompanhem seu racional e possam dar inputs e pontos de vista que você possa não ter percebido. Problem Space: Encontrando Oportunidades Outra opção é usar um framework como o ICE Score. Quanto mais alto, melhor. Problem Space: Encontrando Oportunidades Para calcular o impacto use essas dicas, com as mesmas regras para todas as oportunidades: ● Calcule o Percentual de usuários que terão acesso a oportunidade ● Estime o percentual de usuários que de fato vão interagir com a oportunidade ● Multiplique um pelo outro, chegando ao total de usuários impactados. ● Para cada passo adicional, continue multiplicando os percentuais. Então aplique essa escala: ● Impacta entre 80 a 100% dos usuários: 10 ● Impacta entre 60 a 79% dos usuários: 8 ● Impacta entre 59 a 40% dos usuários: 6 ● Impacta entre 39 a 20% dos usuários: 4 ● Impacta entre 19 a 1% dos usuários: 2 Obs importante: Use seu bom senso. Adapte alterando pesos e incluindo ou removendo itens dessa lista conforme a realidade da sua empresa. Problem Space: Encontrando Oportunidades Critérios para definir a confiança das Oportunidades e sair da subjetividade. Problem Space: Encontrando Oportunidades Para medir a facilidade (easiness) avalie sempre os mesmos critérios entre as oportunidades Cada item abaixo subtrai 2 do score, que começa em 10: ● Depende de mais de um time de desenvolvimento ● Depende de outras áreas da empresa ● Traz riscos jurídicos ● Depende da contratação de serviços de terceiros ● Não temos o know-how interno necessário para construir ● Parece muito complexo ou demorado para o ganho observado ● Não dá para reverter a decisão facilmente ● Precisa de mais budget do que o disponível Obs importante: Use seu bom senso. Adapte alterando pesos e incluindo ou removendo itens dessa lista conforme a realidade da sua empresa. Problem Space: Encontrando Oportunidades Com base nisso, escolha por qual oportunidade começar: Aumentar Engajamento Facebook Gostaria de ver apenas assuntos do meu interesse Gostaria de poder ver conteúdos novamente Adicionar uma nova reação Sugerir lembranças para compartilhar Adicionar salvar post Fake door Não Gostei Fake door Amei " " Quando estamos analisando e priorizando oportunidades devemos lembrar que nós podemos ter tomado decisões erradas. Por isso é importante ressaltar que você pode sempre voltar e mudar o caminho escolhido. Mas para isso você quer se mover rápido, para que você possa aprender se esse é o melhor caminho o quanto antes. Teresa Torres Product Discovery Coach Problem Space: Encontrando Oportunidades Agora que definimos a oportunidade a atacar Vamos descobrir soluções valiosas para o usuário e que geram valor para a empresa O U TC O M E O U TP U T Problem Space Solution Space FINAL SOLUTION DELIVERABLE 72 Solution Space: Comparando e contrastando Soluções Devemos sempre escolher soluções boas para o os usuários e que geram valor para a empresa 73 Problema: Estou cansado hoje. Contexto: Problema mencionado para um colega segurando café Produto: Atirar o café (atalho mental: café = energia) na cara do colega. Solution Space: Comparando e contrastando Soluções Devemos sempre escolher soluções boas para o os usuários e que geram valor para a empresa 74 Dicas para encontrar as melhores soluções! Quase nunca a primeira ideia é a melhor solução. Solution Space: Comparando e contrastando Soluções Devemos sempre escolher soluções boas para o os usuários e que geram valor para a empresa " " Soluções podem vir de qualquer lugar, desde que conectadas por uma oportunidade conhecida. Se elas não conectarem a solução escolhida, elas podem ser mapeadas para outras soluções na árvore. Mas se elas não conectarem a árvore que estamos analisando, elas são consideradas apenas distrações e devem ser descartadas. Teresa Torres Product Discovery Coach Solution Space: Comparando e contrastando Soluções 76 Queremos soluções diferentes e não variações da mesma solução! Solution Space: Comparando e contrastando Soluções 77 Queremos soluções diferentes e não variações da mesma solução! ● Inicie dando contexto, deixando o problema/oportunidade a ser atacado bem claro. Traga métricas, pesquisas e benchmarks! ● Todos devem fazer sua versão individualmente, pois queremos o máximo de variações possívei ● Comece com papel, dobrando-o em 8 partes, conforme mostra a imagem ao lado, de forma a desenhar rapidamente diferentes abordagens. ● Ponha as idéias pra fora sem filtro pois são 8 abordagens diferentes em 8 minutos. Esse técnica é conhecida como Crazy Eights! ● Não tenha medo de errar, pois não existe certo e errado; existem abordagens melhores e piores. Nós queremos descobrir a melhor! ● Mudar posições e/ou cores de botões não criam soluções diferentes ● Todos tem 5 votos votar nas soluções que mais gostaram. ● As 3 com mais votos vão para a fase de protótipos! Crazy Eights Solution Space: Comparando e contrastando Soluções Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Resultado Esperado: Melhorar a aquisição orgânica de jogadores Oportunidade: Quero convidar meus amigos para jogar! Objetivo: Descobrir qual solução de Member Get Member iríamos priorizar Método: Protótipos + Survey in Game (com cálculo de amostra e relevância estatística) Solution Space: Comparandoe contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Resultado da pesquisa: 46,4% dos jogadores demonstraram interesse em MGM (Amostra: 2500 participantes, com relevancia depois de 380 respostas por pergunta) Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! Solution Space: Comparando e contrastando Soluções Use surveys no produto para ajudar a escolher a melhor solução com auxílio do seu usuário! " " Sobre Descobrir as melhores soluções Marty Cagan Consultor de Product Management Fundador do Silicon Valley Product Group Se o seu produto falhar, não é porque as pessoas não precisam que o problema seja resolvido. É porque sua solução não está posicionada para ser melhor que as demais. De fato, para ter sucesso, seu produto precisa ser inovador e ser dez vezes melhor que os outros. Agenda desta aula 1. Como fazer Discovery no Dia a Dia 3. Encontrando oportunidades e entregando resultados 4. Case Tapps Games 2. Divisão de Papéis e Responsabilida des 4 Case Tapps Games 170+ PROFISSIONAIS 700 MI + DOWNLOADS 400+ GAMES Case Tapps Games Missão: Divertir e conectar as pessoas ao redor do mundo com jogos incríveis - Desde 2010 ● Bid Wars é um jogo para mobile de simulação de leilão, lançado em 2016. ● É o maior jogo da Tapps, sendo responsável pela maior parte da receita da empresa. ● Ele é inspirado nos shows “Trato Feito” e “Quem dá mais” com foco no público americano. ● O jogador deve participar de diversos leilões em diferentes cidades para conseguir comprar itens. ● Para isso, ele deve derrotar seus oponentes e levar a melhor no leilão! ● Depois, os itens adquiridos devem ser vendidos em sua loja de penhores pelo melhor preço para conseguir maximizar o lucro! Case Tapps Games Jogo: Bid Wars Case Tapps Games Jogo: Bid Wars - Core Loop Case Tapps Games Objetivo de Negócio: Reverter a queda na taxa de conversão Problema Queda na Receita e Taxa de conversão Objetivo Reverter a queda da taxa de conversão Case Tapps Games Objetivo de Negócio: Reverter a queda na taxa de conversão Hipóteses para reverter o cenário, levantadas pelo time: ● Ajustar o onboarding do jogo; ● Colocar o fluxo de entrar na loja do jogo como fluxo normal do gameplay; ● Melhorar hábido de abundância criando hábito de uso; ● Remove ads - destacar na loja e baixar o preço; ● Sistema VIP Objetivo Reverter a queda da taxa de conversão Case Tapps Games Analisando as duas oportunidades ● Aparece como uma dor do jogador em reviews ● Oferta já existente ● Taxa de conversão baixa ● Potencial de impacto limitado ● Exigiria uma revisão da loja que pode ser complexa ● Solução em alta no mercado ● Grande impacto gerado nos benchmarks ● Nova proposta de valor para o jogador ● Time não acredita na solução ● Alta complexidade (aparente) de implementação Case Tapps Games VIP: Evidências de mercado Fonte: https://www.gamerefinery.com/battle-pass-trend-mobile-games/ Tendência: jogos top grossing com battle pass em 2019 Case Tapps Games Evidências de mercado Gardenscapes: após a implementação do VIP, a receita cresceu em 18% Fonte: https://medium.com/ironsource-levelup/missions-upgradeable-rewards-afbf83e675e3 Case Tapps Games Time tem Incerteza sobre a solução do sistema VIP Time ficou inseguro com um VIP no Bid wars pois segundo eles: ● Não há itens o suficiente para ofertar para o jogador; ● O Bid não tem espaço para um sistema VIP; ● A solução para implementar será muito complexa e demorada; ● Eles não pagariam pelo VIP. Case Tapps Games Analisando as duas oportunidades escolhemos a VIP! ● Potencial de impacto maior ● Maior incerteza (começar pelo mais incerto primeiro é uma boa prática) ● Não inviabiliza a oferta de Remove Ads ● Se der errado, paramos de vender. Case Tapps Games Começamos o processo de Discovery do VIP Processo de Discovery que o time estava seguindo Case Tapps Games Iniciamos com o dia de ideação Foi realizado o “Dia da ideação”, com as seguintes atividades: ● Lightning talks trazendo todas as infos das pesquisas e de mercado ● Definição “O que vamos mudar?” ● Exploração de idéias: ○ análise competitivas ○ Crazy 8 ○ Napkin pitch ● Decisão: convergir; ● Storyboard das 3 melhores idéias; ● Dot Voting ● Escolhe de 3 soluções totalmente diferentes Case Tapps Games Resultado do dia de ideação: 3 propostas de valor diferentes para o jogador Like a Boss “Jogador é o CHEFE da Pawn Shop e contratou vários funcionários para trabalharem enquanto ele/a fica de boa só vendo a grana entrar.” VIP City “Jogador tem acesso a uma cidade exclusiva, onde tem vários benefícios que não teria nas cidades normais.” Unleash your potential ”Jogador liberou seu verdadeiro potencial e agora tem vantagens por todo o jogo!” Case Tapps Games Próximo passo: validação da proposta de valor Like a Boss Unleash your potential VIP City Validação via survey in game, medindo o interesse na proposta de valor Case Tapps Games Resultado da Survey 2 opções mais votadas: Resultado muito próximo Descoberta! 70% dos jogadores veem valor numa proposta de vip! Case Tapps Games Próximo passo: Teste Fake door entre as propostas mais votadas Like a Boss Click-through Rate 2.16% Unleash your Potential Click-through Rate 1.43% Resultado relativamente próximo Foi realizada um teste fake door com somente as duas opções mais votadas exibindo o bundle com valores e imagens. Case Tapps Games Escolhemos o que implementarmos com uma decisão data-informed A opção escolhida foi a Unleash your potential! ● O interesse nas duas soluções, tanto na primeira pesquisa, quanto na segunda foram próximos; ● A implementação era significativamente mais fácil; ● O Like a boss havia um risco de canibalização dos IAPs existentes (HC/Power ups) enquanto o Unleash your potential faz ofertas que não são passíveis de compras no jogo; Unleash your Potential Case Tapps Games Montamos o MDP (Minimum desired product) ● Solução completa era grande para ser executada (oferecia 7 benefícios para o jogador); ● Não havia tempo hábil para implementar tudo; ● Foi avaliado o esforço para cada benefício e foi decidido que a primeira entrega seria com 3 benefícios e também não haveria subscription automático; Case Tapps Games Então, implementamos em Teste A/B duas versões: benefícios mensais ou semanais É possível ver que a quantidade de vendas do Semanal é superior à quantidade de vendas do mensal VIP 12 é o mensal. Bundlepack 17 é o semanal. Case Tapps Games Então, implementamos em Teste A/B duas versões: benefícios mensais ou semanais Pela diferença de preço, vemos que a receita gerada é próxima, com uma pequena vantagem para o semanal Case Tapps Games Então, decidimos pela manutenção do VIP Semanal. Principais motivos: ● Taxa de conversão muito maior, que conecta com o objetivo de melhorar a taxa de conversão. ● Provavelmente, a recompra do semanal é maior que a do mensal, visto que a retenção D30 do Bid Wars não é das melhores; ● Apesar de ser mais barato que o mensal, gera mais receita ● Oportunidade para otimizar a receita com testes de elasticidade de preço. CaseTapps Games Resultados da implementação do VIP, após 30 dias Aumento da conversão em 0.25% Atualmente é o 5° IAP que mais traz receita no jogo No 1° mês foi vendido mais de 5k Vips Case Tapps Games Key Takeaways ● A validação de mercado, se bem usada, é uma boa aliada; ● Comece pela hipótese mais incerta; ● Nós não somos nossos usuários; ● Se há dúvidas, a melhor maneira de validação é colocando na mão do usuário; ● A validação com o usuário pode ser algo rápido e simples, bastando um formulário e testes rápidos; ● Boa definição de MVP/ MDP e Teste A/B são fundamentais para o sucesso do discovery. " " Nós não temos que ser obcecados por features. Temos que ser obcecados por resultados! Por isso, foque no Discovery, não no Delivery Teresa Torres Product Discovery Coach Resumo Resumo da Aula Como fazer discovery no dia a dia ● Discovery e delivery são atividades e não fases. Elas acontecem em paralelo e não uma depois da outra. ● A validação acontece no discovery e não no delivery, por isso não é igual ao waterfall. ● O Framework Better Together dá um exemplo de como rodar no seu time usando o melhor do Design Thinking, do Lead e do Agile. ● O double diamond é composto pelas fases de entendimento do problema e da descoberta da solução. ● Nele o time executa pequenas atividades de pesquisa e de prototipação que ajuda na descoberta da melhor solução para os usuários. ● O ideal é que o time de produto seja o responsável por fazer todas as atividades, para evitar handoffs e perda de informações. Resumo da Aula Divisão de Papéis e Responsabilidades ● Todo o time deve participar do discovery e do delivery. O que muda é o foco de cada papel. PMs e PDs devem investir 80% do tempo em discovery; Já os engenheiros devem investir 20%. ● O PM tem como objetivo alinhar o time a um objetivo de negócio e trabalhar para encontrar a solução que melhor funcione para os usuários e gere resultado para o negócio. ● O PD é responsável por entender as dores e a jornada do usuário, assim como liderar o processo pesquisa, workshops de cocriação e a geração de protótipos focando na descoberta da melhor solução. ● Os Engenheiros são responsáveis por liderar o processo de delivery mas ajudando em discovery na construção de POCs e informando o que é possível ou não de executar de forma rápida. ● O User Researcher ajuda o time com o ferramental de pesquisa e atua em pesquisas de mais longo prazo que impactam o time como um todo ● O Analista de dados ajuda o time com a extração e análise de dados, bem como ajuda o PM a encontrar oportunidades com base no uso do produto. ● O PMM ajuda na coleta de feedbacks internos e externos e orquestra ações de comunicação junto com o PM Resumo da Aula Encontrando oportunidades e entregando resultados ● Falhamos muitas vezes por não conectar a solução com o objetivo desejado. ● A Opportunity Solution Tree nos ajuda a visualizar o racional e ver se nossa solução conecta com o objetivo ● As oportunidades vêm de pesquisa com os usuários, benchmark e análise de dados de uso do produto. ● O Atomic Research nos ajuda a organizar toda essa informação e a encontrar insights ● É importante começar priorizando as oportunidades e um framework que nos ajuda nisso é o ICE SCORE. ● Depois que oportunidade estiver priorizada invista em buscar soluções diferentes para o problema pois a primeira que aparece nem sempre é a melhor ● Devemos procurar soluções diferentes e não variações da mesma solução ● Uma forma de fazer isso é por meio do Crazy Eights Exercícios Exercícios e perguntas para reflexão Responda às perguntas abaixo, enviando as respostas na comunidade: A seguir você será apresentando a dois cases. ● O 1o da Netflix, onde você deverá organizar e clusterizar algumas oportunidades. ● O 2o onde você será PM do Clash Royale, um dos maiores jogos Free To Play do mundo, onde deverá, a partir de fatos e gráficos, gerar uma árvore de oportunidades com base no problema apresentado. Não existem respostas certas ou erradas, apenas melhores ou piores. Divulguem o resultado no canal do módulo 1 do curso de Discovery em nossa comunidade 120 121 Exercício 1: Mapeando oportunidades Agora você trabalha na Netflix. Problema a ser resolvido: aumentar as horas que cada pessoa passa assistindo Netflix. ● Lista de oportunidades: ● I can’t find something to watch. ● I’m out of episodes of my favorite show. ● I can’t figure out how to search for a specific show. ● I don’t know when a new season is available. ● The show I was watching is no longer available. ● I fell asleep and several episodes kept playing. ● I want to watch my shows on my flight. ● I want to skip the show intro. ● Is this show any good? ● I want to know what my friends are watching. ● Who is that actor? ● I want to watch on my train commute Criem os grupos de oportunidades Compartilhe sua árvore na comunidade Exercício 1: Mapeando Oportunidades 122 Exercício: Mapeando oportunidades Uma Possível Resposta Exercício 1: Mapeando Oportunidades 123 124 Exercício 2: Identificando as Oportunidades Agora você é PM do Clash Royale por 20 minutos! Tome como base as informações anteriores e o objetivo abaixo: OBJETIVO: Convocar mais súditos para a batalha! ● Aumentar em 30% o número de jogadores ativos ● Aumentar em 15 % o número de partidas jogadas por dia ● Percentual de jogadores ativos nas ligas não pode baixar de 60% Passo 1: Com base nos dados disponíveis gere uma lista de insights Passo 2: Crie uma árvore de oportunidade para o KR 1. Enviem o resultado no canal do módulo 1 do curso de Discovery para discutirmos! Obs: Uma possível resposta está como slide oculto no material da aula. Exercício 2: Identificando as Oportunidades Perder muitas partidas seguidas faz os jogadores pararam de jogar Total de jogadores ativos (mes): 14 Milhões Total de jogadores inativos: 303 milhões Total de contas criadas: 320 milhões Chegar nas ligas é demais! Não paro de jogar! O jogo está muito pay to win! O Corredor é muito apelão % Jogadores inativos com mais derrotas que vitórias: 75% % de jogadores ativos com mais derrotas que vitórias: 30% 35% dos jogadores inativos estão no Campo de Treinamento, 25% estão na arena 1, e mais 10% estão na arena 2 e 3. 30% dos jogadores ativos estão na Liga 1. Jogadores param de jogar pois encontram jogadores muito mais fortes que eles em muitas partidas A falta de carta raras nos níveis iniciais desmotiva os jogadores e os faz jogar menos Aumentar as recompensas em dinheiro não teve impacto na retenção de longo prazo Atomic Research - Clash Royale Fontes Fatos Insights Reviews Dados Pesquisa Testes A/B Atomic Research - Clash Royale - Gere os Insights CLASH ROYALE - GRÁFICOSClash Royale - Gráficos CLASH ROYALE - GRÁFICOSClash Royale - Gráficos Perder muitas partidas seguidas faz os jogadores pararam de jogar Total de jogadores ativos (mes): 14 Milhões Total de jogadores inativos: 303 milhões Total de contas criadas: 320 milhões Chegar nas ligas é demais! Não paro de jogar! O jogo está muito pay to win! O Corredor é muito apelão % Jogadores inativos com mais derrotas que vitórias: 75% % de jogadores ativos com mais derrotas que vitórias: 30% 35% dos jogadores inativos estão no Campo de Treinamento, 25% estão na arena 1, e mais 10% estão na arena 2 e 3. 30% dos jogadores ativos estão na Liga 1. Jogadores param de jogar pois encontram jogadores muito mais fortes que eles em muitas partidas A falta de carta raras nos níveis iniciais desmotiva os jogadores e os faz jogar menos Aumentar as recompensas em dinheiro não teve impacto na retenção de longo prazo Atomic Research - Clash Royale Fontes Fatos Insights Reviews Dados Pesquisa Testes A/B Quanto maior a arena / liga, menor a probabilidade de você parar de jogar (ou seja, quanto mais alto for, maior a probabilidade de estar ativo) Encontrar jogadores muito maisfortes que você em muitas partidas é um fator importante para a desistência do jogo. Jogadores com cartas melhores continuam jogando por mais tempo! Atomic Research - Clash Royale - Respondido 129 Exercício: Identificando Oportunidades Uma Possível Resposta Aumentar em 30% o número de jogadores ativos Melhorar a distribuição de cartas raras Melhorar o pareamento de jogadores Acelerar as campanhas de aquisição Melhorar o Win Rate dos jogadores que perdem em sequência O jogo é muito pay to win! Reativar jogadores inativos Diminuir o número de jogadores que param na arena de treinamento Bibliografia e links de apoio Livros e Podcasts Podcasts: ● Movimento UX ● Like a Boss ● O’Reilly Design Podcast ● UX and Growth ● Users Defenders https://www.movimentoux.com/ux-design/ https://www.likeaboss.com.br/ https://www.oreilly.com/topics/oreilly-design-podcast https://open.spotify.com/show/1Jl5To4znPKZL4D7dmt09T https://userdefenders.com/ Artigos e Videos Artigos: ● https://brasil.uxdesign.cc/atomic-ux-research-armazenar-e-distribuir-os-aprendizados-de-ux-16c341a f03aa ● https://www.producttalk.org/2016/08/opportunity-solution-tree/ ● https://www.producttalk.org/2019/02/prioritize-opportunities ● https://medium.com/seek-user-experience/design-thinking-101-what-is-it-part-i-of-ii-c90d653699d1 ● https://medium.com/seek-blog/design-thinking-101-the-double-diamond-approach-ii-4c0ce62f64c7 ● https://www.productboard.com/blog/step-by-step-framework-for-better-product-Discovery/ ● https://hygger.io/blog/ice-method-helps-choose-better-product-features/ ● https://www.nngroup.com/articles/false-consensus/ Videos: ● Qual é a relação entre PMs e PDs, Juliana Carvalho e Kakau Fonseca ● Inovação contínua com Dual Track, César Cesar ● Experiência do usuário: foque menos nas features ● Design Thinking: o que é e suas 5 etapas fundamentais ● Canal UX lab ● Canal Design Team https://brasil.uxdesign.cc/atomic-ux-research-armazenar-e-distribuir-os-aprendizados-de-ux-16c341af03aa https://brasil.uxdesign.cc/atomic-ux-research-armazenar-e-distribuir-os-aprendizados-de-ux-16c341af03aa https://www.producttalk.org/2016/08/opportunity-solution-tree/ https://www.producttalk.org/2019/02/prioritize-opportunities https://medium.com/seek-user-experience/design-thinking-101-what-is-it-part-i-of-ii-c90d653699d1 https://medium.com/seek-blog/design-thinking-101-the-double-diamond-approach-ii-4c0ce62f64c7 https://www.productboard.com/blog/step-by-step-framework-for-better-product-discovery/ https://hygger.io/blog/ice-method-helps-choose-better-product-features/ https://www.nngroup.com/articles/false-consensus/ https://www.youtube.com/watch?v=6BQNQr2ZTyM&t=2s https://www.youtube.com/watch?v=hXRxxRCbcrE https://www.youtube.com/watch?v=8nzX2GYSJ_4 https://www.youtube.com/watch?v=5xRSOltxXnU https://www.youtube.com/channel/UCw-CQYphBIs_nplLNJuz44w https://www.youtube.com/channel/UCTkZTDIq25Czsazq2N493Cg https://www.youtube.com/channel/UCAnQDFB4y4VoSlyb0XZKcTw?sub_confirmation=1 Obrigado!