TRO-Tribo Content 12-24

Prévia do material em texto

Content Quality
1
 Novo Visualizador - Sidebar logado
2
Nova Sidebar – Free Logado
ANTES
DEPOIS
Objetivo:
Alavancar o AR através de uma nova experiência na sidebar que aumente a percepção de valor do usuário free logado.
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Material x Tráfego
Total de Materiais: 1.062.527
Materiais com Questão:  806.185
Materiais com sidebar: 188.180
Sidebar não aparece em 100% dos materiais com questões
23%
76%
*dados de 28/11 até o do dia 16/12
Documentação dos dados
Funil de materiais com visualização
Tráfego de sessões de materiais
Presença considerável no tráfego de sessões de materiais com a sidebar.
*contagem distinta
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Conversão
372
7.700
164.236
8.270
Visualizaram a nova sidebar 
Clicaram em "Desbloquear respostas"  
5,04%
4,5%
~93% dos usuários que clicam em 'Desbloquear Respostas' chegam ao checkout, 
e 4,5% convertendo-se em Premium.
Chegaram ao checkout 
 Assinatura Premium 
Funil de usuários distintos
*dados de 28/11 até o do dia 16/12
Documentação dos dados
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Oportunidades
Ampliar a visibilidade da sidebar nos materiais com questões em que está ausente pode gerar um aumento no seu engajamento. 
Garantir a extração de mais questões dos materiais legados pode aumentar a percepção de valor da side.
Melhorar a exibição das questões pode gerar um aumento no engajamento da sidebar.
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Oportunidades
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Quick Wins Extrator
8
Cenário Atual
Problemas
Causas
Solução
Quick Wins extrator de perguntas e textos
Nova tecnologia
para extração
Alterar modelo de
qualidade para o GPT
Fluxo do HH com
score >= 0.30 (solução temporária)
Critério de ordenação
para o HH
✅
✅
✅
Limitações do extrator de texto e perguntas
Bloqueio pelo modelo
de qualidade
Score de prova >= 0.65
Questões ordenadas a partir das respostas do Ed
 ⚠️ Questões desordenadas
na sidebar
⚠️ Bloqueio de materiais
no upload
⚠️ Questões não extraídas
Criação de filas prioritárias para o HH
✅
Fila única de processamento para extração do Ed
 ⚠️ Gargalos de processamento
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Resultados Preliminares (testes)
Tentativas de envio
Testes em Produção
16 e 17/10
463
(materiais)
33%
(151 materiais)
67%
(312 não processados)
79
(materiais)
53%
(42 materiais)
47%
(37 materiais)
Testes com novo score (>=0.30 e =0.30 e = 0.30 (solução temporária)
Critério de ordenação
para o HH
✅
✅
✅
Limitações do extrator de texto e perguntas
Bloqueio pelo modelo
de qualidade
Score de prova >= 0.65
Questões ordenadas a partir das respostas do Ed
 ⚠️ Questões desordenadas
na sidebar
⚠️ Bloqueio de materiais
no upload
⚠️ Questões não extraídas
Criação de filas prioritárias para o HH
✅
Fila única de processamento para extração do Ed
 ⚠️ Gargalos de processamento
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Priorização
Questões Quebradas por Página
Questões cortadas na extração
Encoding
exemplo do erro
exemplo do erro
exemplo do erro
Referências
https://docs.google.com/presentation/d/1XhCkclw4prgIkEig8cxQxu9RRkErG1Zf6uB7tnOlLe4/edit#slide=id.g1219e8fc9c9_0_88
https://miro.com/app/board/uXjVOFaX66g=/
https://docs.google.com/presentation/d/1xk8J4PIg5N8nMOa4obxQIXDJLW42QIN64CqJfG-H-3c/edit
Roadmap - CQ
NOW
NEXT
LATER
Quick Wins Extrator
Identificador de Provas
[TBD] Roadmap Q1 e Q2
Implementação da nova tecnologia de extração
Testes e avaliações – Nova tecnologia para extração
image8.png
image9.png
image16.png
image24.png
image25.png
image26.png
image27.png
image28.png
image29.png
image30.png
image31.png