Bom galera, e como é que a gente vai fazer para escolher e implementar KPIs que sejam extremamente eficientes ali no dia a dia, que eles realmente tragam o que a gente precisa, que eles vão garantir a saúde e o desempenho da nossa aplicação, do nosso sistema e que eles vão conseguir atingir os objetivos de negócio. Então a primeira coisa é o básico, a gente vai ter que alinhar esses KPIs com os OKRs, com os objetivos de negócio que vão estar ali ligados com o objetivo e meta da organização. Você precisa conseguir conectar a visão, sei lá, do CEO da sua empresa com o que você está pensando ali no dia a dia da sua aplicação. Isso vai ser extremamente importante. Então, coisas como exemplo, uma experiência de cliente, eficiência operacional, se você está gastando muito, você pode ter o que éIs até de FinOps e observabilidade para FinOps e assim por diante, então tudo isso vai ser extremamente importante para você pensar, a gente vai dar um drill down nesse assunto aqui vai aprofundar um pouco mais e entender como é que funciona isso e depois na sequência a gente vai falar um pouquinho de como que a gente faz um QPI ser estratégico como é que ele vai ser específico e quantificável para eu ter um tipo de dado que eu posso acionar de alguma forma, ou seja, um dado que quando eu recebo, eu posso ter algum tipo de ação, que eu consigo ter algum tipo de insight em cima dele para poder trabalhar no dia a dia, para não ser aquele dado que a gente gera e que ninguém consome, que não serve para nada. Então, basicamente, a gente vai trabalhar um pouquinho nisso também na sequência. Depois a gente vai falar de como é que a gente monitora os KPIs, ou seja, como é que eu tenho ali tempo real ou o menor tempo possível para mensurar e para conseguir gerenciar esse tipo de KPI, para conseguir ter respostas rápidas a qualquer tipo de mudança, para conseguir acionar esse cara aqui e fazer algum tipo de alteração, caso necessário, de curso no dia a dia. E a gente também vai falar um pouquinho de como que a gente vai ajustar e revisar esses KPIs com regularidade para a gente não deixar eles ficarem em KPIs que não fazem mais sentido, que são obsoletos, que não fazem sentido mais, não tem mais relevância para o seu dia a dia. Então, eu vou dar um exemplo. Imagina que eu tenho um novo programa de streaming e um primeiro momento que eu quero fazer é trazer muita gente para dentro desse programa de streaming. Então, querendo trazer muita gente para dentro desse programa, qual que é o meu KPI ali, ou o meu objetivo mais acionável, vai ser ter o número de pessoas aumentando dentro desse streaming. Num segundo momento, pode ser que o número de pessoas não faça mais sentido, o que eu quero ter é o número de pessoas que ficam mais tempo, ou seja, não quero mais saber se uma pessoa entrou e saiu, quero saber se essa pessoa entrou e ficou. Então, você está vendo como as coisas vão mudando? Então, você precisa estar ali com essa revisão regular dos objetivos e dos KPIs para você conseguir entender se você continua atingindo aqueles objetivos. Beleza? A gente vai falar um pouquinho disso também. Então, quando a gente está falando aqui de exemplos práticos ali para a gente conseguir alinhar, ou seja, o primeiro item que a gente elencou ali, esses exemplos práticos vão ajudar a gente a entender como que eu vou alinhar os KPIs com os objetivos de negócio, tá? Então, vamos dar um exemplo aqui de novo do sistema de streaming. Não sou a melhor pessoa pra ficar tendo várias ideias de cenários, apesar da minha cabeça pensar em um monte de cenário, eu tenho que trazer os que são mais comuns pro nosso dia a dia. Então, pensando num streaming aqui, que é bem comum no nosso dia a dia, os objetivos ali são aumentar o engajamento dos usuários. Ou seja, é esse caso que eu acabei de falar para vocês. Eu quero que o usuário fique mais tempo dentro da minha plataforma. Eu não quero saber se tem 500 milhões de usuários entrando por dia. Eu quero saber que dos usuários que entram, eles ficam mais tempo ali e eles ficam mais engajados com a minha plataforma. Esse é um tipo de estratégia que ajuda eu a pensar se eu consigo colocar algum tipo de conteúdo pago de marketing, porque a pessoa não entra e sai, ela entra e fica. Então, isso é extremamente importante. Então, aqui, eu posso ter um KPI, por exemplo, que vai ser o tempo médio de visualização por sessão. Quando uma pessoa entrou e você tem uma sessão iniciando, quanto tempo ela ficou ali antes de sair? E daí, nesse tempo médio aqui de visualização, eu vou conseguir saber se os usuários eles ficaram imersos no conteúdo, ou seja, se eles foram atraídos pelo conteúdo que eu estou gerando ou não. E disso, eu como negócio, pensa agora, eu tirei meu chapéuzinho aqui de TI e vou colocar meu chapéuzinho de um cara de negócio. Eu posso olhar e falar, cara, os filmes que eu estou colocando na minha plataforma são horríveis. Ou não. A minha plataforma é ruim? É ruim para o cara mexer, ela fica travando, e isso pode ser outro KPI que você está acompanhando que pode te dar esse tipo de insight quando você cruza as informações. Agora, quando você olha os filmes que você tem e o que você está tendo de tempo médio ali de pessoas na sessão, você pode entender se os filmes estão ok ou não, se você tem o conteúdo ok e a plataforma não está funcionando, se você tem o conteúdo ok e a plataforma não está funcionando se você tem o conteúdo ok e a plataforma está funcionando, mas sei lá, a internet daquele lugar onde você está acompanhando é muito ruim, então as pessoas não conseguem acessar e assim por diante é importante para você entender esse tipo de situação, então você pode monitorar aqui, para você conseguir por exemplo, ajustar o algoritmo de recomendação, caso você tenha um catálogo de filme super ótimo, mas a pessoa não está encontrando qual é o melhor filme ali que vai chamar a atenção dela, como que você vai melhorar esse catálogo de recomendação ou melhorar o layout de apresentação da interface, colocar UX diferente para essa pessoa conseguir ser chamada para o conteúdo que você tem, para o usuário continuar ali assistindo por mais tempo. Olha que engraçado, quando você começa a olhar KPI's, é importante você entender como que as coisas se comunicam, como que as coisas se falam. Por exemplo, acabei de pensar aqui, imagina que você está tendo ali um tempo médio de visualização por sessão. Eu colocaria um KPI cruzado de quantidade de vezes que você clica naquele botão de ainda estou aqui. ainda estou aqui, porque se você pegar muita gente acaba colocando ali o filme e dorme, sendo bem honesto, a maior parte da população assiste ali 15 minutos e dorme, se você é uma pessoa dessa prazer, eu sou outra pessoa desse tipo então você foi lá, colocou o filme pra assistir dormiu, e daí aparece aquela telinha, você ainda está aí? depois aparece de novo aquela telinha você ainda está aí? nessa telinha o tempo que ela ficou aberta, eu contaria também. Ou seja, uma telinha que apareceu e ficou mais do que 10 segundos ali aberta, significa que a pessoa estava pescando, estava dormindo, alguma coisa assim. Eu posso colocar então uma coisa cruzada. Ela ficou com um tempo médio de visualização de sessão por duas horas. Só que dentro dessas duas horas apareceu uma telinha que ficou ali 10 segundos, depois mais uma que ficou quase 40 minutos parada ali na cara desse usuário, ele não estava assistindo ele dormiu, ou ele foi fazer alguma outra coisa e deixou ali parado, então você não estava com aquele usuário ali com você, você consegue ter esses pontos de medida ainda, para conseguir ainda melhorar o seu objetivo aqui tá vendo? Eu sei que eu fui um pouco profundo eu não trabalho com plataforma de streaming mas eu acho que é uma coisa que eu faria se eu estivesse nesse tipo de plataforma, que é cruzar esses dois KPIs que a gente consegue pegar tecnicamente falando. Quanto tempo ficou aquela tela e quanto tempo ficou o filme rodando. Com isso eu já consigo pegar e quantas vezes apareceu essa tela ao longo do filme. Também é um dado que pode ser cruzado aqui para você entender engajamento, por exemplo. Outro objetivo aqui de negócio pode ser reduzir o churn, tá? Quantas pessoas estão saindo. Para quem não está acostumado com esse termo, significa que eu tenho as pessoas que estão entrando na minha plataforma e quantas pessoas estão cancelando aquilo, que elas não querem mais estar comigo. Eu estou perdendo aquele serviço. Ou seja, na plataforma de streaming, eu tenho ali 500 assinantes, saíram 5, 5 é o churn, tá bom? dos assinantes, saíram 5, 5 é o churn tá bom? eles não são mais meus assinantes é basicamente isso de forma bem simplificada pra gente aqui, então o que é alinhado, vai ser a taxa de cancelamento de assinatura, você consegue pegar na sua aplicação de cancelamento e conseguir gerar esse tipo de informação pra negócio, você pode conseguir tirar isso não só de observabilidade, mas também de dashboards de negócio, tá bom? de negócio, tá bom? Então a taxa de cancelamento ali, ela pode ser, vai ser usada pra você ver se você tá conseguindo reter cliente e se começar a subir muito, você precisa pensar em como que você vai resolver isso. Então se você olhar pra esse KPI, você pode implementar ali algumas estratégias, por exemplo, de promoção, melhoria de UX e etc. Várias coisas que você pode colocar até de entender qual que está sendo o perfil do seu usuário que está cancelando para tentar aplicar algum tipo de ação antes dele cancelar. Outra coisa também, outro exemplo, eu trouxe alguns aqui para a gente discutir, é em Marketplace. Ali o objetivo de negócio que você tem é aumentar a conversão de vendas. Então você precisa que a pessoa entre e chegue ao final do funil. Para quem está acostumado, quem não está acostumado com Marketplace, só para vocês entenderem. Quando a gente está falando de marketplace, você tem como se fosse um funil de vendas. O começo é quando você começa a trazer um usuário para dentro do seu produto. Ele entende que existe aquele produto, aquele marketplace, ele entra no marketplace, ele escolhe o produto, coloca no carrinho e assim por diante. E o final desse funil é quando ele vai lá, paga e recebe. Ou seja, você conseguiu vender, ele pagou e ele vai receber aquele produto. É o final do funil. No fim das contas, quem trabalha com marketplace quer o quê? Quer o final do funil, a maior parte das vezes. Você não quer que a pessoa entre na sua loja e saia. Você quer que ela entre, pegue o produto e vá embora. Com esse produto em mão, você teve o final do seu funil. Então imagina que aqui você está falando dessa conversão de vendas é super importante, que é o final do funil. Dependendo da sua estratégia de negócio. Se você tem uma estratégia de aumentar o número de clientes entrando na sua loja para você poder apresentar uma porrada de produto, o topo do funil é a melhor métrica. Se você quer ver quanto você está gerando de grana, vai ser o final do funil. De quanto você está conseguindo gerar de representatividade mesmo de negócio, vai ser ser final do funil. Então assim por diante você pode ir tomando as decisões. Para esse KPI você vai medir ali se o seu marketplace está sendo bom em converter visita em grana, tá bom? Isso é super importante para você também. Então uma estratégia para olhar esse KPI pode ser você levar ali os ajustes de design na página para você tentar fazer essas pessoas comprarem mais ou melhorar o processo ali de checkout e assim por diante. Até campanha de marketing você pode melhorar para ver se a conversão está sendo mais eficiente. Outra coisa também que você pode fazer aqui é otimizar o processamento de pedidos. Outro QPI aqui é o tempo médio de processamento de pedidos. Esse cara aqui, tecnicamente falando, você consegue acompanhar ali muito fácil com observabilidade. Então, enquanto você está falando ali de processamento de pedido, você vai lá no back-end do marketplace, que é do momento que o pedido foi feito até ele ser preparado para o envio. Então, o quanto você consegue reduzir esse processamento vai melhorar a satisfação do seu cliente. Ou seja, o tempo que você demora para a sua aplicação mandar para uma... para o pessoal que vai enviar, por exemplo, para essa aplicação, fazer o checkout, o pagamento, avaliar e validar. Todo esse trâmite que você faz depois que o cara clica no comprar, ele precisa ser pensado e monitorado para você entender se você está conseguindo ser rápido para dar mensagem para esse cliente de que, ok, ele comprou e aquilo vai ser entregue para ele. Então, você pode monitorar aqui essas APIs também para conseguir entender esse fluxo de trabalho, se ele está acontecendo direito. Eu vou colocar mais um caso aqui em sistemas financeiros. Você pode ter ali um objetivo de garantir a confiabilidade das transações, por exemplo. E dali no sistema financeiro, se você tem muita falha, ela vai começar a dar um pouco de receio para o usuário. Imagina que você vai ali no seu banco, vai buscar seu saldo da conta e aparece zero. Você fala, opa, aí depois aparece um milhão. Você fala, oxe, o que está acontecendo? Você está vendo que você tinha um milhão na conta, do nada apareceu zero. Você vai ficar morrendo de medo. Se eu tivesse um milhão na conta e sumisse, do nada aparecesse zero, eu ia ter um ataque cardíaco. Mas, então Se você está tendo falha na sua requisição e você está apresentando um erro ou um problema para o usuário que ele não consegue olhar, no sistema financeiro você vai estar gerando ali um pouco de insatisfação e até medo desse cliente em relação aos seus serviços. Então, para a instituição financeira é super importante você olhar essas taxas de falha como um QPI para você ver se essa transação está sendo concluída com sucesso ou não, que pode impactar ali a confiança do cliente, que é a pior coisa que você tem para o sistema financeiro. Se o cliente não confiar em você, lascou, porque você não vai deixar o dinheiro porque você não confia. Então, aqui é outro cara importante para você pensar. Então, você precisa monitorar isso daí e você tomar a decisão ali de como você vai resolver isso, sei lá, fazer um orrum ou refatorar essa aplicação