Sales & Tech | Analista em Testes de Agentes de IA

Remote: 
Full Remote
Contract: 
Work from: 

Offer summary

Qualifications:

Technical or higher education in Engineering, Technology, Data Analysis, Marketing, or similar fields., Proficiency in technical English and Spanish (reading and writing)., Experience with A/B testing from planning to result analysis., Strong analytical skills to interpret metrics and translate data into actionable insights..

Key responsibilities:

  • Create test hypotheses based on data and business objectives.
  • Develop A/B test variations in collaboration with the Product and Prompt Engineers team.
  • Monitor test execution to ensure methodology and metrics are accurate.
  • Analyze test results, identify patterns, and provide actionable suggestions for improvement.

Fluency Academy logo
Fluency Academy Scaleup https://fluency.io/
201 - 500 Employees
See all jobs

Job description

JOB DESCRIPTION

A Fluency é uma escola de idiomas que nasceu em 2016 com o sonho de mudar o mundo! 🌎🤘


Atualmente, nós impactamos a vida de mais de 400 mil pessoas ao redor do mundo e não pretendemos parar por aqui. Estamos sempre em crescimento: acreditamos na melhoria e desenvolvimento contínuo.


Nosso objetivo? Democratizar o ensino por meio de um aprendizado leve, descomplicado e acessível a todos!


Buscamos pessoas inovadoras, comprometidas, curiosas, apaixonadas por pessoas e pela educação para integrar a equipe. Inscreva-se e conheça mais sobre o nosso time 💜.


RESPONSIBILITIES AND ASSIGNMENTS

Estamos buscando um(a) Analista de Testes de Agentes de IA que curta dados, tecnologia e seja movido por desafios estratégicos. Essa pessoa vai garantir que os nossos agentes sejam eficientes antes de entrarem em cena, validando hipóteses e otimizando a performance com base em testes bem estruturados.

Se você tem raciocínio analítico, já lidou com testes A/B e curte trabalhar na interseção entre tecnologia, experiência e resultado comercial essa vaga é pra você. 🤖📊


No dia a dia, você vai:

  • Criar hipóteses de teste com base em dados e objetivos de negócio;
  • Desenvolver variações de fluxo pra testes A/B junto com o time de Produto e Prompt Engineers;
  • Acompanhar a execução dos testes, garantindo que tudo role com método e que as métricas estejam redondinhas;
  • Identificar falhas e agir de forma preventiva pra garantir confiança nos resultados;
  • Analisar os testes, sacar padrões e trazer sugestões que façam diferença de verdade;
  • Seguir de perto a implementação das melhorias que forem validadas;
  • Deixar tudo documentado: testes feitos, variações testadas, aprendizados extraídos;
  • Trabalhar em sintonia com o time de Pós-Deploy pra manter um pipeline saudável de agentes prontos pra rodar;
  • Contribuir com ideias pra melhorar nosso framework de testes A/B continuamente;
  • Apoiar o time de Vendas com treinamentos e alinhamentos estratégicos sobre os agentes.

REQUIREMENTS AND QUALIFICATIONS

O que a gente espera de você:

  • Curso técnico ou superior (completo ou em andamento) em áreas como Engenharia, Tecnologia, Análise de Dados, Marketing ou algo parecido;
  • Inglês e espanhol técnico (leitura e escrita);
  • Experiência com testes A/B — desde o planejamento até a análise dos resultados;
  • Um olhar analítico afiado pra interpretar métricas e transformar dados em ações práticas;
  • Familiaridade com ferramentas como Google Sheets, CRMs, plataformas de teste A/B e dashboards (tipo Looker ou Data Studio);
  • Conhecimento sobre fluxos de vendas e como as pessoas se comportam em jornadas automatizadas;
  • Habilidade pra ajustar prompts e scripts com base em evidências do que realmente funciona.


Pontos extras (que a gente ama, mas não são obrigatórios):

  • Já ter explorado LLMs (Large Language Models) e soluções de IA conversacional;
  • Ter colocado a mão na massa com automações em processos comerciais usando bots e ferramentas no-code.

ADDITIONAL INFORMATION

Contrato CLT

🕐Horário de trabalho: das 09h às 18h de segunda-feira à sexta-feira


O que você vai encontrar de benefícios na Fluency: 

🏡Jornada Remota: oferecemos o suporte completo para uma integração e participação ativa com o time/equipe.

🍔Vale Refeição Caju - R$ 27,00 (com 10% de desconto em folha); 

🎭Vale Cultura no valor de R$ 50,00 para cinema, ingressos, livros, assinatura de streamings;

🩺Plano de Saúde SulAmérica, sem custo fixo mensal para o contratado e com coparticipação de 30% com teto de R$ 150,00 - Inclusão de dependentes é por conta da pessoa colaboradora;

🦷 Plano Odontológico AMIL sem custo nenhum e pode incluir dependentes por R$ 20,04 cada, por conta da pessoa colaboradora;

💰 Bonificação por indicação: R$ 500,00;

🧘🏿‍♀️ Zenklub com duas sessões gratuitas por mês e sessão adicional por R$70,00/cada;

💆‍♀️PsiU - Psicoterapia com valor fixo de R$ 75,00;

🏋🏿‍♀️Wellhub (Gympass) com o plano digital (sem custos), além da disponibilidade de outros 10 planos e variações; 

🗽Fluency SkillUp, onde você pode escolher um dos nossos cursos de idiomas ou tecnologia para estudar gratuitamente;

💵 Curso de finanças: Me poupe, produzido pela Nathalia Arcuri, que conta com conteúdos exclusivos para ensinar estratégias financeiras; 

🤖 Acesso ao Curso Gen-AI (desenvolvido exclusivamente para colaboradores Fluency, para que possam dominar as AI's e trazer praticidade ao seu dia-a-dia de trabalho); 

🧠 Acesso ao Learning.Rocks (plataforma da Qulture.Rocks, com cursos de desenvolvimento de liderança, comunicação e outros); 

🥳DayOff no seu aniversário;

💻Oferecemos toda a estrutura necessária de suporte e envio de equipamentos para que você possa desempenhar suas atividades com eficiência e tranquilidade. 


Outros diferenciais:

Ambiente de trabalho descontraído, com espírito de equipe e pessoas talentosas;

💡Autonomia para trabalhar, desenvolver e implementar ideias;

🧮 Ambiente que valoriza o desenvolvimento contínuo por meio de PDI, feedbacks, 1:1 e Reviews constantes que são mediados pela plataforma Qulture.Rocks;

📝 Possibilidade de participação em Programas de Mentorias Internas e Turmas Betas de produtos Fluency. 

👶 Baby gift: presente para recém-nascidos;

👚 No dress code: o mais importante é usar aquilo que te faz bem.


Olá! Hello! Hola! Ciao! Hallo!

Você está prestes a conhecer uma das maiores edtechs da América Latina.


A Fluency é uma edtech fundada e sediada em Curitiba, mas sem limitação pela localização. Contratamos pessoas com quem gostaríamos de trabalhar e viver, seja nesse ou em outro continente.


Hoje, além de idiomas, também oferecemos cursos profissionalizantes em diversas áreas. Com nosso método exclusivo, desafiamos o ensino tradicional e tornamos o aprendizado fácil, divertido e com uma experiência focada na excelência.


Atualmente, impactamos a vida de mais de 400 mil pessoas ao redor do mundo e não pretendemos parar por aqui. Estamos sempre em crescimento: acreditamos na melhoria e desenvolvimento contínuos. Sonhamos grande e assim, criamos todos os dias novas oportunidades de transformação na vida de nossos alunos.


A Fluency é feita de propósito, disrupção e muito talento.


Inovação, comprometimento, curiosidade e paixão são componentes essenciais para quem deseja fazer parte do nosso time!


Junte-se a nós e vamos juntos mudar a vida de milhares de pessoas através da educação. Vem ser Fluency! 🌎🤘


Required profile

Experience

Spoken language(s):
EnglishSpanish
Check out the description to know which languages are mandatory.

Other Skills

  • Analytical Thinking
  • Teamwork
  • Communication
  • Problem Solving

Related jobs