Mercor está fazendo parceria com uma das principais organizações de pesquisa em IA para avaliar e aprimorar como assistentes de codificação raciocinam, agem e se comunicam durante fluxos de trabalho de desenvolvimento. Estamos em busca de especialistas tecnicamente afiados (especialmente com experiência em revisão de código, testes ou documentação) para avaliar transcrições completas de conversas de codificação entre usuários e IA. Este projeto de curto prazo, totalmente remoto, contribui para moldar o futuro dos sistemas de IA que auxiliam desenvolvedores.

Principais Responsabilidades

• Revisar transcrições extensas entre usuários e assistentes de codificação baseados em IA

• Analisar em detalhes a lógica, a execução e as ações declaradas pela IA

• Avaliar cada transcrição usando uma rúbrica de 10 pontos em vários critérios

• Opcionalmente, redigir breves justificativas citando exemplos do diálogo

• Identificar discrepâncias entre as declarações e as ações (por exemplo, dizer “vou executar testes” mas não fazê-lo)

Qualificações Ideais

Principais perfis:

• Engenheiros Sênior ou Staff com ampla experiência em revisão de código e conhecimento de execução

• Engenheiros de QA com forte hábito de verificação e consistência

• Redatores Técnicos ou Especialistas em Documentação com habilidade para comparar instruções e implementações

Também são bem-vindos:

• Desenvolvedores Backend ou Full-Stack confortáveis com chamadas de função, APIs e fluxos de trabalho de testes

• Profissionais de DevOps ou SRE familiarizados com orquestração de ferramentas e análise de comportamento de sistemas

Linguagens e Ferramentas:

• Proficiência em Python é recomendada (a maioria das transcrições é baseada em Python)

• Familiaridade com outras linguagens como JavaScript, TypeScript, Java, C++, Go, Ruby, Rust ou Bash é um diferencial

• Conhecimento em fluxos de trabalho com Git, frameworks de teste e ferramentas de depuração é valioso

Mais Sobre a Oportunidade

• Remoto e assíncrono — conclua as tarefas no seu próprio horário

• Cada lote de transcrições deve ser concluído em até 5 horas após o início (tarefas ilimitadas disponíveis)

• Engajamento flexível baseado em tarefas com possibilidade de lotes recorrentes

Remuneração e Termos Contratuais

• Tarifas horárias competitivas, ajustadas por geografia e experiência

• Os contratados serão classificados como prestadores de serviços independentes

• Pagamentos semanais via Stripe Connect

Processo de Candidatura

• Envie seu currículo para iniciar

• Se selecionado, você receberá a documentação da rúbrica e acesso à plataforma de avaliação

• A maioria dos candidatos recebe resposta em alguns dias úteis

Sobre a Mercor

• A Mercor é um marketplace de talentos que conecta os melhores especialistas a laboratórios e organizações de pesquisa em IA

• Entre nossos investidores estão Benchmark, General Catalyst, Adam D’Angelo, Larry Summers e Jack Dorsey

• Milhares de profissionais de direito, engenharia e pesquisa colaboram em projetos de IA de ponta via Mercor

Consideramos todos os candidatos qualificados sem discriminação e oferecemos acomodações razoáveis mediante solicitação.

CANDIDATE-SE AQUI: ****