a tese
Segunda semana de um experimento amador que coloca o GPT (OpenAI) contra o Claude (Anthropic) prevendo eventos no Polymarket; a proposta é rodar os dois modelos com o mesmo scaffolding e prompt, sem que vejam os preços do mercado, para comparar suas previsões e ver qual acerta mais.
aprofundar
não
é entretenimento com n amostral minúsculo, sem metodologia de avaliação séria (aposta antes de rodar o segundo modelo, sem controle estatístico), e o único gancho de agente real (o scaffolding que oculta preços) fica só sugerido, não detalhado.
O que foi dito
- O autor recapitula a semana 1, em que o Claude estava vencendo por 1 a 0 (acertou uma previsão de clima, enquanto o modelo da OpenAI errou as duas).
- Os três mercados desta semana são as vendas na primeira semana de um álbum da Ariana Grande, a taxa de desemprego de julho e a temperatura máxima em Londres no dia seguinte.
- O scaffolding esconde deliberadamente dos modelos os preços do Polymarket, para não contaminar a previsão; o modelo só vê as regras e as faixas de resposta possíveis.
- Ambos os modelos são configurados em esforço/raciocínio alto e recebem um prompt simples (“execute suas previsões da semana”); rodam um de cada vez, limpando a memória entre as execuções.
- O modelo da OpenAI previu 275-300K para o álbum (favorito do mercado), 4,2% de desemprego (não favorito) e 23 °C em Londres (favorito), duas coincidindo com o favorito e uma não.
- O autor faz apostas reais de poucos dólares para o lado da OpenAI (por exemplo 45 centavos por ação no clima, 14 ações a 71 na Ariana Grande) antes mesmo de rodar o Claude.
- O Claude chegou a resultados quase idênticos, divergindo só na Ariana Grande, onde apostou numa faixa mais alta (300-325K), levando o autor a colocar uma aposta separada nessa faixa.
- Como quase todas as apostas convergiram, o autor conclui que o desempate da semana dependerá exclusivamente de onde caírem as vendas do álbum da Ariana Grande.
- Menciona de passagem outro sistema automatizado próprio que apostou na abertura em alta do S&P 500 e rendeu 50%, e promete um vídeo futuro ensinando a construir modelos simples de machine learning para o Polymarket.