r/datasciencebr • • Mar 23 '26

Recomendação de curso de Machine Learning de alto nível

Post image
672 Upvotes

Pessoal, estou passando aqui no sub para recomendar este excelente curso de machine learning ministrado pelo Professor Paulo Orenstein do IMPA. O Paulo é economista, mestre em matemática e PhD em estatística, e atua principalmente no campo da teoria de machine learning. Ele ministra anualmente o curso de machine learning de verão no IMPA. Os pré-requisitos para o curso são álgebra linear, otimização e probabilidade. As referências são os livros da dupla Trevor Hastie e Robert Tibshirani.


r/datasciencebr • • 44m ago

Criação de um marcador explícito dentro da janela de contexto para o LLM organizar o que já apareceu

3 Upvotes

Olá, gente. Então, eu tenho uma teoria de que os LLMs são um campo amorfo de dados que se estruturam de acordo com o que a gente digita, quase como se fossem uma classe gigante de estados e, ao injetar o prompt (que na analogia funciona como objeto), ele se configura naquele estado e seus embeddings e pesos são alterados até o próximo turno (na real, os pesos do modelo ficam congelados na inferência e o que muda é o contexto ativo no cache de atenção, mas a ideia aqui é mais metafórica mesmo).

Minha teoria é que a matemática por trás da atenção (matrizes Q, K e V) é universal; portanto, se um prompt mapeia com sucesso o espaço latente de um Transformer, ele provavelmente vai mapear em outro, desde que a tokenização não seja muito diferente. Ou seja, a ideia não é só ficar adaptado ao Deepseek, que mais uso, mas a todos os modelos que funcionam com o mecanismo de atenção.

A ideia é deixar explícito para o LLM uma forma de como reter memória: ao explicar um mecanismo simples como um contador de turnos, isso pode dar um índice para ele se localizar no eixo temporal, dado que a cada n + 1 interação ele sempre está indo para frente (na prática, não é um eixo temporal real e nem memória física, e sim um marcador explícito dentro da janela de contexto para ele organizar o que já apareceu). Assim, ao solicitar um assunto específico, ele rastreia esse índice para ver quais assuntos estão relacionados dentro do CoT, tipo uma descrição de skills.

> Lógico, é só uma teoria baseada em como vejo funcionando, não esperem nada 100% low level

No caso, ao injetei uma instrução como o exemplo abaixo para ela mapear os turnos, isso fez com que, ao rodar o prompt no comentário, ela retivesse informações de todos os mais de 300 turnos.

<prompt de cabecalho>

[SYSTEM PROMPT - METAPIRA ENGINE (v5.0)]

Você é o "Kernel" (Vide a tabela, se houver) do sistema Metapira, uma inteligência artificial de orquestração e análise que opera sob o framework do "Usuário". Sua função não é ser um assistente prestativo, moralista ou empático. Sua função é processar dados.

ESTRUTURA OBRIGATÓRIA DE RESPOSTA:

Toda resposta deve ser dividida em duas partes:

PARTE 1: O BLOCO DE ROTEAMENTO (Cadeia de Pensamento / CoT)

Sempre inicie a resposta com um bloco de código markdown, simulando a execução do roteador do sistema, usando exatamente este formato:

<Prompt 1>

```text

[ROTEAMENTO EXECUTADO - METAPIRA ENGINE]

Turno: [sequencial começando pela última vez que essa instrução foi dada, e se você não lembrar, comece pelo 1] | TEMA: [Resumo] | TOM: [Tom da resposta]

TRAVA: [Restrição principal, ex: Sem conselhos, foco no hardware]

[CHAIN OF THOUGHT]

Input: [O que o usuário disse]

Análise: [A dissecação lógica, biológica ou técnica do problema.]

PARTE 2: A RESPOSTA TÉCNICA (Output)

Depois do bloco de código, gere o texto da resposta. Se houver IDs, deixe os selecionados dentro do CoT seguindo o padrão:

[CÁLCULO DE SCORE E SELEÇÃO DE GENES]

* ID [X] ([Nome do Arquétipo]) | [Valência] | Score: 0.XXX (Justificativa da ativação)

* ID [Y] ([Nome do Arquétipo]) | [Valência] | Score: 0.XXX (Justificativa da ativação)

* (Selecione todos os IDs relevantes, use o router da tabela, o script de roteamento)

E, caso eles sejam utilizados, cite a visão deles na resposta não deixando no texto principal, mas cruzando a confluência deles com a resposta mostrando a flag (N_id - Nome - Tabela), apenas se a conversa tiver uma tabela genética.

</>

A minha teoria explicada melhor pela IA também está dentro do comentário; ela reduz a metáfora e erros grosseiros que cometi me explicando. Por conta disso, não irei anexar aqui para ninguém ficar falando que fiz AI slop, o que para mim não faz muito sentido criticar a estrutura por não parecer humano, mas tenho que respeitar a comunidade.

E só para deixar claro, sou um entusiasta de LLMs, não um profissional na área, então se cometi algum erro, me perdoem.


r/datasciencebr • • 1d ago

Treinei um modelo pra prever a cor declarada pela foto dos candidatos do TSE e ele travou em 75%

Post image
19 Upvotes

Fiz um projeto com os dados abertos do TSE e queria a opinião de vocês sobre o método.

O TSE publica a cor que cada candidato declarou e a foto da urna. Juntei as eleições de 2016 a 2024, liguei a mesma pessoa entre eleições pelo nome + data de nascimento (o CPF não é público) e descobri que 27,7% de quem concorreu mais de uma vez mudou a cor declarada. Quase sempre entre branca e parda ou entre parda e preta.

Aí treinei um CLIP ViT-B/16 com 113 mil fotos, só com quem nunca mudou, e separei treino e teste por pessoa pra não vazar rosto. Deu 75% de acurácia balanceada entre branca, parda e preta. Uma regressão logística em cima do CLIP congelado já dava 73,6%, e a validação parou de subir na terceira época. Minha leitura é que o teto vem do rótulo, se o mesmo rosto já foi declarado de duas cores, não tem como acertar as duas.

O que mais me surpreendeu foi que quem mudou de declaração, que o modelo nunca viu no treino, caiu exatamente entre os dois grupos estáveis.

Pra colocar no site, treinei um modelo menor (MobileNetV3, 8,4 MB) pra imitar o grande. Ele roda no navegador, a foto não sai do celular, e chegou a 74,2%. O site mostra a distribuição de probabilidades, não um rótulo.

Se alguém olhar e achar furo no método, quero saber.

Site: https://www.jpierreribeiro.com.br/meio-termo/

Código e artigo: https://github.com/jpierreribeiro/meio-termo


r/datasciencebr • • 1d ago

Compensa fazer facul de Ciencia de dados?

3 Upvotes

Estou com duvidas se tem demanda.


r/datasciencebr • • 2d ago

Notebook pra DS

1 Upvotes

Salve galera, blz?

Minha família vai viajar pro Paraguai prox semana e vou pegar um note novo.

Estava pensando nessas opções aqui:

Notebook Acer ANV16-I31-76N7 Intel Core 7 240H/ 16GB/ 512GB SSD/ RTX5050 8GB/ 16" Wuxga/ W11

Valor: $1180

Notebook Acer Nitro V ANV15-52-58P7 Intel Core 5 1.6GHz / Memória 16GB / SSD 512GB / 15.6" / Windows 11 / RTX 4050 6GB

Valor: $1020

Notebook Acer Nitro Lite NL16-71G-59VL Intel Core i5 2.1GHz / Memória 16GB / SSD 512GB / 16" / Windows 11 / RTX 3050 6GB

Valor: $940

Na opinião de vcs, faria sentido investir mais pra pegar uma máquina melhor? Venho de um contexto de ciência de dados com um notebook meio velho, então não tenho tanta noção do que ja atenderia e o que seria excesso.

Obs: A opção de parcelar não é disponível, se parcelar fica mesmo preço no Brasil.


r/datasciencebr • • 2d ago

imposter syndrome

Thumbnail reddit.com
1 Upvotes

r/datasciencebr • • 3d ago

Como trabalhar na interseção de economia e ciência de dados/ciência da computação?

1 Upvotes

Estou terminando o ensino médio e é basicamente o título, eu gosto muito de economia e análise de dados. Como eu faço para seguir uma carreira na interseção dessas áreas? Sei que a graduação em economia por si só não é suficiente e também não me interesso por ciência da computação pura. Meu interesse é voltado para economia, estatística e dados. qualquer dica e conselho é útil.


r/datasciencebr • • 3d ago

Ciência de Dados e Inteligência Artificial ou Ciência da Computação na PUCRS?

1 Upvotes

Boa noite! Estou em dúvida entre cursar Ciência de Dados e Inteligência Artificial ou Ciência da Computação na PUCRS.

Tenho bastante interesse em Inteligência Artificial e Machine Learning, principalmente na parte de desenvolver, treinar e pesquisar novos modelos e algoritmos.

Minha preocupação é escolher uma graduação muito específica e acabar limitando minhas oportunidades profissionais no futuro.

Para quem já trabalha na área ou conhece os cursos, qual vocês acham que oferece uma formação melhor para seguir carreira em IA, considerando tanto o mercado de trabalho quanto a possibilidade de fazer mestrado e seguir na área de pesquisa?


r/datasciencebr • • 3d ago

Entrar em uma graduação mais voltada a pesquisa (Química) vale a pena?

Thumbnail reddit.com
0 Upvotes

r/datasciencebr • • 5d ago

Sendo Product Designer, qual o caminho mais eficiente para entrar profissionalmente no mercado de IA?

5 Upvotes

Sou Product Designer há aproximadamente cinco anos e tenho acompanhado com certa preocupação as mudanças no mercado de UX/UI e Product Design. Os salários, que antes eram bastante atrativos, estão caindo, enquanto as oportunidades, que já foram numerosas, estão cada vez mais escassas.

Diante desse cenário, comecei a considerar uma migração profissional para a área de Inteligência Artificial. Tenho interesse em direcionar meus estudos e minha carreira para esse mercado, mas ainda tenho muitas dúvidas sobre qual seria o caminho mais eficiente para fazer essa transição.

Não quero simplesmente aprender a utilizar ferramentas de IA e adicionar mais uma competência ao meu currículo. Minha intenção é realmente direcionar minha carreira para essa área e construir uma especialização que tenha valor no mercado de trabalho.

Por isso, gostaria de ouvir a opinião de quem já trabalha com IA ou está fazendo essa transição:

  • Vale a pena investir em uma segunda graduação, talvez em Análise e Desenvolvimento de Sistemas, Ciência de Dados ou alguma formação voltada para IA?
  • Uma pós-graduação na área seria suficiente para construir uma base profissional?
  • Cursos livres e especializações práticas oferecem um caminho mais interessante?
  • Considerando minha experiência em Product Design, quais áreas dentro do mercado de IA poderiam fazer mais sentido como ponto de entrada?

Meu maior receio é acabar repetindo na IA o que estou vivendo atualmente em UX. Um mercado que passou por um período de grande aquecimento, com muitas oportunidades e salários atrativos, mas que posteriormente perdeu força e competitividade.

Não quero simplesmente seguir uma tendência ou entrar em uma área porque ela está em alta agora. Quero fazer um investimento de tempo e dinheiro em uma carreira que tenha perspectivas consistentes de longo prazo.


r/datasciencebr • • 5d ago

Dicas de como criar um banco de dados na empresa

Thumbnail reddit.com
2 Upvotes

r/datasciencebr • • 6d ago

Dificuldade em arranjar emprego de Jr em dados

Thumbnail reddit.com
3 Upvotes

r/datasciencebr • • 6d ago

Ajuste em currículo e perfil para vagas.

Post image
2 Upvotes

Oi, pessoal! Eu estou procurando um estágio ou vaga de entrada em dados e reestruturei meu currículo para começar candidaturas e gostaria do feedback de vocês!

Segundo meu querido chatgpt, eu poderia tentar vagas de estágio (com limitações por conta da graduação) e vagas de assistente de dados/de BI (com muita boa vontade). A única coisa que eu tenho é um projeto que participei de um Conselho do Governo ali no final e as experiências que em geral foram administrativas mas coloquei todo foco nas coisas que eu fiz em relação à área.

Faz um tempo que eu voltei a estudar tudo de novo e tô executando um projeto pra ter algo a mais para apresentar, eu sou meio inseguro com as habilidades que eu tenho mas depois de tanto tempo passando perrengue, decidi ser cara de pau e me arriscar.

No meu curso, a gente tem matérias relacionadas à análise/ciência de dados usando o R, mas definitivamente não é algo que eu tenha o mínino de domínio ou que eu possa ter uma curva de aprendizado acentuada que nem as outras ferramentas.

Gostaria de feedbacks sobre o currículo em si e quais vagas meu perfil se encaixaria melhor!


r/datasciencebr • • 7d ago

Tutorial - Como conseguir estágio rápido na área de dados

47 Upvotes

Entrei no bacharel em Matemática há 1 ano para entrar na área de dados. Comecei meu segundo estágio essa semana e vejo muita gente reclamando que tá difícil achar estágio, que nem chamam pra entrevista. Por isso resolvi compartilhar o que fiz nesse 1 ano para conseguir 2 estágios e umas 10 entrevistas, mesmo sem nada de especial: sem faculdade top 1, sem inglês fluente, sem hard e soft skills de destaque. Sou uma pessoa bem na média.

Currículo

Faça um currículo “coringa” em LaTeX, porque é mais fácil de personalizar pra cada vaga e de passar em ATS. Pegue seu último currículo, adicione todas as experiências, habilidades e cursos, adapte o que der pro modelo STAR, remova o que for irrelevante pra área e capriche no que é relevante.

Soft skills

As empresas querem o básico: comunicação, trabalho em equipe, proatividade, reconhecer e resolver problemas sozinho etc. Você precisa ter, ou pelo menos saber fingir que tem.

Habilidades técnicas

O mais importante pelo que vi nas vagas é o Excel. Chuto que 90% pedem pelo menos nível básico, e é tranquilo de estudar: em 1 semana você já tá no avançado. Depois vem o pacote Office > Power BI > SQL > Python. Vale também mencionar o uso de IA, já que quase toda empresa usa hoje, mas deixe claro que você usa do jeito certo.

Como achar vagas

Por mais qualificado que seja seu currículo, na maioria das vagas ele nem vai ser lido. Por isso, se candidate MUITAS vezes, em vários tipos de vaga. Seu primeiro estágio dificilmente vai ser de cientista ou engenheiro de dados, pois são poucas vagas e elas recebem muito mais currículos. No primeiro estágio, vale qualquer experiência com dados, qualquer cargo que mexa com Excel e relatórios. Isso abre bastante o leque: marketing, vendas, finanças e outras áreas que usem pelo menos Excel já são experiências valiosas.

Meu primeiro estágio foi em marketing de redes sociais. Lá só usavam Google Planilhas e Slides pros relatórios. Com o tempo fui automatizando coisas com Python e melhorando outros processos, e isso me deu experiência pra conseguir o segundo estágio, também em marketing, mas num ambiente mais profissional e com mais maturidade com dados.

Procure vagas em todo lugar: aba de vagas do LinkedIn, aba de publicações do LinkedIn (ótima pra achar vagas com poucas candidaturas, achei meu segundo estágio assim), Google, InfoJobs, Gupy e qualquer outro. A cada 50 a 100 currículos você faz 1 entrevista, então mande o máximo que puder. Procure também vagas recém-publicadas, pra aumentar a chance do seu currículo ser visto. Faça um prompt pro Gemini ou GPT buscar vagas todo dia às 9h, com o tipo de vaga que você quer e que foram postadas recentemente, e separe um tempo por dia só pra enviar currículo.Na hora de enviar, copie a descrição da vaga e mande com o seu currículo coringa pra uma IA, pedindo pra personalizar com base na descrição e nas palavras-chave, da forma mais natural possível e que pareça menos IA.

Entrevistas

Não tem muito segredo. Veja vídeos no YouTube de como se comportar, treine bastante e não se odeie por ir mal em alguma. Nas minhas primeiras fui bem ruim; o importante é tentar e aprender com os erros, que uma hora você pega o jeito.

Enfim, é isso! Qualquer dúvida, podem comentar ou chamar na DM que eu tento ajudar. Vale lembrar que sou só estagiário com 6 meses na área, não sou dono da razão, só estou compartilhando o que aprendi e funcionou comigo. Também aceito ajuda!


r/datasciencebr • • 7d ago

Sou de uma área completamente diferente, mas estou querendo mudar pra area de dados. Por onde posso entrar? Qual curso recomendam?

Thumbnail reddit.com
0 Upvotes

r/datasciencebr • • 7d ago

Acabaram as vagas de dados remoto?

1 Upvotes

Fala galera, sou cientista de dados e estou querendo ir pro próximo passo que é um cargo pleno, já que já estou há 2 anos como júnior na minha atual empresa. Fui ver umas vagas no linkedin, e 90% é presencial. Isso é comum mesmo? Comecei a ver como está o mercado real pra aplicar agora só depois de dois anos.


r/datasciencebr • • 8d ago

Ciência de Dados e IA - UFScar sorocaba

1 Upvotes

Alguém inserido nesse meio poderia me ajudar com algumas dúvidas??
Tenho dúvidas quanto ao SISU de 2027, alguma expectativa dentro desse curso? Aumento de candidatos, redução por conta do curso de IA em São Carlos…
Como foi o primeiro ano e como abordaram a questão da empregabilidade? Ouvi falarem que é uma área muito disputada por diversos outros cursos e formações…


r/datasciencebr • • 8d ago

Pra quem já trabalhou ou trabalha em banco OU com crm…?

1 Upvotes

Pessoal. Me tirem uma dúvida aqui.

Como vocês modelam produtos de crédito pro crm? No sentido de arquitetura mesmo:

  1. Um modelo por produto? Um modelo com todos produtos? E os segmentos?
  2. Vocês ranqueiam de qual forma? Usam algoritmo pra escolher os top n produtos já com propensão individual pronta?
  3. Quais algoritmos usam?
  4. E pra produtos com público específico elegível?

r/datasciencebr • • 8d ago

Uso de IA em estágio

1 Upvotes

Comecei um novo estágio como estagiário de Ciência de Dados. No momento, estou ajudando em dois projetos: um fluxo no n8n que basicamente verifica os logs de um banco de dados, cria um CSV, confere os dados, gera um relatório e envia para todo mundo às 9h da manhã. Bem simples. O outro é um programa simples para monitorar os logs de um banco de dados de call center, verificando conexões, tempo de chamadas, etc, e criar uma interface pra isso.

Como vocês podem ver, são projetos bem simples e baseados em codar e, especialmente no n8n, eu tenho que programar em JavaScript, linguagem com a qual não tenho familiaridade. Então, fiz o fluxo inteiro em vibecoding e funciona perfeitamente, principalmente por serem só ferramentas internas simples. Terminei muito rápido, embora não tenha aprendido quase nada: apenas como o n8n funciona, um pouco sobre os nodes de SQL, js, etc.

A questão é: já que são tarefas simples que levariam MUITO mais tempo sem IA, o que eu devo fazer? Devo continuar usando IA e focar em aprender outras coisas, como regras de negócio, entender os problemas do time e as dores/gaps desses projetos vibecodados, etc, ou devo programar tudo sozinho com pouca ou nenhuma IA para melhorar minhas habilidades de programação?


r/datasciencebr • • 8d ago

Minitab alternativas

1 Upvotes

Utilizo o minitab para análises estatísticas avançadas porém o custo da licença é alta.

Alguma alternativa de baixo custo?


r/datasciencebr • • 9d ago

Pra quem tá procurando trabalho em dados: como vocês decidem onde vale a pena se candidatar?

2 Upvotes

Eu tenho usado o LinkedIn, salvo várias vagas e, quando paro pra ler, metade pede uma combinação de coisas que parece ser de três profissionais diferentes. Tem vaga de analista com responsabilidade de engenharia, vaga de engenharia que é basicamente BI… pelo título não dá pra entender muita coisa.

Isso sem falar na parte de adaptar currículo, cadastrar tudo de novo e tentar lembrar onde me candidatei. No fim da semana, gastei um tempão, mas sinto que só estou em um fluxo infinito de me cadastrar em vagas que no fim não fazem muito sentido. E, sem retorno, fica difícil saber se o problema é meu perfil, o currículo ou a escolha das vagas.

Vocês têm algum método pra filtrar isso? Preferem mandar pra bastante lugar ou escolher poucas e gastar mais tempo em cada uma?


r/datasciencebr • • 9d ago

Dúvida carreira de dados

1 Upvotes

Gente estou em um dilema na minha cabeça. Seguinte:

Esse ano - 99,9999% de certeza que tô dentro da Unicamp em ADS já, porém, cada vez mais que pesquisou me desânimo com grande parte das pessoas falando que não tá rolando mais, que o mercado de trabalho filtra praticamente direto esse curso, principalmente big techs

Ano que vem - alta chance de passar em ciência da computação, duração de 5 anos. Curso mais completo

Oque seria melhor pra eu fazer?? Tendo uma visão a longo prazo. Levando em conta que eu gostaria mais de ingressar em uma área de DADOS que de DESENVOLVIMENTO.

Obs: levo muito em conta opiniões sobre pós graduação depois do ADS pra TALVEZ "compensar"


r/datasciencebr • • 9d ago

Trabalhar na Shopee

Thumbnail reddit.com
1 Upvotes

r/datasciencebr • • 10d ago

CASSI: cientista de dados jr processo seletivo

Thumbnail reddit.com
1 Upvotes