Dados

Todo aprendiz que decide com base em dados tem um inimigo silencioso: a contaminação pelo futuro. Um ingrediente calculado com informação de depois do evento ensina o aprendiz a “prever” o que já sabia — e brilha no teste, quebra na rua. O Cervejeiros.Club começou a construção do motor de decisão justamente pela defesa contra isso: a despensa de ingredientes, implantada e validada na máquina viva no dia 23. A regra de ouro da despensa Cada ingrediente guardado carrega o momento em que passou a existir. Quando o aprendiz pede os ingredientes de uma data passada, a despensa responde só com o que já estava na prateleira naquela data — nada que entrou depois. A consulta é literalmente “dê-me o que existia até aqui” — e essa regra vive na estrutura dos dados, não na boa vontade de quem consulta: é impossível pedir errado. ...

A busca tradicional do cofre de dados acha o que é igual: digite “juros” e ela devolve todo texto que contém “juros”. Ela não acha o texto que fala de “custo do dinheiro” sem nunca escrever a palavra. No dia 22, o cofre ganhou a camada que cobre essa lacuna: o índice de significado — busca semântica sobre o fluxo de notícias, inteiramente dentro de casa. Texto vira coordenada O coração da camada é um modelo pequeno e aberto que lê um texto e devolve suas coordenadas de significado — um vetor de números em que textos que falam de coisas parecidas ficam próximos, independentemente das palavras usadas. O padrão tem nome: vetores de incorporação de palavras e seus descendentes. Com as coordenadas guardadas junto de cada notícia, perguntar “mostre o que se falou de parecido com isto” vira uma busca por proximidade geométrica — rápida, indexada, dentro do próprio cofre. ...

Os intérpretes de séries econômicas deram ao Cervejeiros.Club a leitura das estatísticas oficiais dos dois países. No dia 22, a camada macro cresceu em três direções: uma biblioteca internacional de dados públicos, o calendário das reuniões que decidem o juro e um sinal novo para o motor de decisão — a proximidade da decisão. A biblioteca internacional Existe um agregador que reúne séries de dezenas de institutos estatísticos do mundo — sem custo, com formato padronizado. O tradutor dessa biblioteca permite buscar séries de qualquer fonte dela: quando o sistema precisar de um indicador que as estatísticas oficiais diretas não cobrem, a primeira consulta é à biblioteca — e não a um site que parceia HTML. ...

Toda conversa entre serviços tem dois tempos: a decisão que precisa acontecer agora e o registro que precisa durar anos. O cofre de dados cuida do segundo — o arquivo histórico, a série temporal, a memória de longo prazo. No dia 21 de outubro, a fundação entregou o primeiro: a memória de curto prazo, a caderneta de rascunho onde as mãos anotam uma ordem, o conselheiro deixa um recado e os sentidos encaminham um dado fresco. ...

Estratégias de macro precisam de uma matéria-prima que cotação nenhuma entrega: a história da economia. Juros, inflação, atividade — séries oficiais, atualizadas, com décadas de passado. No dia 20 de outubro, os sentidos do Cervejeiros.Club ganharam dois intérpretes novos: um para as séries econômicas americanas e um para as estatísticas oficiais do banco central brasileiro. Duas fontes, dois temperamentos As duas fontes são públicas e oficiais — mas cada uma fala um dialeto, e foi aí que o trabalho apareceu: ...

O radar de temporada de resultados do Cervejeiros.Club precisa saber três coisas antes do pregão: quem divulga hoje, o que o mercado espera e o que a empresa já contabilizou. No dia 20 de outubro, os sentidos ganharam o intérprete que responde essas três perguntas — o segundo da família, irmão do intérprete de cotações. A divisão do trabalho entre fontes A lição do dia veio da auditoria de escopo: nenhuma fonte gratuita entrega tudo. A fonte de cotações não expõe calendário de resultados no plano gratuito; a fonte de calendários não entrega histórico de preços profundo. A resposta não foi pagar por tudo — foi distribuir as perguntas entre as fontes certas: ...

Todo sistema que decide com base em dados de mercado depende de uma pergunta simples: de quem confiar as cotações? A resposta do Cervejeiros.Club é “das fontes oficiais — mas só depois de traduzidas para a nossa língua”. No dia 20 de outubro, os sentidos ganharam o primeiro desses intérpretes: o tradutor da fonte oficial de cotações e históricos de pregão americano. Por que um intérprete, e não um acesso direto Um serviço externo muda regras sem avisar, responde erros em formatos diferentes, às vezes fica fora do ar. Se cada peça do sistema falar direto com a fonte, cada peça precisa saber lidar com tudo isso. O intérprete centraliza o problema num lugar só: o resto do sistema enxerga uma forma estável e previsível de receber dados, e as manhas da fonte ficam trancadas num módulo único, coberto de provas. ...

Abrir uma conversa com um banco de dados é caro: autenticação, sessão, negociação — dezenas de milissegundos antes de a primeira pergunta sair. Um sistema com vários serviços conversando ao mesmo tempo, cada um abrindo sua própria conversa, esgota a recepção do cofre de dados sem uma única pergunta útil. No dia 20, o Cervejeiros.Club implantou o porteiro que resolve isso — validado na máquina viva com dez verificações em dez. ...

As gavetas de série temporal resolveram a organização do cofre de dados. Mas organização não é economia: três anos de cotação minuto a minuto ocupam espaço, e a pergunta “dê-me o candle de 5 minutos do último mês” não pode ser recalculada a cada consulta. No dia 20, o cofre ganhou a camada de eficiência — implantada e conferida na máquina viva. As três peças da camada Compressão de história antiga. As gavetas mais velhas são reescritas em formato colunar comprimido: a mesma informação, uma fração do espaço, leitura coluna a coluna — que é justamente como as perguntas de análise consomem dados. A escrita recente segue normal; a história é selada e comprimida. Visões prontas por janela. As agregações que o sistema consulta o dia inteiro — candles de 5 minutos, 1 hora e 1 dia — passam a existir como visões mantidas automaticamente pelo cofre: calculadas uma vez, atualizadas sozinhas com o dado novo, servidas instantâneas. Com uma decisão de desenho registrada: as visões são a fonte única dessas janelas — os sentidos gravam só o minuto a minuto, e todo o resto é derivado. Uma gravação, três janelas consistentes. Índice para o eixo do tempo. Consultas por intervalo ganharam um índice desenhado para o eixo temporal — leve de manutenção, direto ao pedaço certo. flowchart LR M["Gravação do<br/>minuto a minuto"] --> CA5["Visão<br/>5 min"] M --> CA60["Visão<br/>1 hora"] M --> CA1D["Visão<br/>1 dia"] H["História<br/>antiga"] -->|"comprimida<br/>em colunas"| Z[(Espaço<br/>reduzido)] A validação que fecha a peça Nove verificações, nove aprovações, na máquina vivaA camada não foi entregue como receita: foi aplicada e conferida em produção — compressão ativa nas gavetas, as três visões respondendo, índices criados, políticas de automação armadas e a porta de leitura restrita herdando tudo corretamente. Nove verificações na stack de verdade, nove aprovações. A extensão de séries temporais em uso também foi conferida na versão corrente (2.30) antes da aplicação. O efeito prático O cérebro que calcula uma votação precisa de candles em três janelas ao mesmo tempo; o rosto exibe gráficos prontos; o backtester varre anos comprimidos. Com a camada de eficiência, cada um desses consumidores lê a visão ou a história certa sem tocar no minuto a minuto — e a capacidade de gravação dos sentidos fica inteira para o que só eles podem fazer: chegar com dado novo. ...

Guardar cotação é fácil; consultar cotação é que é difícil. “O preço de fechamento de cada dia do último ano, para 200 ativos, agora” — uma pergunta assim num banco comum vira uma busca por tabelas gigantes. No dia 20 de outubro, o cofre de dados do Cervejeiros.Club ganhou a estrutura certa para responder esse tipo de pergunta sem sufoco: compartimentos nativos de série temporal. Como funciona uma gaveta de série temporal A extensão de séries temporais do cofre organiza a informação em pedaços físicos por janela de tempo — cada pedaço guarda um período, e uma consulta com intervalo sabe exatamente quais pedaços abrir, ignorando o resto. O efeito prático: uma consulta de três anos não percorre três anos de dados linha a linha; ela abre só as gavetas do período. ...