Escolha rápida ou escolha estruturada: quando usar o approach
O debate entre ir de é pique ou ir de é big aparece o tempo todo em projetos de dados, engenharia de software e até em decisões de infraestrutura. A resposta curta é que ambos existem por um motivo. A resposta longa, e a que realmente importa, envolve saber onde cada um falha antes de escolher. No modelo "é pique", você resolve rápido. Script rodando em 47 linhas, dependência instalada às 2 da manhã, deploy na sexta antes do almoço. Funciona. Até funcionar mal. Já vi pipelines queimarem em produção porque alguém assumiu que um hack improvisado ia aguentar carga real. O problema não é o "pique". O problema é tratar o pique como solução permanente quando ele só deveria ser provisório.
No modelo "é big", você projeta para escala, documenta, estabelece contratos de API, implementa testes, configura orquestração. O resultado é robusto. O custo é tempo eComplexidade que muitas vezes nunca será necessária. Construir uma infraestrutura de big data para um volume de processamento que mal chega a algumas centenas de registros por dia é o tipo de erro que consome meses de sprint e não gera valor proporcional.
é pique ou é big: como decidir na prática
A minha régua sempre foi uma só: qual é o volume esperado nos próximos doze meses? Se a resposta é "ainda não sabemos", comece com "pique" e coloque um marcador no código indicando onde a migração vai acontecer. Eu uso essa prática desde 2019. Um projeto meu deETL para uma operação de e-commerce cresceu de quinze mil transações diárias para duzentos e trinta mil em nove meses. O script inicial que eu fiz em um final de semana precisou ser refatorado duas vezes. Cada refatoração levou cerca de quatro horas porque a estrutura básica estava clara desde o início. O ponto cego mais comum é subestimar a complexidade de manutenção. Um "pique" sem documentação viva vira técnica debt no segundo trimestre. Um "big" sem validação de hipótese vira custo fixo sem retorno. A decisão ideal não é binária, mas na prática a maioria das equipes não consegue lidar com nuance e acaba escolhendo um extremoporque é mais fácil de vender internamente.
👉 Clique no botão abaixo para saber mais sobre o assunto!
Se o objetivo é prototipagem pura, vá de "é pique". Se o objetivo é produção sustentável com crescimento previsível, vá de "é big" mas conte tudo antes de construir. E se você está em uma situação intermediária, que é a maioria dos casos, mantenha uma camada de abstração desde o dia um. Interface de entrada, transformações isoladas, saída padrãoizada. Isso transforma uma migração de "pique" para "big" em uma questão de dias, não de semanas. O que eu vejo repetidamente são equipes que aplicam "é big" em cenários de "é pique" e acabam entregando algo que ninguém usa. A complexidade adicionada não é gratuita. Ela custa revisão, planejamento e discussão. Às vezes essa custo vale a pena. Na maior parte das vezes, não vale.
O caminho mais comum que dá errado é exatamente o oposto: começar com "é pique" e deixar de marcar esse decision point. O código vira padrão tácito. Ninguém assume a responsabilidade pela migração. Você termina com dívida acumulada que ninguém quer pagar. Uma alternativa que funciona bem em cenários híbridos é usar ferramentas como scripts automatizados de migração que convertem a estrutura inicial para uma versão mais robusta. Eu já fiz isso com arquivos Python simples que evoluíram para pipelines orquestrados usando Airflow. O processo levou aproximadamente seis horas para migrar três workflows completos, incluindo a validação dos dados de entrada.
A regra que eu sigo é simples: se o problema não tem escala ainda, resolver rápido e registrar. Se o problema já tem escala ou vai ter em pouco tempo, resolver com a estrutura certa desde o início. Não existe terceira opção confortável que funcione bem a longo prazo.
