A Criteo expande a capacidade de serviços de Big Data

Plano de fundo

Fundada em 2005, a empresa global de tecnologia Criteo ajuda os anunciantes a gerar mais vendas por meio de publicidade de desempenho personalizada em escala global. Em 31 de dezembro de 2015, a Criteo tinha 2.000 funcionários em 28 escritórios nas Américas, EMEA e Ásia-Pacífico, atendendo a mais de 11.000 anunciantes em todo o mundo e com relacionamento direto com 16.000 editores. Seus algoritmos preditivos proprietários são capazes de fornecer um anúncio com o produto certo, para o usuário certo, no momento certo. E, ao medir o retorno sobre as vendas pós-clique, a Criteo ajuda a tornar o ROI transparente e fácil de medir.

No centro de sua operação está a maior plataforma Hadoop de propriedade privada do mundo. Esta é uma estrutura de software de código aberto para armazenar os chamados Big Data e executar aplicativos em clusters de hardware de commodities. Ele fornece armazenamento massivo para qualquer tipo de dados, enorme poder de processamento e a capacidade de lidar com tarefas ou trabalhos simultâneos praticamente ilimitados. Para a Criteo, ela permite que até 85 000 de trabalhos sejam processados todos os dias. É um negócio altamente intensivo em dados, suportado por uma rede de quase servidores 17 000.

Desafios

À medida que o varejo on-line continua crescendo em popularidade, a Criteo tem visto um grande crescimento na demanda por suas soluções. O aumento resultante nos dados que ele manipula significava que, até janeiro de 2015, ele precisava criar um novo cluster Hadoop. Matthieu Blumberg, Diretor de Engenharia de Operações de Infraestrutura da Criteo, explica:

"O que descobrimos com o Big Data é que, quanto mais dados você tiver, mais você deseja e mais precisa. Para nós, isso significava que nosso cluster Hadoop existente estava se tornando muito pequeno para nossas necessidades, então decidimos criar um novo. Isso também nos deu a oportunidade de desafiar toda a pilha de infraestrutura e procurar fornecedores de hardware alternativos."

Solução

Uma Solicitação de Proposta (RFP) para os servidores adicionais foi enviada a seis empresas, incluindo a Huawei e a atual operadora. Com base em suas respostas, uma lista de três possíveis soluções foi selecionada. Esse foi o ponto em que a Huawei começou a se destacar como uma concorrente séria. Matthieu Blumberg continua:

"Ficamos muito impressionados com a resposta da Huawei à nossa RFP. Eles claramente fizeram sua lição de casa e demonstraram um profundo entendimento do que estávamos fazendo com o Hadoop. Não apenas todas as respostas foram muito relevantes, como sugestões alternativas foram feitas para a fonte de alimentação do servidor, o que mostrou claramente que seu pessoal entendeu completamente como um cluster Hadoop funciona."

A solução oferecida pela Huawei foi baseada em seu FusionServer, um servidor de nova geração 2U dual-socket montado em rack. Ele oferece recursos flexíveis de expansão de recursos, além de alto desempenho computacional, e é a escolha ideal para Internet, Big Data, computação em nuvem e aplicativos corporativos importantes.

Como parte do processo de avaliação, a Criteo comprou um lote de dez servidores de cada um dos três fornecedores e construiu um pequeno cluster Hadoop em cada grupo, para que o desempenho pudesse ser comparado. Esse exercício de benchmarking avaliou o desempenho, a capacidade do Linux, o uso de energia e o suporte ao driver. Com uma pontuação alta em toda a gama, a Criteo selecionou a Huawei. Matthieu Blumberg acrescenta:

"O FusionServer atendeu a todos os critérios que estabelecemos. Mas o que realmente nos impressionou na empresa foi sua vontade de ajudar e responder às nossas perguntas. Por exemplo, queríamos acessar o disco rígido em um nível que outros fornecedores não estavam preparados para permitir. Em poucos dias, ele forneceu prontamente as ferramentas de que precisávamos para fazer isso."

Benefícios

A FusionServer teve uma boa comparação com seus concorrentes. Ele oferecia a maior densidade de disco rígido, suportando dezesseis por servidor, um a mais do que seu rival mais próximo. E com 20% menos, seu consumo de energia também provou ser significativamente melhor. Essencialmente, para a Criteo, ela entregou tudo o que procurava pelo preço certo.

"Depois de alguns meses de experiência, decidimos que o FusionServer da Huawei deveria ser disponibilizado como parte do nosso catálogo mundial, juntamente com o hardware oferecido pelo nosso principal fornecedor. Portanto, desde o início de 2016, compramos servidores da Huawei para nossos sites nos EUA, Europa e Ásia-Pacífico," diz Matthieu Blumberg.

Olhando para o futuro, a Criteo vê a Huawei como um grande fornecedor em potencial para as muitas coisas necessárias para dar suporte a um data center moderno e já comprou equipamentos de rede adicionais.

Matthieu Blumberg conclui:

"A Huawei fornece toda a gama de produtos necessários para construir um data center poderoso. Você pode comprar o contêiner modular, os servidores e os switches de rede de um único fornecedor. Essa é definitivamente uma proposta muito convincente."

Para obter mais informações, visite http://www.criteo.com/