. Nuvem IaaS e software de dados grande - Tudo Sobre Tecnologia

Novas formas que a nuvem IaaS e software de dados grande pode ser aplicado pelos analistas para ajudar os clientes. 
Mastodon C é uma empresa de dados grande em Londres, Inglaterra. Eles fornecem a ciência de dados e serviços de tecnologia de dados para grandes organizações com muitos dados e recursos não o suficiente para analisá-lo. Mastodon C já existe há cerca de 18 meses e é executado sistemas de dados para os clientes, incluindo grandes empresas de mídia, EST (Energy Savings Trust) , e a estratégia de tecnologia Conselhos programa Future Cities.
Francine Bennett, CEO da Mastodon C, tem um fundo no Google como analista de dados.Bennett falou sobre a ciência de dados em Londres de Mulheres em dados grupo, grandes conferências e a Comissão Europeia .
Os fundadores da empresa - Bennett e Bruce Durling, do Mastodon C CTO - construiu uma plataforma de processamento de dados usando a infra-estrutura em nuvem, ferramentas de código aberto e personalização.
E eles trabalham de uma forma sustentável. Não assumindo infraestrutura de nuvem é melhor do que a infra-estrutura no local, e não aderindo a um sistema de compensação de carbono - Mastodon C realizaram uma análise de dados do setor de IaaS.

Pilha técnico do Mastodon C

Plataforma de processamento de dados do Mastodon C é colocada na infraestrutura de nuvem - normalmente AWS EC2 máquinas rodando o Ubuntu OS . Componentes principais da plataforma são Hadoop e Cassandra , envolta emClojure código. É uma combinação que funciona em caixas de commodities, de modo diferentes provedores de nuvem pode ser utilizada para a camada de infra-estrutura.
Bennett disse que adequar esta plataforma para atender às exigências dos clientes. "A maneira que nós trabalhamos com os clientes é que temos este núcleo comum de Hadoop e Cassandra tecnologia, com pedaços nós adicionamos em torno de que para torná-lo mais fácil de lidar. É vagamente uma plataforma que nós personalizamos para cada cliente ".
Clojure é usado para personalizar a plataforma. Clojure linguagem funcional que é pesado em funções matemáticas e expressões. Bennett explicou por que os programadores do Mastodon C são todos os programadores de Clojure. "Isso é bom para unir tubos de dados. É Lisp e bom para expressar os fluxos de dados ".

O C em Mastodon C

Mastodon C faz com que suas cargas de trabalho mais verde - e não por compensação, mas movendo computação para os centros de dados mais verdes. É algo Mastodon C sempre fizeram - que C no nome significa 'Carbon Cloud Compute. Bennett analisou centros de dados locais, o seu PUE (Power Usage Effectiveness) e as redes de energia que os alimentam.
Uma empresa como a AWS gerencia uma infra-estrutura global . Como você descobrir se Oregon é mais verde do que Virginia oeste? Análises de Bennett deu certo "onde colocar os trabalhos de processamento e análise de postos de trabalho. Porque realmente não há informação pública lá fora nós usamos a informação pública sobre as redes de energia e de algumas outras análises e colou-lo todos juntos, para descobrir onde era o melhor ". E o melhor não é tudo sobre PUE. "Acontece que a rede de energia que você está alimentando-se é realmente importante - mais importante do que a própria eficiência".
"PUE é importante, mas se você pensar sobre isso, digamos que você tenha um bom PUE de um ano e meio. Um mau PUE pode ser três. Essa é uma diferença duas vezes. Se você realmente olhar para as redes de energia de locais de olhar diferente na Virginia ocidental, que é onde o maior site da AWS é - que a região é alimentado principalmente por carvão ".
"Isso é dezenas de vezes pior do que a Suíça, que é principalmente nuclear. Os múltiplos são muito maiores em termos de redes nacionais do que em termos de PUE ".
Como os clientes reagem quando Mastodon C sugerem execução de cargas de trabalho em um centro de dados menos poluente IaaS? "A maioria das pessoas dizem 'Oh, isso é bom, sim, de fazer isso, tudo bem'. Se houver custo do esforço envolvido, então ele não tende a acontecer - eu acho que só porque ele e CSR [Responsabilidade Social Corporativa ] não tendem a atender tanto no meio. São mundos um pouco diferentes em grandes empresas. É difícil para uma pessoa de TI para tomar decisões e justificá-los para seu chefe quando se trata de considerações verdes ".

É um momento emocionante para os cientistas de dados

Bennett é positiva em relação ao futuro para Mastodon C. "O potencial é tão grande e tão interessante que é um momento muito emocionante estar fazendo essas coisas".

Nuvem IaaS e software de dados grande pode ser aplicado pelos analistas para ajudar os clientes, de uma forma que era difícil no passado. "A infra-estrutura é muito sólida e agora commodity. Grande parte do software é commodity, cada vez mais. E há um monte de dados em torno - muito mais do que havia há alguns anos atrás. É produzido automaticamente pelos sistemas e por sensores e por todos os tipos de outras coisas. De repente, as peças estão no lugar para fazer coisas úteis com os dados, o que torna muito emocionante ".
Autor:

Sobre 

Nick Hardiman constrói e mantém a infra-estrutura necessária para executar serviços de Internet. Nick lida com as camadas mais baixas da Internet - as máquinas, redes, sistemas operacionais e aplicativos. O trabalho de Nick pára lá, e ele entrega ao ...

0 comentários Goocle+ 0 Facebook

Postar um comentário

 
Tudo Sobre Tecnologia © 2013-2020. Todos os direitos reservados. Tudo Sobre Tecnologia. Desenvolvido por TST
Topo