O software livre Hadoop ganhou espaço em alguns dos maiores sites do mundo em apenas dois anos. Ele é responsável por controlar os principais programas de busca e determina os anuncio exibidos ao lado dos resultados.
Os conceitos centrais do software foram desenvolvido no google, pela a dificuldade que a empresa encontrava em indexar toda a internet regularmente e para aprimorar ao serviço de busca uma maneira fácil e eficaz de analisar todo o seu estoque de informação, afim de aprimorar seus resultados de pesquisa.
Para resolver o problema que o google vinham enfrentando na indexação de seu arquivos foi criada a tecnologia MapReduce, a qual tornava possível dividir grandes conjuntos de dados em pequenos blocos distribuindo essa informação por diversos computadores.
A tecnologia do MapReduce permitia que o software de busca do google operasse mais rápido em computadores mais baratos e menos confiáveis. Além disso, facilitava a manipulação dos dados recolhido pelo google.
O google manteve segredo sobre a tecnologia do MapReduce e o software de gestão de arquivos associados, mas publicou estudos sobre algumas das técnicas subjacentes. Essa informação esparsa que estes estudos forneceram, bastou para Doug Cutting criar suas versão da tecnologia e a batizou de Hadoop.
A equipe do yahoo obteve as informações dos estudos de Doug Cutting e acreditava que era necessário nivelar-se com os seus adversários. Por isso o yahoo contratou Cutting para completar sua equipe.
Estima-se que o yahoo tinha investido dezenas de milhões de dólares no desenvolvimento do Hadoop, mas o programa continua a ser um software de fonte aberta.
Diversas empresas também adotaram o Hadoop e ele começou a se espalhar entre as empresas de tecnologia de toda a parte.
Nenhum comentário:
Postar um comentário