Criando seu Ecossistema de Big Data na Nuvem

Objetivo: O objetivo deste projeto prático hands-on é criar um ecossistema de Big Data na nuvem utilizando a tecnologia AWS. O principal desafio é replicar e melhorar o algoritmo de extração/contabilização de palavras disponibilizado pelo expert. O objetivo é aprimorar o algoritmo, ordenando as palavras por ocorrência em vez de ordem alfabética, dando prioridade às palavras mais citadas no texto.

Descrição: Neste projeto, será necessário utilizar a tecnologia AWS para criar um ambiente de processamento de Big Data. O repositório fornecido pelo expert contém um algoritmo de extração/contabilização de palavras que precisa ser replicado e aprimorado.

A tarefa principal consiste em modificar o algoritmo para ordenar as palavras com base em sua ocorrência no texto, de forma que as palavras mais citadas tenham prioridade. Além disso, é encorajado que o participante evolua o algoritmo de outras formas, explorando possíveis melhorias e otimizações.

Requisitos técnicos:

- Conhecimento em processamento de Big Data e tecnologia AWS
- Familiaridade com algoritmos de extração/contabilização de palavras
- Habilidades de programação para modificar e aprimorar o algoritmo existente
- Capacidade de implementar o algoritmo utilizando a tecnologia AWS
- Conhecimento em ordenação de palavras com base em ocorrência

É esperado que o participante tenha acesso a uma conta na plataforma AWS, além de conhecimentos básicos sobre como criar e configurar instâncias, gerenciar serviços de armazenamento (como o Amazon S3) e executar tarefas de processamento distribuído (usando, por exemplo, o serviço Amazon EMR).

Este projeto prático hands-on oferece uma excelente oportunidade para aprimorar habilidades em Big Data, processamento distribuído e algoritmos de extração/contabilização de palavras.