Raspagem de Dados

CIÊNCIA DE DADOS NOITE CENTRO ESTADUAL DE EDUCAÇÃO TECNOLÓGICA PAULA SOUZA FACULDADE DE TECNOLOGIA DE COTIA MARIA AMELIA FELICIANO DA SILVA SAÚDE E EDUCAÇÃO EM COTIA 1 Motivação Objetivo O objetivo deste trabalho é avaliar a qualidade dos serviços de educação e saúde na cidade de Cotia através da análise de comentários nas redes sociais como Facebook e Instagram Utilizando a mineração de dados e técnicas de análise de sentimentos pretendemos obter insights sobre a percepção pública desses serviços e identificar áreas para melhoria Importância Estudar a percepção da população por meio de redes sociais é crucial porque esses comentários muitas vezes refletem a experiência real dos cidadãos com os serviços públicos A análise permitirá compreender melhor os pontos fortes e as deficiências dos serviços oferecidos fornecendo informações valiosas para gestores e formuladores de políticas 2 Introdução Contexto A crescente influência das redes sociais nas opiniões públicas tornou essas plataformas uma fonte valiosa para entender a percepção dos cidadãos sobre diversos temas incluindo a qualidade dos serviços públicos A cidade de Cotia assim como outras localidades enfrenta desafios contínuos nas áreas de educação e saúde Este trabalho visa explorar como os residentes da cidade percebem esses serviços através dos comentários e interações nas redes sociais Objetivo do Estudo O estudo busca analisar comentários em redes sociais para avaliar a satisfação e as críticas da população em relação aos serviços de educação e saúde de Cotia Através dessa análise esperamos obter uma visão abrangente das áreas que necessitam de melhorias e das que são vistas positivamente 3 Metodologia 1 CIÊNCIA DE DADOS NOITE Coleta de Dados A coleta de dados será realizada através de scraping extração de comentários em posts e interações nas páginas de Facebook e Instagram relacionadas aos serviços de educação e saúde em Cotia Serão utilizados APIs e ferramentas de scraping como Beautiful Soup Selenium e ferramentas específicas de análise de redes sociais Análise de Dados Os dados coletados serão processados e analisados utilizando técnicas de mineração de dados e análise de sentimentos Utilizaremos bibliotecas de processamento de linguagem natural NLP como NLTK e spaCy para interpretar o sentimento geral dos comentários e identificar padrões e tendências Critérios de Inclusão Comentários sobre escolas creches hospitais e clínicas em Cotia serão incluídos Será feito um filtro para garantir que os comentários sejam relevantes e não se tratem de spam ou informações irrelevantes Ferramentas Coleta de Dados Python Beautiful Soup Selenium Análise de Sentimentos NLTK spaCy ferramentas de análise de sentimentos Visualização de Dados Matplotlib 4 Desenvolvimento Execução da Metodologia Configuração Inicial Preparação das ferramentas e scripts necessários para a coleta de dados Coleta de Dados Extração dos comentários de redes sociais sobre educação e saúde em Cotia Processamento e Limpeza Remoção de dados irrelevantes e limpeza dos dados coletados para análise Análise de Sentimentos Aplicação de técnicas de NLP para avaliar o sentimento dos comentários Identificação de Padrões Análise dos resultados para identificar tendências e padrões na percepção pública Elaboração do Relatório Desenvolvimento de um relatório detalhado contendo a metodologia resultados da análise interpretação dos dados e recomendações O relatório será estruturado para destacar insights principais e sugerir melhorias para os serviços de educação e saúde com base na análise 5 Cronograma Data Atividade 12082024 Início do projeto e definição dos objetivos e escopo 19082024 Revisão da literatura e pesquisa de ferramentas 26082024 Configuração das ferramentas e scripts para coleta de dados 02092024 Início da coleta de dados das redes sociais 16092024 Continuação da coleta de dados e início do processamento 2 CIÊNCIA DE DADOS NOITE 30092024 Conclusão da coleta de dados e início da limpeza dos dados 07102024 Início da análise de sentimentos e identificação de padrões 21102024 Desenvolvimento da análise dos resultados e elaboração de gráficos 04112024 Redação do relatório preliminar 18112024 Revisão do relatório e ajustes finais 25112024 Preparação da apresentação final e revisão geral 02122024 Entrega final do trabalho e apresentação 6 Referências Fontes de Informação Artigos Acadêmicos Pesquisar artigos sobre análise de sentimentos em redes sociais e mineração de dados Ferramentas e Bibliotecas Documentação de Beautiful Soup Selenium NLTK e spaCy Manuais e Guias Guias sobre scraping de dados e técnicas de processamento de linguagem natural Websites Fontes confiáveis sobre políticas públicas educação e saúde 3 INTRODUÇÃO 5W2H 1 MOTIVAÇÃO why PROBLEMA A SER RESOLVIDO 1 OBJETIVO what SOLUÇÃO PROPOSTA 12 METODOLOGIA QUAL BD ESTRATÉGIA 1 DESENVOLVIMENTO PYTHON PASSOAPASSO 1 RESULTADOS ESPERADOS BCS Best case scenario FCS Fair case scenario WCS Worst case scenario 1 CRONOGRAMA SEMANAL 1 REFERENCIAS