Aprimorando processos com automação e web scraping

Abstract

A automação consiste em delegar tarefas que normalmente seriam executadas por humanos a sistemas computacionais. Essa técnica se popularizou nos últimos anos, sendo amplamente adotadas em empresas que buscam aumentar sua produtividade. O principal objetivo desse trabalho é relatar a experiência do estagiário durante período de trabalho na empresa SMR CLIPPING. As principais atividades realizadas foram a automação de tarefas repetitivas, utilização de web scraping para extração de dados online e melhoria das importações de notícias. Para realizar essas atividades, foram usadas linguagens de programação/script como Python, C#, batch script e PowerShell, com a utilização de bibliotecas como Selenium, BeautifulSoup e PyAutoGUI. Também foi utilizado a técnica de multithreading, possibilitando a redução de 90% do tempo de execução de um dos processos. Foi observado o ganho de 149% de produtividade nas importações de notícias. A utilização de automações trouxe enormes ganhos de produtividade dentro da SMR CLIPPING, demonstrando o quão importante é o uso no mundo corporativo. A experiência obtida pelo estagiário ajudou a perceber seu interesse pela área da engenharia de dados.