O Scrapinpy.py é uma ferramenta projetada para extrair informações específicas, conhecidas como normativos, disponíveis no site gov.br dentro da sessão do diario oficial da união. Esses normativos são documentos ou regulamentos oficiais que contêm diretrizes, regras e informações relevantes para uma variedade de áreas. O objetivo principal do Scrapinpy.py é coletar esses normativos automaticamente e organizá-los em arquivos CSV, um formato de planilha amplamente utilizado. Isso facilita a coleta e análise de dados desses documentos, tornando o processo mais acessível e eficiente, mesmo para aqueles que não são especialistas em tecnologia ou regulamentações governamentais..
pip install -r requirements.txt python main.py OR python3 main.py OR .sh/bat filesA seguir estão listadas as bibliotecas utilizadas no projeto Scrapinpy.py:
- aiohttp
- aiosignal
- async-timeout
- attrs
- beautifulsoup4
- frozenlist
- idna
- multidict
- numpy
- pandas
- python-dateutil
- pytz
- six
- soupsieve
- tzdata
- yarl