Implementação do projeto final 2. cognoscere do latim, conhecer, e minacia, do latim, ameaça. Ferramenta que tem como objetivo medir o nível de interesse de threat actors em fóruns da deep/dark web que estejam a procura de exploits.
O código está ficando bem bagunçado e díficil de manter de uma forma ok.
Pontos que preciso levar em conta quando refatorar o código:
Criar uma classe base, tanto para o Scrapy quanto Selenium, que tenha as funcionalidades que preciso que tenha (vai usar proxy? vai passar um cookie? formato para salvar, etc)
O código está ficando bem bagunçado e díficil de manter de uma forma ok.
Pontos que preciso levar em conta quando refatorar o código:
As credenciais podem ser movidas para um banco, sqlite bem basicão. Desta forma não preciso mais de um arquivo toml perdido no meio.