Download V1.2: https://github.com/vinithius2/Data-scraping-linkedin-profile/releases/download/v1.2/Linkedin.Scraping.Profile.v1.2.exe

Sobre (About)

PT: Essa aplicação tem como objetivo gerar um relatório inteligente sobre possíveis candidatos a vagas de emprego baseando-se em um filtro de tecnologias e por um cálculo ponderado para cada campo do perfil do Linkedin.

ENG: This application aims to generate an intelligent report on possible job applicants based on a technology filter and a weighted calculation for each field in the LinkedIn profile.

Primeira etapa (First step)

PT: Adicionar um filtro de pessoas na entrada da aplicação e salvar essa lista filtrada para ser realizado o Scraping posteriormente, exemplo de URL aceita: https://www.linkedin.com/search/results/people/?keywords=desenvolvedor&origin=CLUSTER_EXPANSION&sid=FR%3B

ENG: Add a people filter in the application entry and save this filtered list to be Scraping later, example URL accepted: https://www.linkedin.com/search/results/people/?keywords=desenvolvedor&origin=CLUSTER_EXPANSION&sid=FR%3B

Segunda etapa (Second step)

PT: Iniciar o scraping de cada perfil pesquisado na primeira etapa e obter todas as informações possíveis e salvar no banco de dados.

ENG: Start scraping each profile searched in the first step and get as much information as possible and save it to the database.

Terceira etapa (third step)

PT: Selecionar a lista pesquisada e adicionar as tecnologias para realizar o cálculo ponderado e obter a média daquele perfil baseando-se nos dados de entrada e por alguns fatores como o idioma Inglês, nível profissional, tempo de experiência das tecnologias e etc. Segue tabela de cálculo.

ENG: Select the searched list and add the technologies to perform the weighted calculation and obtain the average of that profile based on the input data and some factors such as the English language, professional level, time of experience with the technologies, etc. Calculation table follows.

pontos_por_perfil

PT: É o total de pontos que o algoritimo obteve do perfil.

ENG: It is the total points that the algorithm got from the profile.

máximo_de_pontos_por_filtro

PT: É o total máximo de pontos permitido baseando-se no cálculo com o filtro, esse total pode variar de acordo com a quantidade de filtros usados.

ENG: It is the maximum total of points allowed based on the calculation with the filter, this total may vary according to the amount of filters used.

Média Ponderada (Weighted Average)

_(pontos_por_perfil/máximo_de_pontos_porfiltro) * 100 = media

PT: Após o cálculo ponderado é realizado a exportação para um arquivo XLS com os dados detalhados e de forma organizada e amigavel ao usuário. Dessa maneira, o profissional de RH poderá agilizar suas tomadas de decisão com um algoritmo inteligente e rápido.

ENG: After the weighted calculation is carried out the export to an XLS file with detailed data in an organized and user-friendly way. In this way, the HR professional will be able to streamline their decision making with an intelligent and fast algorithm.

Pontos de observação (observation points)

PT: Atualmente essa versão se encontra em teste, o que torna plausível alguns comportamentos imprevisíveis, pois o Data Scraping utiliza-se de classes, tags e ids do HTML para obter os dados, se o Linkedin mudar essas referências, o comportamento dessa aplicação pode ser inesperado. A quantidade de requisições utilizadas pelo algoritimo pode gerar algum alerta para a equipe de Blue Team do Linkedin, o que pode ocorrer de derrubar a sua seção ou solicitar alguma alternativa de verificação para identificar se você é um "robô" ou não, caso ocorra algum comportamento estranho, não hesite de entrar em contato. Porém, não se preocupe, foi feito vários testes para reverter essa situação, caso ocorra, a automação pode parar e aguardar ação humana para prosseguir.

Outro ponto relevante é que essa aplicação não salva os dados de login e senha do usuário, isso é feito de forma manual no navegador quando a aplicação se encontra em modo de não debug, caso o debug esteja habilitado, utiliza-se os valores já salvo nas variáveis de ambiente do SO, isso só é útil para desenvovledores, fique tranquilo, seu Linkedin está a salvo, o código é aberto, veja por você mesmo.

ENG: This version is currently under testing, which makes some unpredictable behavior plausible, as Data Scraping uses HTML classes, tags and ids to obtain the data, if Linkedin changes these references, the behavior of this application may be unexpected . The number of requests used by the algorithm can generate an alert for the Blue Team team of Linkedin, which can occur to bring down your section or request some alternative verification to identify if you are a "robot" or not, if any occurs strange behavior, please feel free to get in touch. However, don't worry, several tests were done to reverse this situation, if it happens, the automation can stop and wait for human action to proceed.

Another relevant point is that this application does not save the user's login and password data, this is done manually in the browser when the application is in non-debug_ mode, if debug is enabled, the values already saved are used in the OS environment variables, this is only useful for developers, rest assured, your Linkedin is safe, the source is open source, see for yourself.

Criar .EXE (Create .EXE)

PT: Use o terminal com a virtualenv ativada e com as bibliotecas instaladas e execute o seguinte script:

ENG: Use the terminal with virtualenv enabled and the libraries installed and run the following script:

pyinstaller main.spec

PT: O executável se encontrará na pasta dist/

ENG: The executable will be found in the folder dist/