search

filipedeschamps / video-maker

Projeto open source para fazer vídeos automatizados
MIT License
2.43k stars 629 forks source link

Usar ContextualWeb ao invés do Google Search Engine #213

Open vlaskz opened 5 years ago

vlaskz commented 5 years ago

Olá, pessoal! Acredito que seria interessante que buscássemos uma alternativa ao Google, e seus 365 dias de free subscription. Testei o Azure Image Search da M$ nos dá somente 7 dias também. O DuckDuckGo não tem API visual. Então achei o ContextualWeb, que tem uma qualidade aceitável e parece não tão difícil de implementar.

O que vocês acham?

vlaskz commented 5 years ago

Não querendo floodar, aliás, de forma alguma... mas se for uma opção, usarmos o Selenium WebDriver para scrapping das imagens? quem sabe até para a o post dos vídeos?

L3onix commented 5 years ago

Pode ser uma boa opção, ainda mais com os problemas que o Google Search está apresentando.

matbrgz commented 4 years ago

Não querendo floodar, aliás, de forma alguma... mas se for uma opção, usarmos o Selenium WebDriver para scrapping das imagens? quem sabe até para a o post dos vídeos?

Prefiro o Ferret show a querry language deles.

Alias adorei a ideia de fugir do Google.

leodutra commented 4 years ago

Sugiro que seja implementada uma opção para seleção de engine. Lembro que a mesma engine, em teoria, deve ser utilizada para busca textual e imagens.

leodutra commented 4 years ago

Um aspecto importante é tentar manter a mesma tecnologia no stack. Ao inves do Ferret, recomendo o uso do Puppeteer, que é mais maduro e mais consistente. Se o desejo pelo uso da API do Ferret persistir, é um bom npm module a ser criado, sobre o Puppeteer, para benefício da comunidade do próprio e também do Node.js.

carlinhoshk commented 4 years ago

Galera agora a custom search API ta pedindo monte de informação o que eu faço para criar minha credencial ??

https://imgur.com/a/eR790Ii

cesardmn commented 4 years ago

@carlinhoshk sei que o questionamento é antigo, mas acredito que caiba aqui o registro. No comentários do YouTube há um comentário do Lucas Guimarães que dá uma dica de como contornar; segui os paços e consegui obter as credencias:

"Pessoal o (https://cse.google.com/cse/create/new) não tem mais a opção de configurações no cadastro, porém tem quando você tenta editar o Search Engine, então cadastra com um site qualquer e depois é só editar e tocar o barco. Não desistam"!