nincs találat

[davidszuhi]

Szia tegnap elött óta nem szeretne új találatot adni. Tudsz benne esetleg segiteni? Köszi elöre is.

[icebob]

Úgy néz ki már nem fog tovább működni, mert bekapcsolták a Cloudflare bot védelmét, és egy challenge lap jön be, a rendes lap helyett. Ha ezt még meg is oldanám, előbbutóbb jönne majd a "Ön egy ember"-es kérdéses form is. :(

[davidszuhi]

Rendben köszönöm a gyors választ

[davidszuhi]

Feladtam egy hirdetés és 2percen belűl hivtak hogy megvan e az auto. Kérdezzem hogy találta meg ilyen gyorsan. Azt mondta hirdetésfigyelöt használ. Lehet ötleted rá?

[icebob]

az oldalnak is van saját e-mail értesítős szolgáltatása, bár úgy tudom az nem ilyen gyors.

[davidszuhi]

Van itt githubon egy pythonos alapú hahu kereső. Esetleg az neked talál valamit?

[JuhaszDavid]

Szia még mindig nem müködik sajnos . Valahogy nem lehetne kivitelezni, a muködést, honorálnám a fáradozást.

[aszopko]

Feladtam egy hirdetés és 2percen belűl hivtak hogy megvan e az auto. Kérdezzem hogy találta meg ilyen gyorsan. Azt mondta hirdetésfigyelöt használ. Lehet ötleted rá?

Ha előfizetés nélküli (ingyenes) regisztrációt használsz a hahu-n, akkor napi egyszer küldi az elmúlt 24 óra új hirdetéseit a beállítások alapján. Úgy tudom, előfizetéssel ez gyakorlatilag azonnali, ezért tudtak olyan gyorsan felhívni.

Ami érdekesség, hogy nekem a normál hahu-s sem működik már, kb azóta, ahogy írtátok erre is. Bár ezt inkább nekik kéne írni :)

[Laszlo268]

Szia! Valahogyan nem tudjuk ezt megoldani hogy működjön mert akárhogyan inditom el sajnos nem talál autót kérlek valamit kezdjünk már ezzel! Előre is köszönöm

[davidszuhi]

Icebob! Esetleg egy választ kaphatnának? Nagyon hasznos kodot írtál örülnénk ha továbbiakban is tudnánk használni.

[icebob]

Nem tudok többet mondani, mint amit legelőször írtam. Megnéztem mi a gond, és az oldalon tettek be egy Cloudflare-es védelmet a robotok ellen, hogy ilyen esetben ne szolgálja ki a kérést.

Szóval nem tudok mit tenni, csak ha kikapcsolják ezt a védelmet az oldalon, de azt meg kétlem, mert nem véletlenül került bele, hanem azért, hogy az ehhez hasonló megoldásokat ellehetetlenítsék, és a felhasználók az ő hirdetésfigyelő szolgáltatásukat használják.

[Laszlo268]

És esetleg egy fizetős Api-val nem tudjuk megoldani ?

[icebob]

Nincsen hasznaltauto.hu-nak ilyen publikus API-ja. Pár éve küldtem nekik levelet ezügyben, de azt mondták nincs, fizetős sem.

[Laszlo268]

https://www.scrapingbee.com/#pricing Ezzel nem tudjuk megoldani sehogy sem ? 100$ 1M Api kredit

[icebob]

Megpróbálom

[Laszlo268]

Rendben! Várom a válaszodat előre is köszönöm!

[icebob]

Kipróbáltam, nem akar ezzel sem működni. A premium_proxy bekapcsolásával 1 kérés erejéig jó volt, de utána sose többet. Ugyanez volt a stealth proxy móddal is. Ettől függetlenül feltöltöttem a kódot, ha valaki játszadozna vele. Leszedés után kell egy npm i és a configot bővíteni az alábbi sorokkal:

    scrapingBee: {
        apiKey: "<PASTE HERE YOUR API KEY FROM SCRAPINGBEE.COM>",
        params: {
            render_js: true,
            premium_proxy: true,
            // stealth_proxy: true,
        }
    },

A saját Scraping-es API key-t pedig bemásolni az apiKey-be.

De többnyire ez fog történni:

[Laszlo268]

Nincs erre semmiféle megoldás hogy működjön ismét mint eddig nem probléma ha megkell hozzá venni bármit.. csak működjön mert igazából nagyon segített ez a program és szükségem lenne rá

[icebob]

ScrapingBee-sek adtak egy tippek a confighoz, most ezzel jónak tűnik:

Igaz, kb 1 percig tart egy autó lekérése, illetve 75 kredit egy hívás, de most egymás után többször is jó volt. A config fájlba ez van:

    scrapingBee: {
        apiKey: "<PASTE HERE YOUR API KEY FROM SCRAPINGBEE.COM>",
        params: {
            render_js: true,
            premium_proxy: true,
            stealth_proxy: true,
            wait: 5000
        }
    },

[Laszlo268]

1M Api akkor az nagyon kevés lenne ? Folyamatosan ezt igy futtatva hamar megtelne?

[icebob]

Ha 1 autót kérsz le, 10 percenként, akkor 24-be futtatva 92 napig elég az 1M, ha 3 autót, akkor kb 1 hónap. De attól is függ, hogy adott autóra hány oldalnyi találat van, mert ha 2 oldal, akkor egyből 1 autó 2x75 creditet visz el.

[Laszlo268]

Haat az ugy nem jó sajnos és egy publikus apival? Nem müködne ?

[davidszuhi]

nekem ezt dobja most hibának

[icebob]

Ellenőrizd a config.js tartalmát, minden vessző, idézőjel a megfelelő helyen van-e.

https://github.com/icebob/hasznaltauto-figyelo/blob/master/config.example.js

[davidszuhi]

hali másik laptoról probáltam ezt dopta ki

[icebob]

szedd le a legfrissebb kódot, tegnap tettem fel módosítást.

[Laszlo268]

Nem lehet megoldani publikus Api-val ?

[icebob]

Nem, nincs publikus apija az oldalnak.

[Laszlo268]

Más megoldás nincs esetleg ?

[davidszuhi]

Icebob azzal probáltam

[davidszuhi]

icebob https://www.zenrows.com/ ezt bele tudod ileszteni hátha hatékonyabb??

[Laszlo268]

Amit mondott a előttem lévő is ezzel jobban müködne esetleg nem tudnád megprobálni ?https://www.zenrows.com/

[davidszuhi]

Icebob vagy esetleg lehet kezdeni valamit a felesleges kiirásokkal

[JuhaszDavid]

Üdv valami vátozás , fejlemény Icebob. Sajnos igy elég lassú és sok a " felesleges ki irás" :( ez miatt alig használható ,vissza keresni elözö hirdetésre lehetetlen. Legalább egy irány vonalat....

[icebob]

Icebob vagy esetleg lehet kezdeni valamit a felesleges kiirásokkal

Kivettem a hibakiírást.

[davidszuhi]

még mindig ki irja a hibakiirásokat

[JuhaszDavid]

Nekem is ezt irja hiába frissitetem index js.

[icebob]

Kiszedve.

[icebob]

zenrows is hozzáadva, talán stabilabb és gyorsabb mint a scrapingbee. Példa config.example.js-ben. A zenrows használatához a scrapingBee konfigot ki kell venni.

Többet már nem tudok tenni.

[icebob]

Btw, ha valaki szeretné támogatni az erőfeszítéseimet, az alábbi lehetőségeken megteheti:

https://www.paypal.com/paypalme/meregnorbert/20usd

https://github.com/sponsors/icebob

Köszönöm!

[Laszlo268]

Zenrows az hogyan müködik ott is van egy korlát? Tudnál arról többet mondani ?

[icebob]

Ott euróban vannak a request-ek. A trial alatt 13 kérés 0.31 EUR volt, de mind sikeres volt. A weblapon fent vannak a csomagok, minél nagyobb a csomag annál kisebb az ára 1 request-nek.

[davidszuhi]

Köszönjűk icebob mi hamarabb támogatunk🙂

[davidszuhi]

[icebob]

gyors fix, ha telepítesz egy újabb node-ot, mondjuk 20-asat vagy 22-est: https://nodejs.org/en/download/prebuilt-installer

[davidszuhi]

Hali elöfizettem működött egy darabig. De már megint nem megy és ezt a hibát dobja. ![Uploading Messenger_creation_85FACEE7-9690-4463-A0D6-6BE136513B0E.jpeg…]()

[davidszuhi]