eGospodarka.pl
eGospodarka.pl poleca

eGospodarka.plGrupypl.comp.wwwCzy pytanie o sczytywanie stron programami/skryptami to tu? › Re: Sczytywanie skryptem Amazon Top100 [wget (User-Agent) rulez? Nie.]
  • Data: 2022-03-15 12:18:48
    Temat: Re: Sczytywanie skryptem Amazon Top100 [wget (User-Agent) rulez? Nie.]
    Od: "Andrzej A. Filip" <a...@o...eu> szukaj wiadomości tego autora
    [ pokaż wszystkie nagłówki ]

    Tomek <s...@w...xx.pl> pisze:
    > W dniu 13.03.2022 o 20:56, Andrzej A. Filip pisze:
    >> Roman Tyczka <r...@h...you.spammer> pisze:
    >>> On 11.03.2022 07:31, Andrzej A. Filip wrote:
    >>>> Sugestia przestała był użyteczna. Amazon blokuje User-Agent wget i
    >>>> samego wget "zależnie od fazy księżyca". Kilka razy zadziałało a
    >>>> teraz blokuje dostęp prawie zawsze.
    >
    >
    > To może użyj wgeta z parametrem:
    > --random-wait

    Problem polega na tym że amazom.com *teraz już* odwala próbę
    ściągnięcia pierwszej strony przez wget.

    ---request begin---
    GET /Best-Sellers-Science-Fiction-Fantasy/zgbs/books/25/ HTTP/1.1
    Host: www.amazon.com
    User-Agent: Wget/1.21.2
    Accept: */*
    Accept-Encoding: identity
    Connection: Keep-Alive

    ---response begin---
    HTTP/1.1 503 Service Unavailable
    Content-Type: text/html
    Content-Length: 2671
    Connection: keep-alive
    ...
    Vary: Content-Type,Accept-Encoding,X-Amzn-CDN-Cache,X-Amzn
    -AX-Treatment,User-Agent
    ...
    X-Cache: Error from cloudfront
    ...



    --
    Andrzej A. Filip

Podziel się

Poleć ten post znajomemu poleć

Wydrukuj ten post drukuj

Najnowsze wątki z tej grupy


Najnowsze wątki

Szukaj w grupach

Eksperci egospodarka.pl

1 1 1

Wpisz nazwę miasta, dla którego chcesz znaleźć jednostkę ZUS.

Wzory dokumentów

Bezpłatne wzory dokumentów i formularzy.
Wyszukaj i pobierz za darmo: