eGospodarka.pl
eGospodarka.pl poleca

eGospodarka.plGrupypl.comp.wwwCzy pytanie o sczytywanie stron programami/skryptami to tu? › Re: Sczytywanie skryptem Amazon Top100 [wget (User-Agent) rulez? Nie.]
  • Data: 2022-03-11 07:31:14
    Temat: Re: Sczytywanie skryptem Amazon Top100 [wget (User-Agent) rulez? Nie.]
    Od: "Andrzej A. Filip" <a...@o...eu> szukaj wiadomości tego autora
    [ pokaż wszystkie nagłówki ]

    "Andrzej A. Filip" <a...@o...eu> pisze:
    > Tomek <s...@w...xx.pl> pisze:
    >> W dniu 09.03.2022 o 14:41, Andrzej A. Filip pisze:
    >>> Czy da się *bez java-script* sczytać pełne top100 z list amazona?
    >>> Może skryptu bez java-script (po stronie klienta) widzą pozycje
    >>> 1:30 i 51:80.
    >>> https://www.amazon.com/best-sellers-books-Amazon/zgb
    s/books/
    >>>
    >>
    >> A sprawdzałeś jak sobie radzi "wget"?
    >
    > Chciałem sprawdzić tylko "na odczepnego" ale o dziwo różnica jest i na
    > pierwszy rzut oka jest 50 pozycji na stronie. Dzięki za *o dziwo*
    > działające rozwiązane. Później sprawdzę czy samo ustawienie nagłówka
    > User-Agent wystarcza [raczej tak nie niekoniecznie (na dłużej)].
    >
    > Wkopałem się w obecną pozycję bo AFAIR Amazon się biesił na pusty
    > User-Agent albo "nie poprawiony" dla WWW::Mechanize (perl).
    > Zresztą AFAIR Amazon co kilka miesięcy odstawia "małą rewolucje".

    Sugestia przestała był użyteczna. Amazon blokuje User-Agent wget i
    samego wget "zależnie od fazy księżyca". Kilka razy zadziałało a
    teraz blokuje dostęp prawie zawsze.

    PO prostu użyje czego innego to śledzenia nowości z kategorii książek
    które mnie interesują "w akceptowalnym dla mnie formacie".

    --
    Andrzej A. Filip

Podziel się

Poleć ten post znajomemu poleć

Wydrukuj ten post drukuj


Następne wpisy z tego wątku

Najnowsze wątki z tej grupy


Najnowsze wątki

Szukaj w grupach

Eksperci egospodarka.pl

1 1 1

Wpisz nazwę miasta, dla którego chcesz znaleźć jednostkę ZUS.

Wzory dokumentów

Bezpłatne wzory dokumentów i formularzy.
Wyszukaj i pobierz za darmo: