-
Data: 2022-03-10 09:00:40
Temat: Re: Sczytywanie skryptem Amazon Top100 [wget (User-Agent) rulez?]
Od: "Andrzej A. Filip" <a...@o...eu> szukaj wiadomości tego autora
[ pokaż wszystkie nagłówki ]Tomek <s...@w...xx.pl> pisze:
> W dniu 09.03.2022 o 14:41, Andrzej A. Filip pisze:
>> Czy da się *bez java-script* sczytać pełne top100 z list amazona?
>> Może skryptu bez java-script (po stronie klienta) widzą pozycje
>> 1:30 i 51:80.
>> https://www.amazon.com/best-sellers-books-Amazon/zgb
s/books/
>>
>
> A sprawdzałeś jak sobie radzi "wget"?
Chciałem sprawdzić tylko "na odczepnego" ale o dziwo różnica jest i na
pierwszy rzut oka jest 50 pozycji na stronie. Dzięki za *o dziwo*
działające rozwiązane. Później sprawdzę czy samo ustawienie nagłówka
User-Agent wystarcza [raczej tak nie niekoniecznie (na dłużej)].
Wkopałem się w obecną pozycję bo AFAIR Amazon się biesił na pusty
User-Agent albo "nie poprawiony" dla WWW::Mechanize (perl).
Zresztą AFAIR Amazon co kilka miesięcy odstawia "małą rewolucje".
"Good Judgment Comes with Experience. Experience Comes from Bad Judgment"
--
Andrzej A. Filip
Następne wpisy z tego wątku
- 11.03.22 07:31 Andrzej A. Filip
- 13.03.22 20:26 Roman Tyczka
- 13.03.22 20:56 Andrzej A. Filip
- 15.03.22 09:46 Tomek
- 15.03.22 12:18 Andrzej A. Filip
Najnowsze wątki z tej grupy
- is it live this group at news.icm.edu.pl
- php, linki z nazwami a $_GET, SEO
- www polityka pl captcha
- dyktatura brudnego palucha
- www.znanylekarz.pl
- Czy pytanie o sczytywanie stron programami/skryptami to tu?
- Grupy webdevowe
- Jak wydrukować stronę?
- IIS, kilka witryn
- linki <a href="/strona.php"> (ze slashami)
- co rozszerza stronę??
- responsywny akapit <p>
- Czy istnieje jakiś emulator przeglądarek pod Mac'a?
- taka sama konfiguracja dla localhost i produkcji
- TypeScript - jak uzyskać zmienne prywatne? Gdzie korzyści z TS?
Najnowsze wątki
- 2024-05-18 Warszawa => Mid PHP Developer (Laravel) <=
- 2024-05-18 Warszawa => Software .Net Developer <=
- 2024-05-18 Warszawa => Mid/Senior QA Engineer <=
- 2024-05-18 Ulm => Solution Architect (sichere Kommunikation und IoT-Loesungen <=
- 2024-05-18 Katowice => Head of Virtualization Platform Management and Operating S
- 2024-05-18 Warszawa => SAP WM Consultant / Execution <=
- 2024-05-18 Wrocław => Consultant/Implementer Comarch ERP XL <=
- 2024-05-18 Gdańsk => Head of International Freight Forwarding Department <=
- 2024-05-18 Warszawa => Account Manager (Recruitment Services) <=
- 2024-05-18 Łódź => Salesperson - CRM Systems <=
- 2024-05-18 Łódź => Handlowiec - Systemy CRM <=
- 2024-05-17 ZŁOMNIK o pracy w TVN TURBO, nowych przepisach i współczesnej motoryzacji. Turbo Taryfa!
- 2024-05-17 Białystok => DevOps Engineer Conexa First (Contractor) <=
- 2024-05-17 Warszawa => Starszy inżynier oprogramowania (Rust) <=
- 2024-05-17 Zabrze => Junior HelpDesk <=