-
Data: 2010-09-19 11:27:42
Temat: Re: bash: konkurencyjne przekierowanie jednego pliku do wielu programów
Od: klops <k...@k...pl> szukaj wiadomości tego autora
[ pokaż wszystkie nagłówki ]Chyba najprościej to:
* w pętli (do końca pliku wejściowego):
* w pętli (np. 8 dla 8 rdzeni):
* odczytać parę wierszy
* uruchomić nowy proces do przetwarzania
* w pętli (np. 8 dla 8 uruchomionych procesów roboczych)
* czekać na koniec procesu
Wada - dla każdej pary wierszy trzeba tworzyć nowy proces.
Albo na upartego 2 skrypty:
Skrypt 1: z parametrem ilość procesów roboczych (np. 8). W skrypcie:
* dzielisz liczbę wierszy do przetworzenia przez liczbę procesów
* ustalasz zakresy wierszy do przetwożnia dla wszystkich procesów
* uruchamiasz Skrypt 2 z odpowiednimi parametrami
Skrypt 2: z parametrem zakres wierszy do przetworzenia. W skrypcie:
* Odczytujesz zakres wierszy.
* Pchasz to rurą do programu roboczego.
Wada: idealistyczne założenie, że wszystkie pary wierszy z pliku
wejściowego wymagają takiej samej ilości obliczeń.
Następne wpisy z tego wątku
- 19.09.10 19:38 Mariusz Marszałkowski
- 19.09.10 20:01 Michoo
- 19.09.10 23:47 Mariusz Marszałkowski
- 20.09.10 06:43 Maciej Pilichowski
- 20.09.10 09:22 hubert depesz lubaczewski
- 20.09.10 19:21 klops
- 20.09.10 22:38 Mariusz Marszałkowski
- 23.09.10 20:20 slawek
- 02.10.10 09:12 Mariusz Marszałkowski
Najnowsze wątki z tej grupy
- Na grupie comp.os.linux.advocacy CrudeSausage twierdzi, że Micro$lop używa SI do szyfrowania formatu dok. XML
- Błąd w Sofcie Powodem Wymiany 3 Duńskich Fregat Typu Iver Huitfeldt
- Grok zaczął nadużywać wulgaryzmów i wprost obrażać niektóre znane osoby
- Can you activate BMW 48V 10Ah Li-Ion battery, connecting to CAN-USB laptop interface ?
- We Wrocławiu ruszyła Odra 5, pierwszy w Polsce komputer kwantowy z nadprzewodzącymi kubitami
- Ada-Europe - AEiC 2025 early registration deadline imminent
- John Carmack twierdzi, że gdyby gry były optymalizowane, to wystarczyły by stare kompy
- Ada-Europe Int.Conf. Reliable Software Technologies, AEiC 2025
- Linuks od wer. 6.15 przestanie wspierać procesory 486 i będzie wymagać min. Pentium
- ,,Polski przemysł jest w stanie agonalnym" - podkreślił dobitnie, wskazując na brak zamówień.
- Rewolucja w debugowaniu!!! SI analizuje zrzuty pamięci systemu M$ Windows!!!
- Brednie w wiki - hasło Dehomag
- Perfidne ataki krakerów z KRLD na skrypciarzy JS i Pajton
- Instytut IDEAS może zacząć działać: "Ma to być unikalny w europejskiej skali ośrodek badań nad sztuczną inteligencją."
- Instytut IDEAS może zacząć działać: "Ma to być unikalny w europejskiej skali ośrodek badań nad sztuczną inteligencją."
Najnowsze wątki
- 2025-09-20 W Play chciałem kupić Huawei -- jako swój pierwszy smartfon...
- 2025-09-20 W Play chciałem kupić Huawei -- jako swój pierwszy smartfon...
- 2025-09-20 Kopiowanie telefonu
- 2025-09-20 Warszawa => AWS Cloud Engineer <=
- 2025-09-20 Łódź => Regular Network Engineer <=
- 2025-09-20 Gdynia => Przedstawiciel handlowy / KAM (branża TSL) <=
- 2025-09-20 wrzesień
- 2025-09-20 Łomiarz wychodzi w marcu
- 2025-09-19 Czeladź => Specjalista ds. public relations <=
- 2025-09-19 Warszawa => International Freight Forwarder <=
- 2025-09-19 Warszawa => DevOps Engineer <=
- 2025-09-19 zasieg radaru
- 2025-09-19 JAK nie formułować sprzeciwów w kwestii Strefy w Gazie [Niemcy: Hasło rodem z III Rzeszy]
- 2025-09-19 Zmywarka Bosch SRV55T43EU - awaria
- 2025-09-18 Kuczyński twierdzi że WIBOR nie jest do ruszenia w sądach