Re: matlab taki wydajny? - Grupy dyskusyjne w eGospodarka.pl

eGospodarka.pl › Grupy › pl.comp.programming › matlab taki wydajny? › Re: matlab taki wydajny?

Path: news-archive.icm.edu.pl!news.rmf.pl!nf1.ipartners.pl!ipartners.pl!news.nask.pl!
news.nask.org.pl!newsfeed00.sul.t-online.de!t-online.de!border2.nntp.dca.gigane
ws.com!nntp.giganews.com!postnews.google.com!n7g2000yqb.googlegroups.com!not-fo
r-mail
From: Mariusz Marszałkowski <m...@g...com>
Newsgroups: pl.comp.programming
Subject: Re: matlab taki wydajny?
Date: Fri, 5 Feb 2010 09:17:02 -0800 (PST)
Organization: http://groups.google.com
Lines: 50
Message-ID: <7...@n...googlegroups.com>
References: <5...@a...googlegroups.com>
<hj1kmo$lt3$1@solani.org>
<3...@v...googlegroups.com>
<hj1qkn$6a9$1@solani.org>
<6...@e...googlegroups.com>
<hj1st9$qrf$1@news.onet.pl>
<5...@2...googlegroups.com>
<hj2c9j$7u5$1@news.onet.pl> <hkc9r4$ndj$1@news.interia.pl>
<6...@l...googlegroups.com>
<2...@f...googlegroups.com>
NNTP-Posting-Host: 89.229.16.190
Mime-Version: 1.0
Content-Type: text/plain; charset=ISO-8859-2
Content-Transfer-Encoding: quoted-printable
X-Trace: posting.google.com 1265390222 3053 127.0.0.1 (5 Feb 2010 17:17:02 GMT)
X-Complaints-To: g...@g...com
NNTP-Posting-Date: Fri, 5 Feb 2010 17:17:02 +0000 (UTC)
Complaints-To: g...@g...com
Injection-Info: n7g2000yqb.googlegroups.com; posting-host=89.229.16.190;
posting-account=xjvq9QoAAAATMPC2X3btlHd_LkaJo_rj
User-Agent: G2/1.0
X-HTTP-UserAgent: Mozilla/5.0 (Windows; U; Windows NT 5.2; pl; rv:1.9.1.7)
Gecko/20091221 Firefox/3.5.7,gzip(gfe),gzip(gfe)
Xref: news-archive.icm.edu.pl pl.comp.programming:184717
[ ukryj nagłówki ]
On 5 Lut, 07:53, bartekltg <b...@g...com> wrote:
> On 3 Lut, 22:19, Mariusz Marszałkowski <m...@g...com> wrote:
>
> > liniowe. Domyslam sie ze z tak zdefiniowanym zadaniem nie ma problemu,
> > ale
> > po jednym rozwiazaniu trzeba utworzyc dodatkowa kolumne przez poddanie
> > nieliniowej funkcji kilku innych kolumny (na chybil tafil, albo
> > systematycznie wszystkie
> > kombinacjie) i podac najlepsze dopasowanie.
>
> Jesli masz na mysli fminsearch, to znajduje lokalne minimum
> i chyba nie najlepiej radzi sobie ze zbyt duza liczba
zmiennych.http://en.wikipedia.org/wiki/Nelder%E2%80%
93Mead_method
>
> Jesli dobrze rozumiem, chcesz miec jakis wklad kombinatoryczny.
Mam parametry wejsciowe x_i i np. jeden parametr wyjsciowy y.
Nastepnie rozszerzam parametry wejsciowe o jeden dodatkowy
przez poddanie nieliniowej funkcji kazdej kombinacji funkcja( x_i ,
x_j ).
Jesli mam 50 parametrow wejsciowych, to wychodzi 2500 kombinacji.
WIec trzeba 2500 razy ulozyc uklad rownan normalnych, kazdy
rozwiazac i podac kombinacje x_i, x_j ktora daje najlepsze
dopasowanie.
To co zwraca funkcja( x_i , x_j ) traktujemy jako 51-szy parametr.

> Tego ta funkcja nie zrobi. Jesli jednak dopuszczasz, aby w
> rozwiazaniu
> byly wszytkie, to niepotrzebne beda mialy maly wspolczynnik i tyle
To też dobra metoda, szczegolnie jesli do glownej przekatnej doda
sie pewne liczby wieksze od zera.

> (rozumiem, ze przez 'nieliniowosc' rozumiesz np to, ze wspolrzynnik
> jest odchyleniem rozkaldu gaussa, a nie, ze do symy wchodzi
> parametr*funkcja(wartosc kolumny) )
Raczej parametr * funkcja( x_i , x_j )

> Miliardy wierszy to gigabajty.
Niestety to moja zmora. Z reguly brakuje dobrych danych przy
data minning. Moje dane nie mieszcza sie na 10 nowoczesnych
dyskach. A moze jakas baza danych ma zaimplementowana
regresje liniowa dla wielu parametrow? Jakis odpowiednik
excelowskiego reglinp?

> Matlab nie musi byc wtedy najlepszym
Hmmm, dziwne, powinien miec opcje ze macierz lezy na
dysku w pliku tekstowym albo binarnym. To raczej
zwykla rzecz ze dane leza na dysku a w pamieci sa
tylko "zmienne algorytmu".

Pozdrawiam