[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
[dennou-ruby:003752] 大規模データ
- To: dennou-ruby@xxxxxxxxxxx
- Subject: [dennou-ruby:003752] 大規模データ
- From: Shin-ichi Takehiro <takepiro@xxxxxxxxxxxxxx>
- Date: Thu, 30 Oct 2014 06:54:13 +0900
竹広です. 
諸事情で倍精度 1024^3 程度の大きさのデータを扱わねば
ならなくなりました. 当然ながら読み込んだ配列は
GPhys/NArray の 2GB の限界を越えてしまい, 何かしら
ロードするタイミングでエラーが出てしまいます. 
2 GB っていまどきデータ解析としては厳しいような気がしますが, 
皆さんどう対処されているのでしょう? チュートリアルに出ていた
座標変数をループで回して, といったことはあまりやりたくないです. 
識者のご意見お聞かせ下さい. 
                    Takepiro(竹広真一)@数理解析研究所. 京都大学
                      	E-mail:takepiro@xxxxxxxxxxxxxx
			       takepiro@xxxxxxxxxxxxxxxxxxxx