[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
[dennou-ruby:003752] 大規模データ
- To: dennou-ruby@xxxxxxxxxxx
- Subject: [dennou-ruby:003752] 大規模データ
- From: Shin-ichi Takehiro <takepiro@xxxxxxxxxxxxxx>
- Date: Thu, 30 Oct 2014 06:54:13 +0900
竹広です.
諸事情で倍精度 1024^3 程度の大きさのデータを扱わねば
ならなくなりました. 当然ながら読み込んだ配列は
GPhys/NArray の 2GB の限界を越えてしまい, 何かしら
ロードするタイミングでエラーが出てしまいます.
2 GB っていまどきデータ解析としては厳しいような気がしますが,
皆さんどう対処されているのでしょう? チュートリアルに出ていた
座標変数をループで回して, といったことはあまりやりたくないです.
識者のご意見お聞かせ下さい.
Takepiro(竹広真一)@数理解析研究所. 京都大学
E-mail:takepiro@xxxxxxxxxxxxxx
takepiro@xxxxxxxxxxxxxxxxxxxx