大量データをコレクションに格納するとメモリ使用量が跳ね上がってしまいます。
メモリを圧迫するとOut Of Memoryエラーなど、処理に影響が出るため、
コレクションを使い終わったら、メモリを解放して動作に支障が出ないようにする方法について試してみました。
試すこと
GC.Collect()を使ってメモリ開放がうまくいくか
(参考)
How do I avoid Out Of Memory issues in the blue prism?
手順
Excelににカラム数20、30000件のデータを用意します。
以下のようなフローを用意します。
データ取得ブロック内の処理で、Excelを読み込み、コレクションに格納するフローです。
格納したコレクションデータを削除します。
これにより、”Data”コレクションがガベージコレクションの対象としてマークされます。
GC.Collect()でメモリ開放します。
上記の流れにおいて、メモリ使用量の推移をタスクマネージャーで監視します。
結果
コレクションにデータ格納前
コレクションにデータ格納後
メモリ使用量が跳ね上がりました。
コレクションデータを全削除
メモリ使用量はほとんど変わりません。
ガベージコレクション実行
データ格納前のメモリ使用量に戻りました。
注意点
あまりに大量のデータをコレクションに格納しようとすると、OutOfMemoryになってしまいます。
以下の例では10万件のデータを読み込もうとするとエラーになってしまいました。
適切なデータ量で捌いていく実装にしましょう。