web-dev-qa-db-ja.com

Amazonsagemakerのメモリエラー

S3に保存されている2GBのデータを前処理すると、Amazonsagemakerでメモリエラーが発生します。データの読み込みに問題はありません。データの次元は700万行64列です。 1つのホットエンコーディングも不可能です。これを行うと、メモリエラーが発生します。ノートブックインスタンスはml.t2.mediumです。この問題を解決する方法は?

7
VaRun Sabu

ノートブックインスタンスのデータを処理していると思いますよね? t2.mediumには4GBのRAMしかないため、単にメモリが不足している可能性があります。

より大きなインスタンスを試しましたか?仕様はこちらです: https://aws.Amazon.com/sagemaker/pricing/instance-types/

2
Julien Simon

AWSフォーラムの投稿を https://forums.aws.Amazon.com/forum.jspa?forumID=285 で切り取ることができますか?あなたの質問で。そうすれば、SageMakerチームがあなたを助けることができるでしょう。

0