CSVファイルから読み取ったデータをSnowflakeへINSERTしようとすると、スクリプトが実行中のままとなり、処理終了までに時間がかかる

質問

CSVファイルから読み取ったデータをSnowflakeへINSERTしようとすると、スクリプトが実行中のままとなり、処理終了までに時間がかかります。
処理時間を短縮する方法を教えてください。

回答

以下をご対応いただくことで処理時間が改善される可能性がありますので、お試しください。

・「テーブル書き込み処理」の[書き込み設定]より、バッチサイズに設定している値を現在の設定よりも少ない値に変更する
　※バッチサイズの設定を「10000」に設定していた場合は、「5000」などに変更してください。

・「繰り返し(データ件数)処理」を配置し、「繰り返し(データ件数)処理」でINSERT処理を囲う形にスクリプトの組み換えを行う
　※「繰り返し(データ件数)処理」の[必須設定]より、「1ループでの処理件数」を10000や20000などに設定してください。

・CPU、メモリのスペックアップを検討する
　※リソースの適切な設定値についてはお客様ごとに異なる関係上、HULFT Squareにおけるベストプラクティスはなく、
　　サポートよりスペックに関するご案内も行っておりません。
　　恐れ入りますが、FAQ記事「スケーラビリティの設定について」などをご参考に、お客様にてご検討ください。

関連FAQ

◇CSVファイルを一定のルールで複数のCSVファイルに分割するスクリプトの処理速度を改善したい