ハマログ

株式会社イーツー・インフォの社員ブログ

時限爆弾解除・・・!

コーディングに慣れてきて、楽しくなってきた、fujiです。

最近、MySQLでデータを取得して、別のDBに保存するバッチを実装しています。

情報単位でバッチを分けて実装する中で出た、エラーについて書きます。

コードを使いまわせる個所が多かったのと、Laravelはドキュメントが充実しているのでさくさく進んでいたのですが、下記のエラーが出ました。

<code>SQLSTATE[HY000]: General error: 1390 Prepared statement contains too many placeholders in hogehoge</code>

「準備済みステートメントに含まれるプレースホルダーが多すぎます」とのことで、一回にインサートする件数が多い (?) のが原因でした。

「件数が多い場合」を考慮しなきゃいけないのって、数万件からだと思ってたのですが7000件程度で考慮が必要になりました。。

Laravelが用意してくれてる関数を使って、1000件毎に区切ってインサートするよう対応しました。

<code>->chunk(1000, function ($getRecordObj) {
     $getRecordChunkArr = json_decode($getRecordObj, true);
     foreach ($getRecordChunkArr as $getRecordArr) {
          DB::connection('mysql')->table('plan_histories')
      ->insert($getRecordArr)
     }
 });</code>

既に実装済みのバッチも、今は件数が少なくても多くなる可能性があるので、エラーが出ないよう同じ処理にして「時限爆弾」を解除しましたーー

mysql

fuji   fuji   2018年12月26日


関連記事

Laravel5.6のUUID Methodsについて

はじめに Laravel5.6で、UUIDを生成するメソッドが実装されました (…

Laravelでブラウザテストを実行する(Laravel Dusk)

いままでブラウザテストの環境は、Codeceptionとか、Seleniumとか…

LaravelとGoogle APIの統合

LaravelでGoogleのAPIを利用します。 Laravelにはcompo…


← 前の投稿

次の投稿 →