ハマログ

株式会社イーツー・インフォの社員ブログ

時限爆弾解除・・・!

コーディングに慣れてきて、楽しくなってきた、fujiです。

最近、MySQLでデータを取得して、別のDBに保存するバッチを実装しています。

情報単位でバッチを分けて実装する中で出た、エラーについて書きます。

コードを使いまわせる個所が多かったのと、Laravelはドキュメントが充実しているのでさくさく進んでいたのですが、下記のエラーが出ました。

<code>SQLSTATE[HY000]: General error: 1390 Prepared statement contains too many placeholders in hogehoge</code>

「準備済みステートメントに含まれるプレースホルダーが多すぎます」とのことで、一回にインサートする件数が多い (?) のが原因でした。

「件数が多い場合」を考慮しなきゃいけないのって、数万件からだと思ってたのですが7000件程度で考慮が必要になりました。。

Laravelが用意してくれてる関数を使って、1000件毎に区切ってインサートするよう対応しました。

<code>->chunk(1000, function ($getRecordObj) {
     $getRecordChunkArr = json_decode($getRecordObj, true);
     foreach ($getRecordChunkArr as $getRecordArr) {
          DB::connection('mysql')->table('plan_histories')
      ->insert($getRecordArr)
     }
 });</code>

既に実装済みのバッチも、今は件数が少なくても多くなる可能性があるので、エラーが出ないよう同じ処理にして「時限爆弾」を解除しましたーー

mysql

  fuji   2018年12月26日


関連記事

laravel5で実際に実行されたクエリを確認する

クエリビルダやEloquentを利用する際に、実際に実行されたクエリを確認したい…

Laravel4.1から4.2へのアップグレード

Laravel4.1から4.2へのアップグレードを行いました。 composer…

Laravel5.4のバリデーションの重複チェックで自分自身は除外

更新時にメールアドレス重複の確認などで使う場合、自分自身のを除外する必要がありま…


← 前の投稿

次の投稿 →