MySQL Connectorでデータ量が多い場合に分割して取込している方いますか?
MySQL Connectorでデータ量(件数や1レコードあたりのサイズ)が多い場合に分割等何か工夫して取込している方いますでしょうか?どの様に行っているか参考にさせていただきたいです。 現在 select * from table_name where 条件; という形でデータを取り込んでいるのですが、対象件数が数百万件あります。 ある時急に取込が10数分だったものが数時間レベルで遅くなり確認したところ 1撃で取れる件数(データ量)が多すぎてDB側がボトルネックになってしまっていました。 1撃で取れる件数を少なくすると解決できたため select * from table_name where 条件 and 分割条件; ->…