SQLを見直す

ASKS変換のクローラーをさらに高速化してみた。

今まで1スレ当たり最大4回実行していたSQL文を見直して
1スレ当たり2回までに抑えるようにした。

この結果、50秒/35スレから35秒/35スレまで高速化できた。

SQLは、更新に掛かる時間がもの凄く多いことが解りました。
これからは、出来るだけフラグをぽこぽこ立てておいて、それを解釈するようにしよう。

フォローする