ワードプレスでプラグイン使って一括書き換えするならSearch Regex

「Search pattern」に書き換え前のテキスト
「Replace pattern」に書き換え後のテキスト

Searchで検索、Replaceで置き換え（テスト）、Replace＆Saveで書き換え＆保存

あまり多いと使えないのでそのときは、phpMyAdminを使う。
phpMyAdminを使うときはこっちを参照する。