WordPressでまともに検索・置換する時になくてはならない（というか標準装備しろ）プラグインに「Search Regex」があります。
一行だと検索も置換も簡単なのですが、複数行となると一気に面倒くさくなります。
で、別のブログで前に見た方法では上手く行かなかったので、2019年9月の時点で動作する方法を書いておきます。
※2021年1月時点では、正規表現など使わず普通に複数行の検索や置換ができます。
1．たとえば、下記の複数行にわたる語句を検索したい場合を考えます。
あああ
いいい
ううう
2．行末に「\n」を付けて、改行を消します。
あああ\nいいい\nううう
3．一番前と一番後ろに「|」を付けます。
|あああ\nいいい\nううう|
4．検索欄（Search pattern）に上記の加工済み語句を貼り付けます。
5．置換欄（Replace pattern）の下にある「」欄と2つ右の「multi-line」欄にチェックを入れます。
6．これで検索なり置換なりしてください。