プラグインダウンロード後
ワードプレスメニューの「メディア→ライブラリ」から
差し替えたい画像を選択。

「新しいファイルをアップロード」から
新しい画像をアップすればOK。
参考サイト

WordPressで同一ファイル名の画像を差し替えアップロードする方法|株式会社リソース・シェアリング
WordPressは、一度アップロードした画像を別の画像に差し替えたいと思って同一ファイル名でアップロードしても、前の画像が差し替えられる事はありません。 この場合、同一ファイル名の最後に連番の数字が足されて、別ファイル
https://wordpress.vogue.tokyo/enable-media-replace


