WordPressのプラグインは必要最低限に抑えないと動きがモッサリしてきます。
よくあるのが高速化プラグインを入れたのに、そのプラグインのせいでそれ以上に遅くなるというパタンです。
これは本末転倒なわけです。
スピードにこだわる私が厳選した漢のWordpressプラグインをご紹介します。
私が使っているWordpressプラグインはコレだけ
とりあえず、使っているテーマに機能が含まれているものはテーマのものを使います。
逆に言えば、多機能で高速なテーマを使うことが、全ての始まりになります。
EWWW Image Optimizer

EWWW Image Optimizer
より小さな画像、より速いサイト、より幸せな訪問者。ロケット工学の学位を必要としない、包括的な画像最適化です。
画像をいい感じに圧縮してくれます。
Simple Page Ordering

Simple Page Ordering
Order your pages and other custom post types that support "page-attributes" with simple drag and drop right from the sta...
固定ページの並べ替えが出来るようになります。
Category Order and Taxonomy Terms Order

Category Order and Taxonomy Terms Order
ドラッグ & ドロップで並べ替え可能な JavaScript 機能を使用して、カテゴリーとすべてのカスタムタクソノミーのターム(階層)と子タームを並べ替えます。
カテゴリの並べ替えが出来るようになります。
WebSub/PubSubHubbub

WebSub (FKA. PubSubHubbub)
あなたのブログが更新されたときに世界に伝える良い方法。
SEOに強くなると言われています。
WordPress Ping Optimizer
WordPress Ping Optimizer
あなたのワードプレスのブログを ping spammer としてタグを付けないように保存します。このプラグインは、cbnet Ping Optimizer プラグインのフォークです。
SEOに強くなると言われています。
WP-Optimize

WP-Optimize – Cache, Compress images, Minify & Clean database to boost page speed & performance
この強力なキャッシュプラグインを使ってキャッシュの取得やその他の機能を利用しましょう。キャッシュを作成し、画像を最適化し、データベースをクリーンアップし、縮小化を行い、最大限のパフォーマンスを実現します。
WordPressのごみ掃除
XML Sitemap & Google News feeds

XML Sitemap & Google News
XML サイトマップと Google ニュースサイトマップのフィードを提供します。マルチサイト、WP Super Cache、Polylang と WPML に対応。
Google search consoleなどに登録するサイトマップ作成
私が外したWordpressプラグインはコレだ
SEO系のプラグインは基本的に不要な感じがします。
XML sitemapを作ってくれるのは便利なのですが、SEO的な効果はあまりない気がします。キーワードを入れてチェックしてもらってもそれほど効果があるとも思えませんでした。重くなるだけなのでやめました。
Yosat SEO

Yoast SEO
WordPress の SEO を向上させましょう: Yoast SEO プラグインを使用して、より良いコンテンツを執筆し、完全に最適化された WordPress サイトを作成しましょう。
All in One SEO

All In One SEO – SEO ランキングを向上させ、トラフィックを増やす強力な SEO プラグイン。
AIOSEO は非常に強力な WordPress SEO プラグインです。包括的な SEO ツールと AI を活用したスマートな SEO 最適化により、SEO ランキングとトラフィックを改善します !
Jet pack

Jetpack – WP セキュリティ、バックアップ、高速化、成長
バックアップ、WAF、マルウェアスキャンなどの強力なワンクリックツールで、WP のセキュリティを向上させます。 統計情報、CDN、ソーシャル共有など無料ツールが含まれています。
Hello Dolly

Hello Dolly
これはただのプラグインではありません。Louis Armstrong によって歌われた最も有名な二つの単語、Hello, Dolly に要約された同一世代のすべての人々の希望と情熱を象徴するものです。
まとめ
WordPressのpluginを入れるとWordpressが遅くなり、今度は高速化pluginを入れてさらに遅くなるというパタンにならないように、プラグインが多くならない多機能で高速なテーマを選ぶ方が良いと思います。