Microsoft PowerToys には PDF サムネイル生成機能 があり、エクスプローラー互換のファイラーでもそのまま利用できます。
PowerToys が PDF サムネイル用の Shell Extension を提供するため

[PowerToys Settings] を開く
左メニューの「File Explorer add-ons」
Thumbnail icon Previewで、「Portable Document Format(.pdf)」を有効にする

Mac の Finder は 標準で PDF の1ページ目サムネイルを表示できます。