メディアサーバーを作るには、Windows、Linuxとも対応している Emby というソフトウェアがあります。
オープンソース。無料です。
PCにインストールして、起動すると、すぐ使えます。
設定は、音楽やビデオ、写真などが入っているディレクトリを指定するぐらいです。
常駐しているEmbyにWebブラウザでアクセスして設定します。
ただ、Windowsの場合は、Windows Media Player を使えば、簡単にメディアサーバーになります。
どうしても Windows Media Player ではダメではなければ、Windows Media Player でいいと思います。