TL;DR
Webpackのコンフィグファイル名を間違えていた
原因/対処法
Cmd + Shift + aでPreferences -> Language & Frameworks -> JavaScript -> Webpackを開き、webpack configuration fileを確認した所、webpack.config.jsとなっているべき所がwebpack.common.jsとなっていたことが原因でした。
ファイル名を直した所機能するようになりました。