こんばんは。
ご指摘の事象とは違うかもしれませんがLibrary Viewをカード表示等にした状態で詳細表示を表示させ、そこから曲を選択して詳細表示内で▶クリックで再生するとそのアルバムだけがPlayback Queueに入るようです。
アルバムアート上の▶クリックで再生する場合はそのアルバム以降もPlayback Queueに入ります。
ご参考になれば幸いです。
あと確認している中で、別件ですがアルバムの曲名が表示されない表示モードのうちヘッダ表示のみ詳細表示ではなくアルバムアートが表示されるのは少し違和感がありました。