肩幅が広くファッションで困っています

現在１８歳の男です。
最近ファッションに興味を持ち始めたのですが、私の体型から問題が生じでいます。

私は中高と水泳をやっていたためかなり肩幅が広いです。
胸板等も厚くがっちりした感じです。ちなみに１７３cm ６４kgです。

普段はジャケットにジーンズなどを合わせて着てます。
身体のバランスではメンズのＭ程度でいいのですが、なかなか合う服がありません。逆にＬサイズでは丈が大きくなって不恰好になります。

また、個人的には５３５１やトルネードマートなどの丸井系ブランドが好きなのですが、細身の方しか着こなせないと聞きました。

◎私のような体型の者がこれらのブランドの服を着るのは厳しいでしょうか？
◎また私に合うようなブランドは何かないでしょうか？

宜しくお願いいたします。