ポインセチアを屋外で育てるのは無理ですか？

クリスマスに赤・ピンク・白のポインセチアの寄せ植えの鉢を購入しました。
室内に置いたり玄関に置いたりとたまに置き場所を変えてはいますが、今は家の中で育てています。
まだ元気に咲いておりもう少し楽しめそうですが、枯れた葉などを掃除していると土の上に落ちた葉にカビのようなものが生えていたり、よく見ると小さな虫が居たりして、家の中に置いておくのがちょっと嫌かな～～と思っています。
出来れば外に鉢ごと置いて管理をしたいのですが無理でしょうか？
温室などはなく家に軒もないので、そのまま置外に置いておく事になります。
何かでポインセチアも地植えにすれば大きな木の様になるという様な事を読んだことがあります。
地植えをする場所もないのですが、地植えにできるのであれば鉢を外で管理できるのでは？と思って質問しています。

ご存知の方、アドバイスをお願い致します。