英単語の exile は名詞として「国外追放; 亡命，国外放浪．亡命者，放浪者」が主な意味で、本来的には「ならず者」という意味は特に含まれてなさそうなこと。
http://ejje.weblio.jp/content/EXILE
高校時代にストーンズの「メインストリートのならず者 Exile on Main Street」を見て以来 exileという単語に遭遇しなかったんだ。Exileは「ならず者」だと思ってた！ごめん！