遷徙沒有問題，但遷徙後又投票，就有可能觸法

第 146 條
以詐術或其他非法之方法，使投票發生不正確之結果或變造投票之結果者
，處五年以下有期徒刑。
意圖使特定候選人當選，以虛偽遷徙戶籍取得投票權而為投票者，亦同。
前二項之未遂犯罰之。
http://law.moj.gov.tw/LawClass/LawS...000001&FLNO=146

一人或一家遷一戶，基本上也沒有問題，但若是多人多家同遷一戶，就會有嫌疑。