うちもそうでした。それどころか開けてても聞こえないことも。
あまりにも不便なので、電話のように子機のあるドアホンに付け替えました。