はい。交換して頂いて問題ありません。交換方法は取扱い説明書に記載しておりますので、参照下さい。

送信側・受信側のテストボタンを押しても鳴りっぱなしになる場合は、
電池が弱っている事が考えられます。電池を交換の上、再度テストを行って下さい。
電池を交換しても鳴りっぱなしになる場合は、機器の故障が考えられます。
電池を入れただけで鳴るという場合も同様に機器の故障であると思われます。