留守番電話機能ですが、端末の電源OFF状態の場合やアプリが立ち上がっていない場合にも利用可能ですか？

はい、利用可能です。