支付宝不经过动态口令和手机验证码直接扣银行钱合理吗？

现在买东西只需要支付宝密码就可以扣除银行卡的`钱，这合理吗？太没有安全感了!有什么办法可以加强自己的银行卡管理吗?将来万一丢钱了是支付宝负责还是银行负责？