在对银行业机构进行行政处罚时，若被处罚当事人拒绝执行或逾期不执行行政处罚决定的，银行业监督管理机构只能申请人民法院强制执行。