根据现行金融管理体制，《金融违法行为处罚办法》所规定的行政处罚全部由中国人民银行实施。