船东和承租人订立了期租合同。租方以船方过错使货物受损，并且该船撞毁租船人码头设施和未付经纪费等为由直接从租金中扣除上述损失，船方则直接将船载货物予以留置并向承租人索要租金。此时船方是否有权留置货物