山东一家进出口公司和某外国公司订立了进口尿素5000吨的合同，依合同约定我方开出以该外国公司为受益人的不可撤销的跟单信用证，总金额为148万美元。双方约定如发生争议则提请北京中国国际贸易仲裁委员会仲裁。2005年10月货物装船后，该外国公司持提单在银行议付了货款。货到青岛后，我公司发现尿素有严重的质量问题，立即请商检机关进行了检验，证实该批尿素是毫无使用价值的废品。我公司持商检证明要求银行追回已付款项，否则将拒绝向银行支付货款。银行是否应追回已付货款？我 公司是否有权拒绝向银行付款，为什么？