1、行政诉讼：要是掌握了相关证据，能证明是银行问题或非自己能抗拒的外力造成的逾期，而银行不愿意开具非恶意逾期证明，侵犯了自己的合法权益，可以向人民法院提起行政诉讼。我国《行政诉讼法》第46条规定，公民、法人或其他组织直接向人民法院提起诉讼的，应当自知道或者应当知道作出行政行为之日起6个月内提出。2、申诉：要是银行不愿意开具证明，你也不愿意走法律途径，可以尝试提出申诉意见，这是人行征信中心官方投诉渠道的一种，要是你的征信记录有误，就可以提出申诉，征信中心受理后，会在二十个工作日内进行核实，确定有误的话会立即更正。