是可以的，要更改發票開具和付款信息，首先需要在發票行政管理機構進行登記，提交營業執照、組織機構代碼證、稅務登記證復印件等相關資料，同時需要提供開戶銀行、銀行賬號信息。在完成登記后，發票行政管理機構會核發新的發票開具和付款信息，然后單位就可以正常使用新的發票開具和付款信息。 
 
拓展知識：基本戶和一般戶的區別在于，一般戶可以在任意銀行開立，而基本戶只能在稅務機關指定的銀行開立。此外，基本戶的受益人只能是稅務機關指定的受益人，而一般戶的受益人是可以自定義的。