不需要罚款的，只要对方把记账联复印件寄给你，你按发票的编号，金额，税金等内容写个遗失报告，寄给开票的单位，要开票单位，把你的遗失报告交到开票单位的主管税务机关，开个以抄报税证明单，盖章签字的，寄给你，你凭这个单或原发票复印件，再到你单位的税务主管单位认证就可以了。