当单位退回之前发放的补贴时，会计处理应遵循以下步骤：

确认退回补贴的金额和日期，并在财务系统中记录退款信息。

将退款金额从原先的收入科目中扣除，这通常涉及将补贴收入科目进行冲减。

在负债科目中增加相应的退款负债，如果适用的话。

将退款金额转入银行存款科目，以完成退款的账务处理。

及时向上级单位报备退款情况，并保留相关的退款凭证和相关文件作为凭证。

具体的会计分录可能因补贴的类型和具体情况而异，但以下是一个通用的示例：

如果退回的是社保补贴，会计分录可能是：

```

借：银行存款（或库存现金）

贷：管理费用—社保（红字）

```

如果退回的是其他类型的补贴，会计分录可能是：

```

借：银行存款

贷：其他收益—政府补助（红字）

```

请根据实际退回的补贴类型和金额，以及适用的会计准则和规定，进行相应的会计处理。