根据提供的信息，需要缴纳残疾人就业保障金（残保金）的单位包括：

1. 机关

2. 团体

3. 企业

4. 事业单位

5. 民办非企业单位

此外，根据地方政府的具体规定，可能还会有其他类型的单位需要缴纳残保金。例如，个体工商户在某些情况下可以免缴残保金，而安排残疾人就业比例达标的单位也可以免缴。

缴纳残保金是用人单位的法定义务，旨在鼓励用人单位积极吸纳残疾人就业，促进社会和谐与包容性发展。用人单位应按照当地政府规定的比例安排残疾人就业；如果达不到规定比例，则需按规定缴纳残保金