这个要具体原因具体分析。如果造纸厂只是噪音大并未造成污染，扰民你也拿他无办法，因为人家是合法经营，证照齐全。

如果你确实认为噪音过大，那你就报警，配合警察与邻居交流沟通，让他想办法减小噪音，调整生产时间，尽量不要影响大家的正常生活。

如果已经对周围住户的生活工作学习造成了影响，存在了严重扰民现象，就向环保局反映，由环保局等相关职能部门对其进行调查处罚。