残差值是向量，即为残差向量。

残差在数理统计中是指实际观察值与估计值（拟合值）之间的差。残差蕴含了有关模型基本假设的重要信息。如果回归模型正确，可以将残差看作误差的观测值。它应符合模型的假设条件，且具有误差的一些性质。利用残差所提供的信息，来考察模型假设的合理性及数据的可靠性称为残差分析。残差分析就是通过残差所提供的信息，分析出数据的可靠性、周期性或其它干扰。