先假设3正确，则2必正确，不符合只有一句正确，因此3错误。由此可得，最小的小孩会游泳。

由于最小的小孩会游泳，则至少有1人会游泳，因此1必正确，由于只有1句正确，故2错误。

由2错误可知，没有1个不会游泳，即全都会游泳。因此有20人会游泳。