根据国家教育部的规定，拥有大专学历及以上学历的人员都可以报考小学教师资格证考试。这意味着，即使是成人大专毕业的学生，也可以报考小学教师资格证考试。

然而，需要注意的是，小学教师资格证考试的内容相对较难，因此需要经过系统的培训和备考才能够通过考试。如果已经具备了小学教师所需要的专业知识，那么可以选择自学备考，或者参加专业的培训课程来提高自己的考试成绩。此外，还可以参加模拟考试来熟悉考试场景和考试题型，以便更好地应对考试。

总之，成人大专毕业生是可以报考小学教师资格证考试的，但是需要在备考过程中，注重提高自己的专业知识和考试技巧，才能够顺利通过考试。