新余司法警官学校毕业生升学的主要途径包括以下几种：

1. 参加普通高考：通过高考报考大专或本科院校，进入更高层次的学习。

2. 高职单招考试：报考高职院校的单独招生考试，进入相关专业深造。

3. 对口升学考试：参加省内对口升学考试，升入对应的高职院校。

4. 成人高考：通过成人高考进入成人高校，提升学历。

5. 自学考试：参加高等教育自学考试，获取大专或本科学历。