研究生管理信息系统应用效果评价研究-南开大学讲述.ppt

研究生管理信息系统应用效果评价研究 焦宝臣，陈诗明，刘振昌，杨阳，张四海 背 景 1 评价指标的研制 3 总结与展望 6 确定指标权重值 4 评价思路 2 评价实例 5 主要内容 利用信息化手段改善教学、科研和管理水平 建设研究生管理信息系统改进研究生教育教学 关注建设，不重视应用效果 信息化水平评价或绩效角度评估 缺乏从实际使用角度的针对性的评价 背 景 以研究生系统为突破口开展应用效果评价研究，能够以贴近实际使用的角度对信息系统的情况进行综合评价，对系统未来发展提升能够给出更加直接的意见和建议。  应用效果评价研究 背 景 1 评价指标的研制 3 总结与展望 6 确定指标权重值 4 评价思路 2 评价实例 5 主要内容 从实际使用角度对研究生系统进行分析，构建评价指标，并进行分层级，形成系统的评价指标。 对指标建立评语等级，形成问卷调查表 以具体某高校为例，进行问卷调查，利用已建立的评价指标体系进行分析，最后给出评价结果。 评价思路 分层级构建评价指标 建立评语等级 进行具体评价 采用数学方法对不同层级指标进行权重分析，形成评价指标体系。 确定指标权重值 背 景 1 评价指标的研制 3 总结与展望 6 确定指标权重值 4 评价思路 2 评价实例 5 主要内容 1.从事管理类工作的人员 - 研究生院工作人员、辅导员 - 从管理工作角度审视系统应用情况 2.办理具体事务的人员 - 研究生、任课老师、导师 - 从具体办理业务角度审视系统应用情况 3.系统自身情况相干人员 - 系统管理员、开发人员、维护人员，等 - 从软件系统角度审视系统应用情况 从系统使用者角度分析评价指标 研究生系统相干人员示意图 构建一级指标 -从研究生院管理工作角度来进行分析系统应用效果 -系统的建设对要办理业务的普通使用者（普通老师和学生）办理相关业务的改进效果。即从普通办理业务人员角度来分析系统应用效果。 -从系统自身情况相干人员角度来分析系统应用效果 1、对研究生院管理工作改进效果 2、对业务办理工作改进效果 3、研究生系统自身状况 一级指标 系统建设后改变了原有纸质办公的旧有陈旧工作模式，形成快捷便利地网上办公模式。给研究生管理工作效率带来提升。 -系统建设过程中会对原有业务进行梳理，并进行流程再造。流程再造是对原有业务的规范化。规范的业务流程利于系统的使用 -系统中处于管理角色的人员，办理研究生相关管理工作功能的完善度情况。 （1）研究生院管理工作效率提高 （2）业务流程的规范性 （3）管理功能完善度 1、对研究生院管理工作改进效果 二级指标 无纸化最直接的效果是要办事的人不用到业务部门现场来办理业务，只需要在电脑上网上办公就可以完成要做的业务了。这对于普通用户具有最直接的便利性应用影响。 -系统界面建设的容易让人理解，系统的使用者通过页面布局、按钮、文字等信息，在简单的说明书指导下，能够顺畅使用业务系统。对系统的推广使用有重要的作用。 -普通老师或学生能够在系统中完成所要办的事情的情况。 （1）无纸化程度 （2）系统界面易理解度 （3）业务功能完善度 2、对业务办理工作改进效果 二级指标 当前业务系统大多以B/S架构为基础来建设的，多浏览器的兼容性，对使用者显得尤为重要。 系统兼容性 角色和权限设置合理性 系统响应速度 系统集成和接口建设完善情况 3、研究生系统自身状况 系统能够为系统管理员提供足够丰富的方案来完成对系统和用户的角色和权限的管理 系统之间集成度好，接口建设完全，这对于使用者具有直接的便利性，不但是对业务办理者也是对部门管理者有直接的便利性，直接影响系统的实际使用效果。 系统使用者在浏览器中点击某个操作后，系统对其的反应。这直接影响使用者的直观感受。 二级指标 背 景 1 评价指标的研制 3 总结与展望 6 确定指标权重值 4 评价思路 2 评价实例 5 主要内容 构建指标调查表 以南开大学研究生系统为对象，进行权重值计算 问卷调查 构建判断矩阵 层次分析法（AHP） Expert Choice软件实现 同一层级指标，两两比较 采用特征根法计算权重值 确定指标权重值 一级指标 权重值 二级指标 权重值 对研究生管理工作改进效果 0.32 研究生院管理工作效率提高 0.192 业务流程的规范性 0.064 管理功能完善度 0.064 对业务办理工作改进效果 0.558 无纸化程度 0.301 系统界面易理解度 0.166 业务功能完善度 0.091 研究生系统自身状况 0.122 系统的兼容性 0.049 系统各角色和权限设置合理性 0.039 系统集成和接口建设完善情况 0.022 系统响应速度 0.012 研究生系统应用效果评价指标机器权重值 一级指标中，“对业