企业信息化绩效评价模型研究-柯健(精).docx
基金项目:安徽财经高校青年科研重点项目(编号:ACKYQO609ZD0作者简介:柯健女.1982年生.统计学硕士.讲师.探讨方向为经济系统建模与分析、企业信息化:李超.男.1980年生.统计学硕士.讲师.实验中心主任.探讨方向为综合评价、数据挖掘。企业信息化绩效评价模型探讨ResearchontheMode1.ofthePerformanceEva1.uationofEnterpriseInformatization柯健李超(安徽财经高校信息工程学院蚌埠233041(安徽财经高校统计与应用数学学院蚌埠233041摘要针对当前企业信息化绩效评价中存在的问题,提出运用系统思想从投入和产出角度来综合衡量企业信息化绩效的思路,并分别设计企业信息化系统的输入指标体系和基于平衡记分卡的输出指标体系.介绍应用数据包络分析方法于企业信息化绩效评价中的操作步骤,以期通过合理的企业信息化绩效评价思路和方法正确衡量企业信息化效果和持续发展实力0关键词企业信息化绩效评价平衡记分卡数据包络分析在汹涌的信息化浪潮中,许多企业都投入了大量的人力、物力、财力,进行了信息化所要求的各项配套改革.并初步实现了信息化.但信息化战略实施之后.企业依旧面临着一些问题.企业难以对信息化应用效果及信息化为企业带来的绩效进行充分的评估.企业也无法制订相应的动态的持续改善安排,切实提高信息化绩效(1.因而,建立一套科学、规范、实用的企业信息化绩效评价指标体系.采用合理的方法进行信息化绩效评价.对于我国企业信息化的顺当实施和持续改善具有重要的理论和现实意义:II企业信息化绩效评价的思路1.1.信息化绩效评价中存在的问题a.所谓的信息化绩效评价其实是着眼于投入角度的信息化水平评价.即从信息扮装备、信息化人员、信息资源开发利用等投入角度综合考察企业所处信息化的水平或阶段。但实践中,却有这样一种现象,信息化建设投入高并不意味着企业能够提高经济效益和提升竞争力.也即企业信息化的绩效并非与投入成正比关系.以投入为主的/水平()评价难以全面和正确衡扇企业信息化的绩效。b企业信息化绩效评价缺乏系统性.多从传统的财务角度考察信息化效果,企业信息化是指企业以流程重组为基础.在生产和经营的各个环节推广和应用信息技术,深化开发和利用企业内外部的各种信息资源,从而提高企业的经济效益和市场竞争力R1.。可以看出.企业信息化既是一个为生产和管理服务的过程,又强调在这个过程中有效配置信息资源后所取得的业务成果.因而.信息化绩效不是一种事后的结果性的反映.它不仅与最终系统的功能(供应的产品和服务的数量和成果(有效满足预期使命目标的结果的实现相关.而且包含信息化进程中蕴含着的企业运营效能以及可持续性发展的实力31.而目前不少探讨仅从财务角度衡量企业信息化的成效,构建的指标体系缺乏系统性,难以做到信息化过程和效果评价的统一。1-2企业信息化绩效评价的思路企业信息化是一项复杂的系统工程.仅从投入角度物定企业信息化水平,或仅从产出角度确定企业信息化的财务绩效,都难以全面评价企业信息化的绩效。而对于这个困难的系统工程问题.运用系统思想从投入和产出的整体角度探讨绩效评价问题是一个较好的思路,系统效率高.意味若企业用较少的信息化投入获得较大的信息化绩效,即可以将企业信息化投入作为系统的输入,将信息化绩效作为输出.用系统的投入产出有效性来综合衡量企业信息化绩效。鉴于此,本文将分别从投入和产出角度设计输入输出评价指标体系,应用DEA方法评价企业信息化绩效。2企业信息化绩效评价指标体系2.1 投入角度的评价指标体系企业进行信息化建设.需要投入基础设施,重视信息化战略规划.建设一支牢靠的信息化人才队伍,并将前期投入详细应用到生产、经营、管理活动中去,因而,投入角度的评价指标体系包括以下4个一级指标,每个一级指标下面又包含若干个二级指标。2IIH信息化基础设施。包括:信息化投入总额占固定资产投资比重;信息设备及软件装备投入;每百人计算机拥有量:企业基本通讯设施建设投入(包括邮政、电话、传真、信箱等:企业网络建设投入:企业数据库建设投入:信息化平安投入C21112信息化战略规划。包括:信息部门的组织定位:情报杂志2007年第IO期Journa1.of1.nformationNo.10.2007企业领导的重视程度:信息主管的地位:信息化规划和开发管理投入。21113信息化应用状况。包括产品设计和研制的信息化投入;计算机协助制造投入;生产过程自动限制投入:各种管理信息系统应用投入;企业营销信息化投入。21114信息化人才建设。包括:信息化专业人才比例;受信息化培训的职工比例:专业信息技术人员队伍建设费用:职工信息化培训费用:吸引信息化人才的专项资金投入:落奖信息化人才的专项资金投入。2.2产出角度的评价指标体系从企业信息化的定义可以看出.信息化带给企业的不仅仅是财务绩效.信息化过程中许多非财务因素能给企业带来短期内难以衡量的潜在绩效.因而.产出角度的绩效评价应从传统的单纯评价财务结果转向过程和结果的统一,这与企业绩效评价的相关理论不谋而合。因此.企业绩效评价的理论和方法可以作为企业信息化绩效评价的指导。其中,罗伯特#卡普兰和戴维#诺顿所提出的平衡记分卡(BSC绩效评价体系4较好地体现了过程与结果的统一。因此.可以借鉴企业绩效评价中的平衡记分卡理论.建立产出角度的评价指标体系。2.2I平衡记分卡绩效评价体系。平衡记分卡从财务、客户、内部业务流程、学习与成长四个角度来综合评价企业绩效,并在企业远景和战略框架统领下构建系统的评价指标体系,财务角度聚焦于怎样满足利益相关者的利益.主要通过过去经营管理活动所取得的可视察的财务成果来衡量.客户角度主要考虑为达到财务目标.企业该从哪些方面努力去构建良好的客户关系.提高客户满足度.保持客户忠诚度。内部业务流程主要考核为了实现财务目标和满足客户需求,企业在安排限制、生产制造、&后服务、内部控制等业务流程方面所做的努力。企业要在快速多变的市场环境中实现上述三项目标并保持持续发展实力,就必需具备不断学习、快速成长的实力.因此.学习和成长角度的考核也是必不可少的。可以看出.这四类指标通过相互驱动的因果关系构成一个完整的绩效评价体系。2.2.2基于BSC的企业信息化产出角度评价指标体系。借鉴以上平衡记分卡的基本分析框架,本文从财务、客户、内部业务流程、学习和成长这四个方面构建产出角度的一级企业信息化绩效评价指标,同样.各一级指标下面包含若干个二级指标。a财务。财务绩效评价指标应能反映企业信息化为企业带来的干脆效益,如成本坡小化、销售最大化、利润最大化、库存投资最小化、投资收益最大化等,其次,企业信息化建设提高了信息在系统中的传递速度,企业财务信息的收集、整理和分析的速度和精确性大大提高,财务决算速度大大加快因此.财务一级指标包括以下8个二级指标:净资产收益率:销售收入增长率:利涧增长率:成本费用利润率:成本降低率:库存资金占用率:资金运转效率:财务决算速度.b.客户。企业信息化有助于构建良好的客户关系.满足客户的特性化需求.从而为企业瀛得竞争优势。因而,在肯定程度上,可以依据客户对产品的满意度和市场占有率的实现状况考察企业信息化的绩效。此外,企业信息化的一个重要成效就是可以对客户信息进行跟踪记录.因此.有关信息系统的客户跟踪实力也待评价。客户角度的二级指标有:客户满意度:客户保持度:新客户的获得:客户获利实力;市场份额;交货时间;产品和服务的质量;信息系统的客户跟踪实力。C内部业务流程。企业信息化建设的过程伴随着业务流程乃至企业结构的重组.从而给企业内部业务流程带来深刻变革。为了满足客户特性化需求,提高市场反映速度.企业需要提高生产柔性.缩短新产品生产周期.加速技术创新速度.为客户供应特性化、多样化的产品.并通过有效的营销方式提高客户的满足度。企业原有的塔型的结构为精良、灵敏、具彳j创新精神的扁平化动态网络结构所取代。在这种结构中,计算机系统将取代中层监督和限制部门的大量职能,信息的纵向传递速度和横向沟通速度大大提升。多种决策工具的集成和应用也极大地增加了决策者的信息处理实力和方案评价选择实力.增加了决策的科学性因此.内部业务流程角度的二级指标有:产品生产周期:新产品开发实力:产品差别化程度:技术创新实力:流程柔性程度:有效的网络营销:管理层次合理度:企业内信息传递或沟通速度:信息系统集成度:决策科学化水平。d.学习与成长。学习与成长角度主要反映企业如何创建一种支持企业信息化建设和持续发展的氛围,学习与成长强调员工实力的提高,强调企业变化、创新和成长的总体环境,详细而言可用以下指标反映:企业信息文化建设水平:员工对信息化建设的支持度:员工满足程度:企业领导及信息主管的信息文化素养与水平;企业员工的信息文化素养与水平;信息共享率;员工学问创新实力。3企业信息化绩效的DEA评价方法3I指标的量化以上指标体系既包含定量指标也包含定性指标.进行综合评价前.须要将定性指标定量化。对于需要业内专家进行评定的定性指标,比如.信息部门的组织定位、企业领导的歪视程度、信息主管的地位、信息系统的客户跟踪实力、新产品开发实力、产品差别化程度、技术创新实力、流程柔性程度、有效的网络营销、管理层次合理度、信息系统集成度、决策科学化水平、企业信息文化建设水平、企业领导及信息主管的信息文化素养与水平、企业员工的信息文化素质与水平、信息共享率、员工知识创新实力这些指标.评价主体可以成立专家组打分:将每个指标设定为五个等级,即很差、较差、一般、较志向、志向,分值分别为I、3、5、7、9分,然后由专家组给出某项指标的得分值,对于客户满足度、产品和服务的质量这两个指标可以采纳问卷调查或在线调查的方式让客户给出指标得分值。对于企业内信息传递或交流速度、员工对信息化建设的支持度、员工满足程度这3个指标可以采纳问卷调查的方式让员工给出指标得分值。对于余下的定Journa1.ofInformationNo.10,2007情报杂志2007年第10期量指标,评价时干脆收集相应的数据或依据数据库中存储的数据计算整理即可.不过,各种信息化投入的范围须要较为清楚地界定.避开重复或遗漏。3.2指标的无量纲化以上评价指标体系既包含正向指标,也有逆向指标,并且各指标的量纲也不一样,从而造成无法干脆比较方案优劣的情形。因此,须要先将各指标值无量纲化和无极性化.以便使各指标的评价尺度统一,然后才能对各评价对象的价值进行分析和评价。首先,对于逆向指标可以按式“进行极性变换,然后对全部指标按式(2进行无量纲化处理。Xij=min(xjXij(1Xij-min(Xjmax(Xj-nin(Xj(2式中.min(xj为原始数据集中每一指标下评价对象的最小值max(Xj和min(Xj分别为极性变换后每一指标下评价对象的最大值和最小值。3.3各一级指标的综合企业信息化绩效评价涉及到众多因素,须要衡量和比较的指标许多,是一系列困难的思维活动过程,而层次分析法是对困难问题做出决策的一种简易的方法,它能将定性、半定性问题转化为定量计算,能使人们思维过程层次化.逐层比较多种关联因素,特殊适合用于难于完全用定量进行分析的困难问题(5。因此.笔者认为.相对各一级指标而言.仿用层次分析法中建立判断矩阵的方法来确定其下属二级指标的权重,进而用多指标综合法求得各一级指标综合值是一种极好的思路,其基本操作步骤如下:a,构造推断矩阵:分别关于各一级指标,由专家组建立其下属指标重要性两两比较的推断矩阵A=(aijnn.其中.aijX).aij=1/aji,aii=1.相对重要性的程度可以分别用19及其倒数进行标度:b.一致性枪验:计算各判断矩阵的最大特征值KmaX.再计算枪验推断矩阵的一样性比率CR=C1.ZR1.,其中CI=(Kmax-n/(n-1为一样性指标.n为推断矩阵的阶数,R1.为岫机一样性指标,若CR<0I,则判断矩阵一样性满足要求,即推断结果牢靠,否则须要重新构造判断矩降:c求得权重:对于满足一样性要求的各推断矩阵.计算其最大特征值对应的特征向量Wj.并归一化得Wj此即相对于各一级指标而言.其下属二级指标的权重:d.依据前述计算.各评价对象水平值为Zij.则一级指标综合值fi为:fi=Enj=IZijewj其中,n为指标个数.3.4DEA方法的模型数据包络分析(DataEnve1.opmentAna1.ysis中应用最普遍的模型是C2R模型(6bDEA方法将一个/投入肯定数量的生产要素,并有肯定数量的产出O的系统称为决策单元。对已知的n个决策单元.可用DEA方法来判断各个单元投入、产出的合理性与有效性7)。对于某个选定的决策单元DMU0.推断其有效性的C2R模型的对偶规划可表示为:(DminHs.tEnj=1.KjXj+S-|HXOEnKjYj-S+Y0KjOS-0,S+0(334I模型中基本变量的含义。C2R模型中,每个DMUj都有m种搐入及s种输出,分别用输入Xj和输出Yj表示,Xj=(xIj,X2jXmjT.Yj=(y1.j.y2j.ysjTo其中xij>0表示第j个决策单元DMUj的第i种类型输入的输入量:yrj>0表示第j个决策单元DMUj的第r种类型输出的输出量:i=1.2.m;r=1.2.,s;j=1.2.n;X0=Xj0.YO=Yj0,分别为选定决策单元DMU0的输入和揄出。H为该决策单元DMUO的有效值(指投入相对于产出的有效利用程度:Kj为相对于DMU0重新构造一个有效DMU组合中j个决策单元DMUj的组合比例:S-.S+为松弛变量。其经济含义分别为:a.当H=I且S-=S+=0时.称决策单元DMUO为DEA有效,即在这n个决策单元组成的系统中,在原投入xO的基础上所获得的产出Yo已达到最优:b.当H=I且S-Xo或S+XO时,称DMUO为DEA弱有效.即在这n个决策单元组成的系统中.对于投入XO可削减S而保持原产出Yo不变.或在投入XO不变的状况下可将产出提高S+:c.当H<1时,则称DMUO为DEA无效,即在这n个决策单元组成的系统中,可通过组合招投入降至原投入XO的H比例而保持原产出Yo不减。34.2规模收益值。设k=EKjH,则为DMUO的规模收益值“a.当k=1.,表示DMUO的规模收益不变.此时DMUO达到最大产出规模点:b.当k<1.表示规模收益递增,且k值越小规模递增趋势越大.表明DMUO在投入XO的基础上.适当增加投入量,产出量将有更大比例的增加;c.当k>1,表示规模收益递减,且k值越大规模递减趋势越大,表明在DMUo投入XO的基础上,即使增加投入量也不行能带来更大比例的产出,此时没有再增加决策单元投入的必要,3.4.3投入冗余率和产出不足率。将决策单元中各分量的S-ij与对应指标垂量Xij的比值定义为投入冗余率,记为Aij.表示该重星指标可节约的比例。同样地设Brj=S+rjZyrj.则Brj称为产出不足率.比较一个系统中不同年份的投入冗余率或产出不足率可动态地反应当系统在哪些方面有所改善和哪些方面还须要加强管理。还可分析同一时期内相关系统间的投入冗余率、产出不足率,进行横向比较8o3.5应用C2R模型于企业信息化绩效评价依据以上分析,可以将综合后的一级指标信息化基础设施、信息化战略规划、信息化应用状况、信息化人才建设作为系统的输入变通.将综合后的财务、客户、内部业务流程、学习与(下转第35页情报杂志2(X)7年第10期Journa1.Of1.nformationNo.10.2007表31.9标度及其含义标度含义1表示两个因素相比,具有同样事要性3表示两个因素相比.一个因素比另一个因素略微重要5表示两个因素相比.一个因素比另一个因素明显垂要7表示两个因素相比,一个因素比另一个因素特殊重要9表示两个因素相比.一个因素比另一个因素极端事要2.4.6.8上述两两相邻推断的中值倒数因素i与j比较得推断bij.则因素j与i比较的推断bji=1.bijb.数据统计、分析、计算,,通过对调查问卷数据进行统计,得到各层次指标的推断矩阵,选择菜单ASSCsSmCntWata.输入上述推断矩阵的值,得到各指标的权重如表4所示。表4文本分类系统影响因素综合评价表序号分类系统影响因素A语料库B1.预处理B2分类器B30.2590.3430.398合成权重Xi总排序C1.1.样本均衡性0.2670.0698C1.2样本代表性0.20.05211C1.3样本数量0.2170.056IOCI4分类标准合理性0.3170.0827C21文本表示方法0.1810.0629C22权重计算方法0.2860.0984C23特征选择方法0.2710.0935C24特征提取方法0.2630.0906C31分类模型0.4880.1941C32类别的组织方法0.2630.1052C33分类测试方法0.2500.09932.3目标综合评价(SynIheSiS选择菜单Syn(hesis-f11>nGoa1.,综合分析各评价因子对文本分类系统的综合权重.得到各因子的合成权垂及其总排序,如表4所示。通过表4的结果可以看出:a.分类器的各项因素是影响系统性能的主要方面.其中分类模型的选择是核心.始终以来也是文本分类探讨者的探讨重点.目前公认的性能较好的分类模型是SVMob.分类预处理对系统的影响也不容忽视,尤其是权重计算、特征选择和特征提取方法的选择。由于方法众多,特别是中文文本的分类.各种方法的评价仍待进行深化探讨。c语料库的选择。目前用于文本分类的中文语料库主要有北京高校语料库、人民日报标注语料库等,而各领域的专业文本的语料却很少,因此,语料库建设仍是目前文本分类甚至中文信息处理的一项重要的基础性工作。3结语本文利用EXpertChoice专家决策软件进行AHP文本分类系统评价,避开了繁杂的计算.节约了大量的时间.方法简洁有效.结果清楚明白。由于不能对自然语言进行严格的形式化,因此对文本分类系统的评价主要是通过试验结果进行的。对于二元分类问题,常用的评价标准有:精确率/召回率、break-even点、F-mea-sure、11点平均、精度"'错误率等。在多元分类问施中.为了对整个分类系统进行评价,通常对单个分类器的分类指标进行宏平均或微平均16|。但是仅凭借试验结果并不能客观真实地反映整个分类系统的性能,本文应用层次分析法的思想.得出了文本分类系统的各项指标的权重.各指标权正表明白它对文本分类系统性能的影响程度.从而公正客观地评价不同的分类系统。本文提出的评价指标体系.既为精确综合评价文本分类系统奠定了基础.又为构建文本分类系统和制定分步实施策略提供了一个参考。参考文献1中文网页分类评测.:/cWirf.OrgZEvaIuationCCT.htm1.20062李恩科,徐国华.层次分析法在信息系统综合评价中的应用.情报学报,1998;(63孙建军.成颖等.信息检索技术.北京:科学出版社.20044程军.基于统计的文本分类技术探讨.中国科学院博士学位论文.2(X)35程泽凯.林士敏.文本分类器精确性评估方法.情报学报.2004:(56薛德军.中文文本自动分类中的关键问题探讨.清华高校工学博士学位论文.2004(贡编:阳王京(上接第32页成长4个指标作为系统的输出变量,应用C2R模型计算(可运用软件各决策单元的有效值H,从而对企业信息化绩效进行比较分析,并依据规模收益值、投入冗余率和产出不足率的计算结果.提出企业信息化获得更大绩效的问题解决方案或思路,选取的决策单元既可以反映某一企业历年信息化状况.也可以反映同一时期内不同的企业信息化状况,从而可以进行纵向或横向比较。4结语本文运用系统思想.从投入产出角度构建评价指标体系,应用DEA方法计算的投入产出有效性来衡量企业信息化绩效,为企业信息化绩效评价供应了一种新思路0然而,在实践中,企业信息化绩效考核的重点会因企业规模、类型、发展阶段等因素而有所不同,因此.企业信息化绩效评价指标体系的最终选择.还应考虑各企业信息化工作的特点,在实践中不断调整优化。其次.企业信息化绩效评价的效果与专家水平有极大的关系.从客户和员工处得到的数据的质量也和调查问卷的设计有很大联系,因此,实践中.评价主体要选择合理的专家组成员和设计高质量的调查问卷,以使评价结果更为真实可信。最终,企业信息化绩效评价体系的完善与企业对数据的重视程度及数据管理质毋密切相关.因而.企业必需重视数据的收集存储工作.才有可能做好信息化绩效评价工作。参考文献I庞庆华.企业信息化水平的灰色关联分析.情报杂志.2006:(62孙建军.信息资源管理概论.南京:东南高校出版社.2(X)53郝晓玲.孙强.信息化绩效评价框架、实施与案例分析.北京:清华大学出版社.20054汪卫霰.平衡记分卡在企业信息化绩效测评中的应用.皖西学院学报.2005;(65李宝山.管理系统工程.北京:中国人民高校出版社,20046吴文江.数据包络分析及其应用.北京:中国统计出版社,20027邵祖峰.朱利民.基于DEA的公安机关信息化效率评价.情报杂志.2006;(68朱艳科,杨辉辉.广东省各城市经济发展相对效率的DEA评价.南方经济,2002;(11(责编:王京Journa1.ofIntbnnaiionNo.1().2(X)7情报杂志2007年第1()期