基于大眾關注度的電子政務網站績效評估模型定制方法研究

摘 要

摘 要:針對當前我國政府網站績效評估方法存在的漏洞,關注評估模型的時效性和合理性,提出了一種基于大眾關注度的電子政務績效評估方法。首先,分析現有測評方法和評估模型,結合權

摘 要:針對當前我國政府網站績效評估方法存在的漏洞,關注評估模型的時效性和合理性,提出了一種基于大眾關注度的電子政務績效評估方法。首先,分析現有測評方法和評估模型,結合權重累加方法,提出基于大眾關注度的評估模型;其次,基于所建立的評估模型,研究如何利用大眾關注度對原有模型進行改進;最后在理論研究的基礎上,對我國區縣電子政務網站進行示例評估,并進行實證類比分析。實驗表明,基于大眾關注度改進后的模型,能夠有效提高電子政務網站績效評估的完備性,有助于我國電子政務進行有效的質量改進。

關鍵詞:電子政務  大眾關注度  績效評估  模型改進

1、引言

20世紀中后期以來,伴隨著知識經濟和信息社會的萌芽和發展,全球電子政務建設逐步興起,至今已成為政府改革用以提高效率、提高效能之必選方案。從公共管理的視角,不可衡量,則無法管理”[1]的理念決定了電子政務績效管理的必然性。從西方國家的實踐來看,在政府的責任和績效日趨公開的情況下,電子政務項目由于財政的約束硬化和公民知情權的聲張,失敗的成本核算不僅是項目的終止,還包括公民的信任與支持的流失[7]。因此,西方國家成功的電子政務建設都十分重視績效評估,一方面作為項目全程管理的手段,另一方面作為公民支持的依據。

目前我國電子政務建設正逐漸由技術導向階段轉向內容導向階段,面對龐雜的已建或在建政務信息系統和海量的政府信息資源,如何更好地整合業務系統,促進部門間業務協同和信息共享,如何更好地開發與利用信息資源,提高信息資源的利用水平非常關鍵,同時,研究和探索一套切實可行的電子政務績效評估體系模型也十分重要。探索電子政務績效評估體系模型不僅需要對影響電子政務績效水平的因素有所掌握,還要通過評價反饋來完善國家電子政務標準體系,并為今后的電子政務建設發展指明方向。

電子政務是一個復雜的系統工程,影響其形成的因素很多,對電子政務進行準確、全面評價評估比較困難。目前,全球眾多的研究學者和相關研究機構都對電子政務績效評估進行了長期而又系統的研究。作者參加了我國2009年度中國各級政府電子政務績效評估”項目,參與了部分重要省市咨詢投訴、公開規范性、基礎信息的評估工作。從實踐角度,認為目前我國電子政務績效評估體系有以下幾點不足之處:

1)評估方法比較寬泛,對于電子政務網站沒有明確具體的績效指標定義;

2)評估指標有多處定義不合理,并且存在測試內容重復現象;

3)對于指標的權重定義無說明,權重的確定只是感性的“拍板”,而并非有算法以及民眾意愿的支撐。

針對以上幾點問題,本文提出以大眾關注度為依據,重新裁減各級指標及其確定各級指標權重,對評估模型進行討論和改進,進一步提高電子政務評估效果的完備性,并且以實例效果展示來驗證改進效果。

2、電子政務網站績效評估指標確定

當前主要電子政務網站績效評估指標缺乏明確的來源說明。本文從層次演化關系,提出了一種從需求層向職能層、應用層、測評層逐層演化的方式,確定主要績效指標體系,如下圖l.所示:

 

現有的評估指標主要分為四個一級指標,括號內為該一級指標下細分的二級指標。詳細內容如下表1[3]所示:

 

依據以上框架,每個二級指標細分為相應的三級指標,根據評分要點和標準,對相應的電子政務網站進行評分,最終以各項所得分為依據,根據每項指標的權重折合分數,一級一級的加總,最終獲得整體的評分成績。假設某一級指標權重為a,其下二級指標權重為bi(i為其下二級指標序列號),三級指標權重為cij(j為三級指標序列號,每一項三級指標的得分分別為mij,則該一級指標加權得分為:

P=a[∑bi(∑mij·cij)]        (1)

最后的得分總和為:N=∑Pn       (2)

3、基于大眾關注度的指標權重確定

31大眾關注度的說明

基于大眾關注度[6]的指標權重確定是指對社會各界人士進行全面調查,對于電子政務網站關注人群進行重點詢問,以得出不同人群對于電子政務網站評估關注度,以人群比例計算,以求得指標權重。截至目前,許多電子政務績效指標權重僅以其下三級指標的評分要點的個數比來確定的[5],缺乏明確的評估模型定制方法,整個評估體系便會產生適用性不足的狀況,諸如:

1)社會各階層關注的重點問題,例如醫療保險、就業、城鄉建設等問題在評估過程中無法得到重視;

2)社會各階層很少注意的項目,例如監督管理、在線受理、專題欄目等,雖然也十分重要,但其權重應該與其他重點指標有差距,才能體現評估的公正性;

3)政府的網站建設很少關注民眾需求,對于互動環節、咨詢上訪等重點問題沒有重視起來,而僅僅只是平均權重,并不符合需求;

4)政府工作人員與普通居民關注的問題不一致,應該從算法和比例上體現出來,在此基礎上綜合考慮,才能使評估體系得以服眾。

32方法準備

本文發放調查問卷300份,利用互聯網進行網絡調查,調查對象涵括包含職業、年齡階段,數據真實全面,其中共回收有效問卷277份。

由調查回收問卷的基本信息匯總結果分析得出,發放的問卷涵蓋了年齡階段、行業、電子政務熟悉程度分布如下圖21與圖22、圖23所示:

 

 

由以上圖示可以看出,被訪者的年齡分布、職業分布、電子政務熟悉程度分布均符合網上調查的實際情況,有利于調查進行深入研究。由于被訪者對電子政務了解情況不同,假設其對電子政務網站的熟悉程度為n,其對各一級和二級指標的關注程度分別為mimj,則該位被訪者對一級指標的關注程度為n·mi,對二級指標的關注程度為n·mj。由此,整理出277份有效問卷的各項數據如下表2所示

 

4、類比評估

41新權重確定

基于以上回收問卷的數據統計,得出各指標項的“大眾關注度”權重:

 

檢驗權重的擬合優度:

 

由上圖得到二級權重的擬合函數:

y-0.0071x+0.8928     (1)

擬合優度:RL2=0.0684    (2)

可以看出該組數據擬合優度遠小于1,說明擬合的并不好,數據之間的差異非常大;進而表明了,二級指標權重僅用平均的數值并不合理,應該更多的采用大眾關注度的方式來進行評估。

42實證類比檢驗

利用新權重,我們針對部分隨即抽樣區縣進行重新評估。根據第一部分所提出的評分公式:P=a[∑bi(∑mij·cij)]N∑Pn,在各地各項三級指標得分一致的前提下,計算出原有體系和新權重體系下的得分,將得到的結果與原來的結果進行類比分析,如下表4所示:

 

 

 

得到原評估結果的擬合函數:

y-0.6x+72.533    (5)

擬合度:RL2=0.0738  (6)

 

得到新評估結果的擬合函數:

y-0.625x+73.333        (7)

擬合優度:R’ L20.0361      (8)

可以得到:R’ L2<RL2       (9)

上述結果表明了,在隨機抽樣條件下,相同的三級指標得分,基于大眾關注度的評估結果具有比原評估結果更大的差異性,更明顯的得分差距。

5、評估案例

以上海虹口區為例,展示評測過程。

1)信息公開主動公開(概況信息、法規文件、規劃計劃、統計信息、財政預決算、行政收費、招標采購、重點領域、應急管理、城鄉建設、監督檢查、社會公益、土地征用房屋拆遷、捐贈救助、人事及招考信息、公共企事業單位信息、三農信息、社區信息、專題建設l9個測評指標在走進虹口、信息公開專欄均應有說明,如下圖所示。未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

2)信息公開依申請公開(有無欄目、公開要素、在線受理3個測評指標均應有說明,其中公開要素包括依申請公開程序、辦理時限、收費標準、表格下載四個要素,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

3)信息公開公開規范性(信息公開目錄、框架合理性、持續更新性、信息公開規定、信息公開指南、信息公開年報、監督保障機制7個指標均應有說明,其中保障監督機制包括信息公開考核制度、社會評議制度、責任追究制度三個制度的說明和公開,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

4)網上辦事人性化程度(場景導航、資源整合度場景導航服務數量3個測評指標均應有所說明,其中場景導航應涉及教育、醫保、房屋服務、醫療服務、婚姻5個要素,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

5)網上辦事服務框架(按用戶分類、按生命周期分類、按特殊人群分類、按三農分類4個測評指標均應有所說明,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

6)網上辦事百件實事網上辦(有無欄目、實用性2個測評指標均應有所說明,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分,虹口市無該欄目,故扣去相應得分)

 

7)網上辦事服務時效(政府網站實際提供的辦事指南、表格下載、網上咨詢、網上申請、結果反饋等服務事項的數量。)

8)網上辦事服務規范性(服務指南、表格下載、在線查詢、在線申報4個測評指標均應有所說明,其中服務指南包括格式規范性、內容完整性2個要素和說明,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分,圖略)

9)公眾參與  咨詢投訴(渠道功能、答復數量、答復質量3個測評指標,其中渠道功能包括有無渠道、使用幫助指南、在線受理功能、問題列表4個要素,答復質量包括答復及時性、答復內容質量2個要素,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

10)公眾參與  實時交流(渠道功能、互動數量、內容質量3個測評指標,其中渠道功能包括有無渠道、實時參與、預告功能、材料整理4個要素,內容質量包括訪談主題、答復情況2個要素,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

11)公眾參與  民意征集(渠道功能、征集數量、內容質量3個測評指標,其中渠道功能包括有無渠道、在線提交、結果統計3個要素,如下圖所示,未有欄目或欄目建設不達標的,依據評分細則扣去相應得分)

 

12)網站性能設計(網站響應、頁面展示、輔助功能、網站維護4個測評指標,主要以基本網站達標要求為準,以合格與否進行測評,無法響應或頁面展示出錯則直接為0分,輔助功能與網站維護主要以美觀簡潔和安全快速為主,基本應給全分,圖略)

通過以上的測評過程展示可以了解到,政府網站的全面評估是一項浩大的工程,其所包含的內容也富有層次感;基于大眾關注度為主的電子政務績效評估,由于更加關注民意和大眾需求,而一切測評工作的指標都是由其測評對象的職能確定的(詳見本文第二章),所以其評估結果更能反映出政府網站職能的實現程度;通過本文前一階段的調查研究和模型建設,對基于大眾關注的權重進行了量化,故以實踐基礎為開展點的績效評估工作能夠順利且有效的開展。

6、結束語

我國政府門戶網站建設經歷了信息發布階段,正處在“簡單交互”或“電子服務供給”階段,并開始向著“服務整合”[4]的目標邁進。電子政府門戶網站建設是一個復雜的系統工程,要用合理的方法對網站信息進行組織,融入信息構建的一些思想進行詳細的需求分析和理論探討。在建設的過程中,要注重遵循相關標準,設立專門的部門進行統籌,用科學的方法分類組織信息,注重信息資源的整合和服務的集成,充分發揮門戶網站一站式服務的功能。

如果說績效評價是評價政府,而政府最終要為公民服務,因此是間接社會效益評價;那么大眾關注度評價就是直接社會效益評價。它不是從過這方面的探索。從行政生態學指數角度看,大眾關注度評價的難點在于:第一,大眾關注度評價不是絕對的;對大眾關注度評價本身,也需要進行評價。也就是說,大眾關注度評價首先需要經過環境評價的再評價 [3][8]。需要與環境評價中的行政環境進行關聯,才能得出判斷。第二,同是“增加群眾滿意度”,在“大政府”、小政府政府再造”和“全面響應”等不同條件下,含義是截然不同的,需要做出區分。

基于大眾關注度的電子政務績效評估能夠更有效的對電子政務網站進行差異化評價,然而卻也有其不足和欠缺之處,故而在今后的研究中應注重細節區分和評價細化,爭取規范化和模型化,以達到更有效更客觀的電子政務評價。

 

參考文獻:

[1]張向宏,張連奪.電子政務績效評估體系模型的構建與應用[J].情報雜志.20095

[2]孫強,孟秀轉.服務型政府電子政務績效評估案例分析[J].科技時代.200810

[3]王長勝.我國電子政務發展報告[J].電子政務藍皮書.20045

[4]孫國鋒.關于電子政務績效評估的三三兩兩”[J].硅谷動力.20043

[5]石會昌,萬道濮,王彥慧.電子政務績效評估指標體系設計[J].電子政務.2008l0

[6]彭細正,侯文芳.服務型政府視角的電子政務綜合績效評估體系探討.Cbsi中國.200810

 

本文作者:劉學剛

作者單位:中海油氣開發利用公司