美國(guó)STAR METRICS項(xiàng)目框架、實(shí)施進(jìn)展及對(duì)我國(guó)啟示,項(xiàng)目管理論文

美國(guó)STARMETRICS項(xiàng)目框架、實(shí)施進(jìn)展及對(duì)我們國(guó)家啟示,項(xiàng)目管理論文科學(xué)政策的首要目的,一是怎樣確保得到公共資金支持的科學(xué)研究誠(chéng)信,二是怎樣確保此類科學(xué)研究的產(chǎn)出率。聯(lián)邦投資于科學(xué),其產(chǎn)生的受益之處或者價(jià)值是什么這個(gè)問(wèn)題在美國(guó)所有時(shí)期的科學(xué)政策中一直存在。19世紀(jì)80年代,這個(gè)問(wèn)題關(guān)注的是受贊助研究的經(jīng)濟(jì)價(jià)值。但是經(jīng)歷20世紀(jì)70年代后期的經(jīng)濟(jì)不振之后,政治家開(kāi)場(chǎng)聚焦于如何提升受聯(lián)邦贊助的科學(xué)研究所產(chǎn)生的經(jīng)濟(jì)結(jié)果,即產(chǎn)出率。同時(shí),隨著科學(xué)變得不那么特殊,而且隨著科學(xué)變得越來(lái)越同公共政策的其他領(lǐng)域一樣,美國(guó)科學(xué)研究機(jī)構(gòu)與其他所有機(jī)構(gòu)一同都?xì)w入了1993年美國(guó)國(guó)會(huì)公布的(績(jī)效與結(jié)果法〕(GPRA)的適用范圍之內(nèi)。GPRA法案以立法的形式確立了對(duì)的行政機(jī)構(gòu)和科研機(jī)構(gòu)進(jìn)行績(jī)效評(píng)估的制度,旨在提高績(jī)效,加強(qiáng)管理。GPRA法案的公布施行有其歷史的延續(xù)性。20世紀(jì)60年代,美國(guó)曾有(項(xiàng)目、計(jì)劃和預(yù)算系統(tǒng)〕,它重點(diǎn)強(qiáng)調(diào)項(xiàng)目管理和預(yù)算的計(jì)劃性。70年代,它被目的管理(ManagementbyObjective)和零基預(yù)算(Zero-Base-Budget)所取代。80年代,在目的管理和零基預(yù)算的基礎(chǔ)上,美國(guó)在預(yù)算管理中愈加強(qiáng)調(diào)三個(gè)動(dòng)機(jī):一是提高效率,二是質(zhì)量管理,三是目的管理。怎樣更好地提高效率怎樣更好地測(cè)量效率和效果這是美國(guó)公布施行GPRA的重要原因。由此可見(jiàn),美國(guó)對(duì)于聯(lián)邦科研機(jī)構(gòu)的管理理念是將科技作為生產(chǎn)力來(lái)進(jìn)行管理的?？茖W(xué)政策是科技政策的一部分。以往的美國(guó)科技政策研究缺乏足夠的系統(tǒng)性和科學(xué)性,難以支撐做出最佳的科技投資決策,因而聯(lián)邦于2005年提出了發(fā)展科技政策方式方法學(xué)(ScienceofSciencePolicy,SoSP)的建議,將科技政策研究作為一門(mén)新興穿插學(xué)科發(fā)展,重點(diǎn)是開(kāi)展定量化、可視化、邏輯化的方式方法和工具的研究,搭建科技數(shù)據(jù)的挖掘和展示平臺(tái),將SoSP作為建立美國(guó)基于證據(jù)的決策系統(tǒng)的重要舉措。SoSP致力于為科技政策提供定量化的數(shù)據(jù)基礎(chǔ)、方式方法和工具,幫助政策制定者更好地理解科技創(chuàng)新活動(dòng)的規(guī)律,并開(kāi)展對(duì)科技事業(yè)的評(píng)價(jià)。SoSP在中觀層面的一個(gè)重要研究主題就是科技投資的效益是如何的2008年9月以來(lái),席卷全球的金融危機(jī)爆發(fā),美、歐、日等主要經(jīng)濟(jì)體陷入全面衰退。經(jīng)過(guò)美國(guó)國(guó)會(huì)參議院和眾議院內(nèi)部劇烈辯論以及國(guó)會(huì)與奧巴馬屢次的協(xié)商后,基于凱恩斯主義經(jīng)濟(jì)學(xué)理論,2018年2月13日美國(guó)第111次國(guó)會(huì)上參眾兩院通過(guò)了總額為7870億美元的一攬子刺激經(jīng)濟(jì)復(fù)蘇方案,即(2018年美國(guó)復(fù)蘇與再投資法案〕(TheAmericanRecoveryandReinvestmentActof2018,ARRA)。ARRA牽涉的7870億美元中有約76億美元直接投資于科學(xué)研究。EhrenbergR.和SmithR.采用生產(chǎn)函數(shù)模型研究了科學(xué)投資怎樣產(chǎn)生就業(yè)崗位的問(wèn)題。GoldstonD.則指出,聯(lián)邦投資于科學(xué)是基于科學(xué)研究能夠很快產(chǎn)生更有競(jìng)爭(zhēng)力的公司和更多更好的工作崗位。例如,美國(guó)信息技術(shù)與創(chuàng)新基金會(huì)(ITIF)的一份報(bào)告指出,200億美元的科研投入能夠每年新增(維持)約402000個(gè)工作崗位。MervisJ.和HandE.指出,金融危機(jī)中美國(guó)聯(lián)邦投資科學(xué)研究能夠促進(jìn)經(jīng)濟(jì)增長(zhǎng)以及就業(yè)崗位的創(chuàng)造。ARRA法案中76億美元直接投資于科學(xué)研究便是基于這一理念。除此之外,奧巴馬總統(tǒng)的競(jìng)選承諾之一就是:使工作流程合理化、削減開(kāi)支、提高工作效率。由于GPRA、ARRA方案的要求及其競(jìng)選承諾,奧巴馬面臨向公眾展示ARRA中用于科學(xué)研究的資金怎樣對(duì)美國(guó)經(jīng)濟(jì)社會(huì)產(chǎn)生影響,十分是怎樣保存并創(chuàng)造工作時(shí)機(jī)及促進(jìn)經(jīng)濟(jì)復(fù)蘇的壓力。根據(jù)GPRA法案和ARRA法案的要求,為了知足向公眾展示科學(xué)研究的資金怎樣對(duì)美國(guó)經(jīng)濟(jì)社會(huì)產(chǎn)生影響的需要,在SoSP框架下,美國(guó)聯(lián)邦發(fā)起了STARMETRICS項(xiàng)目,旨在通過(guò)聯(lián)邦和研究機(jī)構(gòu)之間的合作,開(kāi)創(chuàng)建立跨部門(mén)分享的數(shù)據(jù)庫(kù)以及數(shù)據(jù)展示工具,進(jìn)而對(duì)聯(lián)邦RD投入的影響從定量角度進(jìn)行展示與評(píng)價(jià)。2、美國(guó)STARMETRICS項(xiàng)目基本情況STARMETRICS是美國(guó)再投資中的科學(xué)與技術(shù)測(cè)度研究在創(chuàng)新、競(jìng)爭(zhēng)力以及科學(xué)上的影響(ScienceandTechnologyinAmericasReinvestment-MeasuringtheEffecTofResearchonInnovation,CompetitivenessandScience)的簡(jiǎn)稱。此項(xiàng)目在美國(guó)科技政策辦公室(OSTP)指導(dǎo)下,由美國(guó)國(guó)立衛(wèi)生研究院(NIH)和美國(guó)國(guó)家科學(xué)基金會(huì)(NSF)共同牽頭負(fù)責(zé),其目的是由聯(lián)邦部門(mén)和贊助機(jī)構(gòu)與大學(xué)合作開(kāi)發(fā)一個(gè)基于實(shí)證的框架來(lái)測(cè)度科研投資的效果并向公眾展示科研投資的收益,并組織大學(xué)和科研贊助機(jī)構(gòu)共同構(gòu)建一個(gè)支撐該框架的開(kāi)放式的數(shù)據(jù)基礎(chǔ)。正如美國(guó)科技政策辦公室(OSTP)主任JohnP.Holdren所指出的:有必要用可靠的證據(jù)展示美國(guó)在研究與開(kāi)發(fā)活動(dòng)上的投資所獲得的收益,STARMETRICS就是華而不實(shí)重要的組成部分。首先,STARMETRICS將創(chuàng)造一個(gè)跨部門(mén)的機(jī)制對(duì)聯(lián)邦資金贊助的研究機(jī)構(gòu)的科學(xué)家以及支撐人員的人數(shù)做出解釋;其次,STARMETRICS將基于這些信息,構(gòu)建科技對(duì)經(jīng)濟(jì)效益影響的測(cè)度方式方法(如就業(yè)崗位創(chuàng)造),更好地測(cè)度科學(xué)研究成效(如通過(guò)引用和專利來(lái)測(cè)度新科學(xué)的產(chǎn)生和接受),以及測(cè)度科研投資的社會(huì)效益(如公共健康方面);第三,STARMETRICS將開(kāi)發(fā)和擴(kuò)展現(xiàn)有的研究工具,同時(shí)將贊助機(jī)構(gòu)和受贊助方的負(fù)擔(dān)降至最低。在項(xiàng)目進(jìn)行的經(jīng)過(guò)中,各方面的利益相關(guān)者將對(duì)項(xiàng)目進(jìn)展的成效不斷進(jìn)行評(píng)估。值得一提的是,STARMETRICS項(xiàng)目還有一個(gè)特色是在初期階段,是由PI與大學(xué)相關(guān)人員自愿報(bào)名參加并構(gòu)成了項(xiàng)目工作組。STARMETRICS項(xiàng)目的產(chǎn)出形式包括三類:一是科學(xué)投資在就業(yè)崗位的保存和創(chuàng)造方面的標(biāo)準(zhǔn)測(cè)度方式方法;二是科學(xué)投資在對(duì)經(jīng)濟(jì)、科學(xué)和社會(huì)的長(zhǎng)期影響的系統(tǒng)、標(biāo)準(zhǔn)和有效的測(cè)量方式方法;三是構(gòu)成科技政策方式方法學(xué)研究共同體。STARMETRICS項(xiàng)目的終極目的是構(gòu)建一個(gè)成熟的研究領(lǐng)域、聯(lián)邦政策層面成熟的分析工具集合(將科技政策提升到和稅收政策一樣的層面)、構(gòu)建科研贊助機(jī)構(gòu)和大學(xué)分享的科研管理數(shù)據(jù)平臺(tái)以及科技政策研究者分享的政策研究數(shù)據(jù)平臺(tái)。3、STARMETRICS項(xiàng)目框架STARMETRICS項(xiàng)目是個(gè)多階段的項(xiàng)目,將在不同時(shí)期隨著利益相關(guān)者需求的變化而變化,包括先期啟動(dòng)的一個(gè)試點(diǎn)項(xiàng)目(STARPilotProject)。3.1項(xiàng)目框架當(dāng)前,STARMETRICS項(xiàng)目計(jì)劃分為兩個(gè)階段,第一階段重點(diǎn)關(guān)注科研投資怎樣創(chuàng)造就業(yè)崗位;第二階段則重點(diǎn)關(guān)注科研投資更廣泛的影響。先期啟動(dòng)的試點(diǎn)項(xiàng)目則旨在通過(guò)現(xiàn)有的科研贊助部門(mén)、科研管理部門(mén)現(xiàn)有的數(shù)據(jù),來(lái)反映聯(lián)邦科學(xué)投資在經(jīng)濟(jì)、社會(huì)以及科學(xué)上的成效。試點(diǎn)項(xiàng)目并不能針對(duì)ARRA法案中科學(xué)投資進(jìn)行評(píng)價(jià),但是從長(zhǎng)期來(lái)看,對(duì)STARMETRICS項(xiàng)目的可行性和價(jià)值具有參考意義。STARMETRICS項(xiàng)目框架見(jiàn)圖1。STARMETRICS項(xiàng)目在成功施行了試點(diǎn)項(xiàng)目(PilotProject)的基礎(chǔ)上,大學(xué)和科研贊助機(jī)構(gòu)上報(bào)相關(guān)的科研管理數(shù)據(jù),由大學(xué)、科研贊助機(jī)構(gòu)和STARMETRICS項(xiàng)目組協(xié)同工作,進(jìn)行數(shù)據(jù)處理,并構(gòu)成不同的分析報(bào)告,分別反應(yīng)給PI、大學(xué)和科研贊助機(jī)構(gòu)。3.2第一階段:重點(diǎn)關(guān)注科研投資怎樣創(chuàng)造就業(yè)崗位STARMETRICS項(xiàng)目的第一階段旨在開(kāi)發(fā)統(tǒng)一的、可審計(jì)的、標(biāo)準(zhǔn)的基于科研機(jī)構(gòu)現(xiàn)有數(shù)據(jù)的測(cè)度科學(xué)投入在就業(yè)崗位創(chuàng)造方面的指標(biāo)。第一階段收集的數(shù)據(jù)不牽涉到個(gè)人。作為一個(gè)自愿參加的項(xiàng)目,STARMETRICS項(xiàng)目對(duì)參加的科研機(jī)構(gòu)來(lái)講并不難。STARMETRICS項(xiàng)目團(tuán)隊(duì)與科研機(jī)構(gòu)協(xié)同工作,在項(xiàng)目的每一個(gè)步驟上提供信息、指導(dǎo)和支持。第一階段的若干環(huán)節(jié)見(jiàn)圖2。第一步:與科研機(jī)構(gòu)的初步信息溝通。STARMETRICS項(xiàng)目的第一個(gè)步驟是組織一次介紹性的會(huì)議,一般采用網(wǎng)絡(luò)或視頻會(huì)議的形式來(lái)向科研機(jī)構(gòu)介紹STARMETRICS項(xiàng)目的基本情況以及介入此項(xiàng)目的要求。會(huì)議一般持續(xù)1個(gè)小時(shí)左右,會(huì)上將討論項(xiàng)目的若干細(xì)節(jié),包括需要采集哪些數(shù)據(jù)以及數(shù)據(jù)采集的經(jīng)過(guò)和基于這些數(shù)據(jù)將產(chǎn)生的報(bào)告模板?？蒲袡C(jī)構(gòu)的代表應(yīng)包括主要的IT技術(shù)人員、財(cái)務(wù)代表和人力資源代表,最好有負(fù)責(zé)科研的部門(mén)領(lǐng)導(dǎo)介入。第二步:科研機(jī)構(gòu)決定介入。第一次溝通會(huì)議之后,科研機(jī)構(gòu)和美國(guó)國(guó)立衛(wèi)生研究院(NIH)(NIH是STARMETRICS項(xiàng)目的數(shù)據(jù)管理機(jī)構(gòu))之間簽署一份理解備忘錄(MOU)。在這里經(jīng)過(guò)之中,還能夠額外召開(kāi)若干次技術(shù)會(huì)議,來(lái)討論需要收集的數(shù)據(jù)細(xì)節(jié)。第三步:科研機(jī)構(gòu)提交樣本數(shù)據(jù)。STARMETRICS項(xiàng)目的第一階段要求介入的科研機(jī)構(gòu)提供本身科研管理系統(tǒng)中的數(shù)據(jù),包括人力資源數(shù)據(jù)、間接成本數(shù)據(jù)、供給商數(shù)據(jù)以及子課題數(shù)據(jù)。STARMETRICS項(xiàng)目團(tuán)隊(duì)和科研機(jī)構(gòu)一同提交季度基線數(shù)據(jù),不同的科研機(jī)構(gòu)的數(shù)據(jù)時(shí)限能夠長(zhǎng)達(dá)7年或短至2個(gè)季度,多年的數(shù)據(jù)能夠在分析報(bào)告中展示出長(zhǎng)期的趨勢(shì)。樣本數(shù)據(jù)的具體信息通過(guò)數(shù)據(jù)字典的形式給出,同時(shí)STARMETRICS項(xiàng)目組還提供技術(shù)手冊(cè)來(lái)規(guī)范提交數(shù)據(jù)的細(xì)節(jié)。STARMETRICS項(xiàng)目第一階段需要的數(shù)據(jù)包括:項(xiàng)目信息、個(gè)人信息、項(xiàng)目直接費(fèi)用情況、采購(gòu)信息以及子課題信息等。以項(xiàng)目信息為例,數(shù)據(jù)字典給出了項(xiàng)目信息中包含的要素(字段)以及該要素(字段)的詳細(xì)定義,見(jiàn)表2。第四步:STARMETRICS項(xiàng)目團(tuán)隊(duì)提供反應(yīng)信息和報(bào)告。一旦拿到科研機(jī)構(gòu)的樣本數(shù)據(jù),項(xiàng)目團(tuán)隊(duì)便對(duì)這些數(shù)據(jù)進(jìn)行深切進(jìn)入分析,并提供針對(duì)就業(yè)崗位創(chuàng)造和保存以及與上一節(jié)度的變化情況報(bào)告。除此之外,項(xiàng)目團(tuán)隊(duì)還將對(duì)提交數(shù)據(jù)的構(gòu)造進(jìn)行分析,并提供怎樣更好地提交數(shù)據(jù)的反應(yīng)信息。第五步:科研機(jī)構(gòu)提交最近和歷史數(shù)據(jù)。當(dāng)科研機(jī)構(gòu)確認(rèn)樣本數(shù)據(jù)格式以及報(bào)告的模板符合自個(gè)的需求,科研機(jī)構(gòu)就需要提交盡可能多的季度數(shù)據(jù)。為了使項(xiàng)目團(tuán)隊(duì)更好地分析這些數(shù)據(jù),科研機(jī)構(gòu)最好提交季度數(shù)據(jù)。第六步:STARMETRICS項(xiàng)目團(tuán)隊(duì)開(kāi)創(chuàng)建立季度報(bào)告。此步驟旨在處理納入STARMETRICS數(shù)據(jù)庫(kù)的信息,生成相應(yīng)報(bào)告并反應(yīng)給研究機(jī)構(gòu)。STARMETRICS項(xiàng)目團(tuán)隊(duì)將提供季度報(bào)告,這些報(bào)告中包括一系列關(guān)于聯(lián)邦科學(xué)投入產(chǎn)生的直接就業(yè)崗位。同時(shí),STARMETRICS項(xiàng)目團(tuán)隊(duì)還提供額外的報(bào)告,這些報(bào)告含有聯(lián)邦科學(xué)投入中的子課題、采購(gòu)合同以及Overhead等支出產(chǎn)生的就業(yè)崗位的估計(jì)值。這些報(bào)告都會(huì)提交給研究機(jī)構(gòu)來(lái)征求意見(jiàn)。3.3第二階段:重點(diǎn)關(guān)注科研投資更廣泛的影響STARMETRICS項(xiàng)目的第二階段旨在開(kāi)發(fā)用于測(cè)度聯(lián)邦科學(xué)投資在科學(xué)知識(shí)、社會(huì)效益、勞動(dòng)力產(chǎn)出以及經(jīng)濟(jì)增長(zhǎng)等方面的影響。對(duì)科學(xué)知識(shí)的影響主要通過(guò)公開(kāi)出版物和引用數(shù)量方面的指標(biāo)來(lái)表示出;對(duì)社會(huì)效益影響能夠通過(guò)構(gòu)建健康指標(biāo)以及環(huán)境影響因子等方式表示出;對(duì)勞動(dòng)力產(chǎn)出的影響能夠通過(guò)學(xué)生流動(dòng)和招收等方面表示出;對(duì)經(jīng)濟(jì)增長(zhǎng)的影響則能夠通過(guò)跟蹤專利以及新公司的開(kāi)創(chuàng)建立和發(fā)展途徑等表示出。4、項(xiàng)目進(jìn)展情況及將來(lái)瞻望4.1進(jìn)展情況當(dāng)前,美國(guó)STARMETRICS項(xiàng)目整體上還處于第一階段,其發(fā)展歷程如下:2018年7月,STARMETRICS試點(diǎn)項(xiàng)目開(kāi)場(chǎng),有7所大學(xué)自愿參加,分別為UniversityofTexasatAustin、UniversityofDelaware、GeorgeMasonUniversity、CaliforniaInstituteofTechnology、UniversityofAlabama和UniversityofMassachusetts和Dartmouth。2018年5月,介入機(jī)構(gòu)(Agencies)簽署理解備忘錄。2018年7月,美國(guó)預(yù)算管理局(OMB)批準(zhǔn)擴(kuò)展這個(gè)項(xiàng)目。到當(dāng)前為止,超過(guò)60個(gè)機(jī)構(gòu)介入了STARMETRICS項(xiàng)目,至少還有50個(gè)機(jī)構(gòu)表示有興趣參加。同時(shí),STARMETRICS項(xiàng)目還將吸收美國(guó)國(guó)家科學(xué)基金會(huì)(NSF)ScienceofScienceandInnovationPolicy(SoSIP)計(jì)劃贊助的若干項(xiàng)目的成果和工具。例如,RDDashboard工具是一個(gè)科研管理數(shù)據(jù)的展示工具;基于專利數(shù)據(jù)制成的地圖能夠展示美國(guó)各州在特定年限內(nèi)申報(bào)的專利數(shù)量,贊助來(lái)源以及專利的引用情況;TOPICModeling工具能夠抽取NSF贊助的項(xiàng)目申請(qǐng)書(shū)的研究主題,并對(duì)申請(qǐng)書(shū)進(jìn)行關(guān)聯(lián),有利于辨別學(xué)科穿插項(xiàng)目。這些成果和工具有利于向公眾展示聯(lián)邦科學(xué)投入產(chǎn)生的成效和影響,同時(shí)也有利于提高科研機(jī)構(gòu)乃至科研管理部門(mén)的管理效率,實(shí)現(xiàn)奧巴馬總統(tǒng)建立高績(jī)效的目的。4.2STARMETRICS項(xiàng)目將來(lái)瞻望STARMETRICS項(xiàng)目將來(lái)除了實(shí)現(xiàn)第一階段和第二階段的目的之外,還會(huì)有多種可能應(yīng)用,進(jìn)而進(jìn)一步提高能夠提高科技機(jī)構(gòu)的管理效率,并加深科研人員和科技管理人員對(duì)科研活動(dòng)規(guī)律的了解。例如,通過(guò)STARMETRICS項(xiàng)目平臺(tái),能夠根據(jù)科學(xué)家的研究興趣,將科學(xué)家在地圖上進(jìn)行直觀展示;通過(guò)STARMETRICS還能夠更好地理解科學(xué)家之間的合作,并進(jìn)行圖形化直觀展示。5、對(duì)我們國(guó)家科技評(píng)價(jià)的啟示5.1我們國(guó)家科技評(píng)價(jià)現(xiàn)在狀況近年來(lái),隨著我們國(guó)家職能的轉(zhuǎn)變和科技管理體制改革,促進(jìn)了我們國(guó)家科技評(píng)價(jià)需求的穩(wěn)定和持續(xù)增長(zhǎng)。同時(shí),伴隨著我們國(guó)家科技計(jì)劃管理體制改革的深切進(jìn)入,評(píng)估活動(dòng)越來(lái)越遭到各級(jí)的高度重視?？萍荚u(píng)價(jià)是指由科技評(píng)價(jià)機(jī)構(gòu)根據(jù)委托方提出的目的,遵循一定的原則、程序和標(biāo)準(zhǔn),運(yùn)用科學(xué)、可行的方式方法對(duì)科技政策、科技計(jì)劃、科技發(fā)展領(lǐng)域、科技項(xiàng)目、科技成果、科技機(jī)構(gòu)、科技人員以及與科技活動(dòng)有關(guān)的行為和要素所進(jìn)行的專業(yè)化咨詢和評(píng)判活動(dòng)。現(xiàn)代科技評(píng)價(jià)已成為構(gòu)建科技競(jìng)爭(zhēng)發(fā)展環(huán)境的重要基礎(chǔ),成為科技戰(zhàn)略管理和績(jī)效管理的重要工具,成為公眾理解科技的重要渠道。從近十年來(lái)評(píng)價(jià)指標(biāo)理論研究的國(guó)際發(fā)展趨勢(shì)來(lái)看,Geisler從測(cè)量理論的角度定義科學(xué)技術(shù)指標(biāo),并分析不同類型科技評(píng)價(jià)指標(biāo)(如文獻(xiàn)計(jì)量指標(biāo)、專利指標(biāo)、同行評(píng)議等)的測(cè)量特征[12]。Keeney和Gregory從多目的決策出發(fā),研究怎樣有效選擇或構(gòu)建測(cè)量目的完成情況的屬性(即評(píng)估指標(biāo))。Roper等則從創(chuàng)新經(jīng)濟(jì)學(xué)出發(fā),分別根據(jù)知識(shí)溢出的私有收益和社會(huì)收益兩個(gè)維度,研究事先評(píng)估公共贊助RD活動(dòng)的指標(biāo)體系。從我們國(guó)家宏觀層面的科技資源或科研機(jī)構(gòu)的投入與產(chǎn)出效益評(píng)價(jià)實(shí)踐來(lái)看,主要是采用定性或定量方式方法在確定投入、產(chǎn)出指標(biāo)的前提下進(jìn)行分析和測(cè)算。其存在的問(wèn)題主要有下面三個(gè)方面:一是科技投入與科技產(chǎn)出之間缺乏直觀的聯(lián)絡(luò)。翟立新、韓伯棠、李曉軒以為,從本質(zhì)上看,公共科研機(jī)構(gòu)是具有多種投入和多種產(chǎn)出的復(fù)雜投入、產(chǎn)出系統(tǒng),是將科技人力資源和研究開(kāi)發(fā)資本等投入,通過(guò)研發(fā)經(jīng)過(guò)的知識(shí)溢出使之轉(zhuǎn)化成為論文、專著、專利、成果,以及改良的產(chǎn)品和工藝、服務(wù)等產(chǎn)出的生產(chǎn)系統(tǒng)。從這個(gè)意義上講,現(xiàn)有研究還不能揭示出產(chǎn)出和投入之間建立明確的函數(shù)關(guān)系,不能通過(guò)模型揭示投入轉(zhuǎn)化成產(chǎn)出的經(jīng)過(guò)。而STARMETRICS項(xiàng)目則通過(guò)統(tǒng)計(jì)學(xué)的方式方法,試圖構(gòu)建這種函數(shù)關(guān)系,在科學(xué)投入之前就能預(yù)測(cè)到將來(lái)的產(chǎn)出情況。二是難以衡量科技對(duì)經(jīng)濟(jì)社會(huì)的影響。當(dāng)前我們國(guó)家科技資源投入與產(chǎn)出評(píng)價(jià)中的產(chǎn)出指標(biāo)大部分是直接的科技產(chǎn)出,而這些產(chǎn)出對(duì)經(jīng)濟(jì)和社會(huì)的影響,如就業(yè)崗位的創(chuàng)造,社會(huì)效益等沒(méi)有牽涉。STARMETRICS項(xiàng)目則致力于構(gòu)建科學(xué)投資對(duì)經(jīng)濟(jì)社會(huì)廣泛影響的測(cè)度方式方法和數(shù)據(jù)平臺(tái)。三是不能直觀展示評(píng)價(jià)結(jié)果?，F(xiàn)有科技資源投入與產(chǎn)出評(píng)價(jià)的結(jié)果不能通過(guò)可視化的工具直觀展示給決策者,而STARMETRICS項(xiàng)目則吸收、采用大量的可視化工具,圖形化展示評(píng)價(jià)結(jié)果。5.2對(duì)我們國(guó)家科技評(píng)價(jià)的啟示美國(guó)STARMETRICS項(xiàng)目的施行預(yù)示著美國(guó)科技評(píng)價(jià)正在朝著愈加側(cè)重?cái)?shù)學(xué)模型和可視化工具的精細(xì)化方向發(fā)展。當(dāng)前,該項(xiàng)目得到了及科研機(jī)構(gòu)的廣泛響應(yīng),正在不斷發(fā)展和完善,并已經(jīng)開(kāi)場(chǎng)顯現(xiàn)出成效。它山之石,能夠攻玉。對(duì)我們國(guó)家科技評(píng)價(jià)來(lái)講,美國(guó)STARMETRICS項(xiàng)目存在可借鑒之處,主要具體表現(xiàn)出在三個(gè)方面:一是關(guān)注國(guó)家層面科研投資的效果和影響。隨著科教興國(guó)等戰(zhàn)略的提出,國(guó)家逐步加強(qiáng)對(duì)科學(xué)研究的經(jīng)費(fèi)投入,20042008年五年間,國(guó)家財(cái)政科技撥款由1095.3億元增加到2581.8億元,漲幅到達(dá)1.35倍。以中國(guó)科學(xué)院為例,自1998年知識(shí)創(chuàng)新