![真實(shí)世界研究指南 2018_第1頁](http://file4.renrendoc.com/view12/M04/15/2A/wKhkGWa_QEeAEpvTAACCKXI2dts273.jpg)
![真實(shí)世界研究指南 2018_第2頁](http://file4.renrendoc.com/view12/M04/15/2A/wKhkGWa_QEeAEpvTAACCKXI2dts2732.jpg)
![真實(shí)世界研究指南 2018_第3頁](http://file4.renrendoc.com/view12/M04/15/2A/wKhkGWa_QEeAEpvTAACCKXI2dts2733.jpg)
![真實(shí)世界研究指南 2018_第4頁](http://file4.renrendoc.com/view12/M04/15/2A/wKhkGWa_QEeAEpvTAACCKXI2dts2734.jpg)
![真實(shí)世界研究指南 2018_第5頁](http://file4.renrendoc.com/view12/M04/15/2A/wKhkGWa_QEeAEpvTAACCKXI2dts2735.jpg)
版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
發(fā)布方:吳階平醫(yī)學(xué)基金會(huì)12018年版吳一龍陳曉媛楊志敏執(zhí)筆專家(按漢語拼音程穎陸舜寧毅唐智柳田志鋼王潔吳婷徐晉小夏素琴余秋瓊周清指南編委會(huì)專家成員(按漢語拼音):方維佳高培谷成明馬飛毛磊王學(xué)興閻昭張博恒朱昊周脈耕鐘文昭鳴謝:非常感謝各位行業(yè)專家給予的大力支持,沒有大家的齊心協(xié)力,我2 五.基于不同數(shù)據(jù)源的研究要素 八.證據(jù)等級(jí)評(píng)價(jià) 九.案例分析 3臨床急需藥品醫(yī)療器械使用需求,加快審評(píng)審批,允許可附帶條件批準(zhǔn)上市,上市后按要求醫(yī)保部門、醫(yī)藥監(jiān)管部門積累了大量的醫(yī)療數(shù)據(jù),各級(jí)數(shù)據(jù)庫的電子化,以及各種電子設(shè)備的普及,各級(jí)數(shù)據(jù)庫平臺(tái)的建立,極大地增加了利用高質(zhì)量數(shù)據(jù)進(jìn)行真實(shí)世界研究的可能性。另外,患者、醫(yī)生、醫(yī)療保險(xiǎn)提供方、監(jiān)管者以及政策制定者都在努力尋求各種來自于特定人群藥品使用的準(zhǔn)確信息。而RWS則將成為藥品臨床應(yīng)用、醫(yī)保制定、決策制定的重要依據(jù)。計(jì)和統(tǒng)計(jì)方法的要求比傳統(tǒng)研究更高。更重要的是,我國目前尚沒有系統(tǒng)性的指南對(duì)RWS提南的初衷。本指南為國家重點(diǎn)研發(fā)計(jì)劃項(xiàng)目(項(xiàng)目編號(hào):2016YFC1303800)和國家公益性4真實(shí)世界數(shù)據(jù)不等同于真實(shí)世界證據(jù)。真實(shí)世界數(shù)據(jù)通過嚴(yán)格的數(shù)據(jù)收集、系統(tǒng)的處理、正確的統(tǒng)計(jì)分析以及多維度的結(jié)果解讀,才能產(chǎn)生真據(jù)能否成為真實(shí)世界證據(jù)時(shí)需要看其數(shù)據(jù)的質(zhì)量,包括真實(shí)世界數(shù)據(jù)與其結(jié)果的相關(guān)性以及可靠性等[1]。RWS是對(duì)臨床常規(guī)產(chǎn)生的真實(shí)世界數(shù)據(jù)進(jìn)行系統(tǒng)性收集并進(jìn)行分析的研究,與隨機(jī)對(duì)照臨床計(jì)和研究方法,而是研究實(shí)施的場(chǎng)景[3]。RWS數(shù)據(jù)源自醫(yī)療機(jī)構(gòu)、家庭和社區(qū)等,而非存在特點(diǎn)真實(shí)世界研究研究目的研究目的多樣,包括效果研究研究人群理想世界人群,嚴(yán)格的入排標(biāo)準(zhǔn)真實(shí)世界人群,較為寬泛的入排標(biāo)準(zhǔn)樣本量根據(jù)統(tǒng)計(jì)學(xué)公式推算獲得,樣本量根據(jù)真實(shí)數(shù)據(jù)環(huán)境或統(tǒng)計(jì)學(xué)公式推算獲研究時(shí)間短期或者長(zhǎng)期(以獲得所有治療以及長(zhǎng)期臨床結(jié)局為終點(diǎn))研究結(jié)果外部可推性強(qiáng)研究設(shè)計(jì)前瞻性研究可前瞻,也可回顧研究實(shí)施場(chǎng)景理想世界:高度標(biāo)準(zhǔn)化的環(huán)境數(shù)據(jù)標(biāo)準(zhǔn)化,收集過程較嚴(yán)格規(guī)范來源多樣,異質(zhì)性高5因此,為了減少潛在的偏倚,需要謹(jǐn)慎而周密的研究設(shè)計(jì),并且應(yīng)該確定研究問題后盡早開始制有無臨床問題的確認(rèn)有無臨床問題的確認(rèn)現(xiàn)有數(shù)據(jù)的情況基于既往數(shù)據(jù)基于既往數(shù)據(jù)基于前瞻性數(shù)據(jù)基于前瞻性數(shù)據(jù)完全不符合部分符合完善數(shù)據(jù)完全符合暴露因素研究設(shè)計(jì)選擇研究結(jié)果完全不符合部分符合完善數(shù)據(jù)完全符合暴露因素研究設(shè)計(jì)選擇研究結(jié)果數(shù)據(jù)情況評(píng)估人群/入排研究設(shè)計(jì)選擇樣本量混雜及偏倚的控樣本量混雜及偏倚的控制*統(tǒng)計(jì)方案的制定混雜及偏倚的控制*數(shù)據(jù)管理流程質(zhì)量控制數(shù)據(jù)管理流程質(zhì)量控制數(shù)據(jù)管理流程統(tǒng)計(jì)分析統(tǒng)計(jì)分析統(tǒng)計(jì)分析結(jié)果解讀和評(píng)價(jià)結(jié)果解讀和評(píng)價(jià)結(jié)果解讀和評(píng)價(jià)結(jié)果解讀和評(píng)價(jià)事后分析事后分析*偏倚的控制在整個(gè)研究過程中都需要時(shí)刻關(guān)注,無論是基于既往數(shù)據(jù)還*偏倚的控制在整個(gè)研究過程中都需要時(shí)刻關(guān)注,無論是基于既往數(shù)據(jù)還是前瞻性數(shù)據(jù),從研究設(shè)計(jì)的選擇,研究管理流程直到統(tǒng)計(jì)分析。6RWS通常會(huì)圍繞著病因,診斷,治療,預(yù)后及臨床預(yù)測(cè)[4]等相關(guān)的研指腸潰瘍的關(guān)系。診斷研究主要是研究某類新方法對(duì)特定疾病診斷的準(zhǔn)確度研究,以判斷新診斷方法的臨床價(jià)值。治療性研究主要是研究某類治療方案對(duì)特定疾病的療效及副作用研究。主要包括兩方面:①治療方案對(duì)特定疾病的療效研究;②治療方案的不良反應(yīng)研究。預(yù)后研究是對(duì)疾病后狀況進(jìn)行客觀描述;②對(duì)影響預(yù)后的因素進(jìn)行研究;③對(duì)健康相關(guān)生活質(zhì)量的研究。臨床預(yù)測(cè)研究則是尋找出最佳的對(duì)疾病診斷或疾病轉(zhuǎn)歸的預(yù)測(cè)指標(biāo)或癥狀等,主要包括診斷預(yù)測(cè)研究和如病例交叉設(shè)計(jì)和序貫設(shè)計(jì)等也被用在基于現(xiàn)有數(shù)據(jù)的研究中。下表是常見研究類型對(duì)應(yīng)的臨床研究設(shè)計(jì)擬解決的研究問題常見臨床場(chǎng)景優(yōu)勢(shì)劣勢(shì)病例對(duì)照研究?疾病相關(guān)的影響因素研究?影響疾病發(fā)病和預(yù)后因素的分析?預(yù)測(cè)研究?省時(shí),省成本?適合研究罕見病?適合研究多個(gè)因素與一種疾病的關(guān)聯(lián)?因果時(shí)序是由果及因,檢驗(yàn)病因假說的能力較隊(duì)列研究弱?混雜和偏倚-選擇偏倚:例如不恰當(dāng)?shù)倪x擇對(duì)照;病例與對(duì)照來自不同人群-信息偏倚:例如暴露信息不準(zhǔn)確-回憶偏倚:例如研究者引入的偏倚橫斷面研究?疾病或狀態(tài)的分布狀態(tài)(流?影響因素?疾病的發(fā)病患病或死亡率相關(guān)調(diào)查?疾?。ɑ虿l(fā)癥)和影響因素的關(guān)聯(lián)分析?省時(shí),省成本?只能了解疾病的流行影響因素?判斷因果關(guān)系的證據(jù)等級(jí)不高單純病例研究?罕見病的研究?基因環(huán)境交互作用的研究?某疾病的分子標(biāo)記物分析中的組織樣本的收集?適于醫(yī)院開展研究?特別適合腫瘤及罕見病的研究?無對(duì)照組?所研究疾病的患病率不宜超過5%7?特殊疾病隊(duì)列?在檢測(cè)基因與環(huán)境交互作用時(shí),可信區(qū)間更窄?因無對(duì)照組,從而避免了對(duì)照選擇所引起的偏倚?省時(shí),省成本?除了可出現(xiàn)病例對(duì)照研究的病例選擇所引起的常見偏倚外,還存在不同亞人群暴露率和基因頻率不一致所引起的偏倚回顧性隊(duì)列研究?病因研究?預(yù)后研究?治療性研究?臨床治療和療效/結(jié)局的生存分析?預(yù)測(cè)研究?可以直接獲得發(fā)病率,直接估計(jì)相對(duì)危險(xiǎn)度?因果時(shí)序合理,檢驗(yàn)病因假說的能力較強(qiáng)?了解疾病的自然史?獲得一種暴露與多種疾病結(jié)局的關(guān)系?相比前瞻性隊(duì)列研究,省時(shí)省成本?不適于發(fā)病率很低的疾病的病因研究?數(shù)據(jù)和信息的缺失?偏倚和混雜?矛盾數(shù)據(jù)需要特別注意和處理前瞻性隊(duì)列研究?病因研究?預(yù)后研究?治療性研究?檢驗(yàn)病因假設(shè)?臨床治療和療效/結(jié)局的生存分析?因果時(shí)序合理,檢驗(yàn)病因假說的能力較強(qiáng)?了解疾病的自然史?獲得一種暴露與多種疾病結(jié)局的關(guān)系?所收集的資料相對(duì)完整可靠,一般不存在回憶偏倚?不適于發(fā)病率很低的疾病的病因研究?要求隨訪觀察,時(shí)間周期長(zhǎng)?失訪難以避免?隨著時(shí)間推移,未知的變量引入人群可能導(dǎo)致結(jié)局受影響?研究的設(shè)計(jì)要求高,實(shí)施難度大,費(fèi)用高實(shí)效性臨床研究?預(yù)后研究?治療性研究?臨床療效/結(jié)局(如心梗、生存質(zhì)量、死亡、成本等)以及安全性的評(píng)價(jià)?成本-效果分析等衛(wèi)生經(jīng)濟(jì)學(xué)評(píng)價(jià)?可在不同等級(jí)的醫(yī)療機(jī)構(gòu)開展研究?真實(shí)世界患者(異質(zhì)性相對(duì)較大、限制相對(duì)少)?相對(duì)靈活可變(可調(diào)整方案),更符合日常醫(yī)療實(shí)際?外部可推性較好?可以通過隨機(jī)分組平衡組間已知和未知的預(yù)后因素,最大程度提高組間的可比性,從而增強(qiáng)論證強(qiáng)度?樣本量通常較大?其它和前瞻性隊(duì)列研究相似1.基于現(xiàn)有數(shù)據(jù)醫(yī)療數(shù)據(jù)等,這些數(shù)據(jù)數(shù)量非常龐大,但由于數(shù)據(jù)的采集并非為某特定研究目的而設(shè)計(jì),數(shù)據(jù)分散,異質(zhì)性高,數(shù)據(jù)的完整性及準(zhǔn)確性也存在一些問題。另外醫(yī)保數(shù)據(jù)一般由各級(jí)政府機(jī)構(gòu)掌握,可及性較弱。數(shù)據(jù)可行性評(píng)估首先基于待研究的臨床問題,確定主要研究變量比如待研究的治療措施,關(guān)鍵基線信息,主要研究結(jié)局包括患者主要人口統(tǒng)計(jì)學(xué)特征、患病史、并發(fā)癥、合并癥和實(shí)驗(yàn)室指關(guān)鍵數(shù)據(jù)是否存在;其次對(duì)缺失數(shù)據(jù)的數(shù)量和類型的影響進(jìn)行全面評(píng)估,包括主要研究變量8他相關(guān)研究變量,可以通過抽樣或全數(shù)據(jù)集來檢查關(guān)鍵變量的數(shù)據(jù)缺失程度和模式來實(shí)現(xiàn)。另外?研究人群和入排標(biāo)準(zhǔn)回顧性隊(duì)列和病例對(duì)照研究中,首先需要確定研究對(duì)象尤其是對(duì)照的選例對(duì)照研究中,對(duì)照應(yīng)盡量選擇內(nèi)部對(duì)照,選擇沒有發(fā)生研究結(jié)局的人群,且與病例來自同一人研究問題清晰定義暴露,比如可以是有/無某治療方案,暴露的程度如劑量,或者暴露的模式如順序等等。非暴露組的人群應(yīng)在除了暴露因素外與暴露組任何一種編碼由于不同機(jī)構(gòu)醫(yī)療水平或者電子病歷系統(tǒng)平臺(tái)不同,對(duì)于疾病診斷的準(zhǔn)確性和完整性都會(huì)有所不同。因此,綜合各項(xiàng)編碼和實(shí)驗(yàn)室診斷等聯(lián)合的識(shí)別方式,是基于數(shù)據(jù)庫開展的常用方法。?暴露因素和研究終點(diǎn)暴露因素和研究終點(diǎn)是研究中首要考量的關(guān)鍵因素。在數(shù)據(jù)可行性評(píng)估及納入和排除研究對(duì)象的階段之后,進(jìn)一步確認(rèn)暴露狀態(tài)及研究終點(diǎn)的準(zhǔn)確性和代表性,是否有不同數(shù)據(jù)佐證關(guān)鍵數(shù)據(jù)的準(zhǔn)確性。如果研究基于已有病例數(shù)據(jù),則需特別注意收集?樣本量),驗(yàn)提出的問題和假說。基于不同研究類型需要依據(jù)不同的統(tǒng)計(jì)分析方9錯(cuò)誤和把握度,在保證研究具有一定可靠性條件下,估計(jì)并確定最小樣本量,確保研究同時(shí)具備科學(xué)性和經(jīng)濟(jì)性。另一方面,RWS往往采用較寬泛的納排標(biāo)準(zhǔn),有時(shí)需要隨訪較長(zhǎng)期臨床結(jié)局,充分反映實(shí)際的臨床實(shí)踐,因此應(yīng)在確定最小樣本量的基礎(chǔ)上,盡可能地?cái)U(kuò)大樣本量以保證其能夠覆蓋更廣泛的患者群體并考慮到較長(zhǎng)隨訪時(shí)間導(dǎo)致的失訪的可能性。在具有異質(zhì)性的患者群體中可進(jìn)行亞組分析,從而拓展研究的意義?統(tǒng)計(jì)方法的考量應(yīng)在研究問題確定后,盡早制定研究方案和統(tǒng)計(jì)分措施等造成潛在偏倚和混雜,因此統(tǒng)計(jì)方法更多是關(guān)注如何減小和控制偏倚和混雜。常見的有匹配、分層分析和多變量分析。在較多風(fēng)險(xiǎn)因素或者研究因素的情況下,使用多變量分析將多素同時(shí)納入模型,會(huì)由于共線性等問題,使得模型無法正常運(yùn)行。傾向性評(píng)分匹配(propensityscorematching)或者分層(stratification)則是解另外,利用已有數(shù)據(jù)庫開展的預(yù)測(cè)研究也是常見的RWS類可以用來預(yù)測(cè)疾病轉(zhuǎn)歸或者并發(fā)癥的發(fā)生概率;另外,近年來發(fā)展出的基于真實(shí)世界大數(shù)據(jù)的機(jī)?處理缺失數(shù)據(jù)在RWS中,數(shù)據(jù)的缺失是一個(gè)不可避免的問題。預(yù)果的影響,提高結(jié)果的可靠性。關(guān)注不同研究類型可能出現(xiàn)的數(shù)據(jù)缺失也可幫助減少缺失數(shù)錄不完整,而這種缺失信息可能使這些患者的相關(guān)數(shù)據(jù)看上去比實(shí)際狀況更健康而造成研究偏倚。有時(shí)數(shù)據(jù)的缺失并非隨機(jī)的,如果忽略缺失數(shù)據(jù)的內(nèi)在規(guī)律,那么會(huì)丟掉重要的信息。對(duì)于缺失數(shù)據(jù),在能夠溯源的情況下,則盡可能補(bǔ)全相應(yīng)缺失數(shù)據(jù);對(duì)于無法溯源的情況,則索性分析,明確缺失值在各個(gè)研究因素中的分布情況,判斷其分布是否隨機(jī),如有偏倚,?不同數(shù)據(jù)庫整合的問題對(duì)于不同數(shù)據(jù)庫的整合,一般建議首先對(duì)各自數(shù)據(jù)庫中數(shù)據(jù)進(jìn)行質(zhì)量評(píng)估和分層分級(jí),確定好需要整合的內(nèi)容。在整合過程中,矛盾的數(shù)據(jù)是重中之將不同數(shù)據(jù)庫的數(shù)據(jù)結(jié)構(gòu)進(jìn)行標(biāo)準(zhǔn)化處理。在整合過程中對(duì)于無法整合的數(shù)據(jù)進(jìn)行處理,同時(shí)需要注意因整合造成的系統(tǒng)誤差,以及關(guān)注整合后的主要研究因素,暴露因素及主要混雜因素的影?分子標(biāo)記物相關(guān)研究的注意事項(xiàng)基于已有數(shù)據(jù)庫的回顧性研究需要考慮患者的基線特征和代表性的問題,由于缺失的生物樣本而前瞻性的研究則需考慮,可能有生物樣本但是沒有詳細(xì)的患者基本信息的情況;樣本量小,且患者人群缺乏代表性;實(shí)驗(yàn)檢測(cè)方法是否經(jīng)過驗(yàn)證;有分子標(biāo)記物測(cè)量結(jié)果,沒有或僅有有限臨床結(jié)局?jǐn)?shù)據(jù)(如總生存率,無進(jìn)展生存期等)的?用數(shù)據(jù)庫開展研究,知情同意和倫理審批的相關(guān)事宜真實(shí)世界研究的數(shù)據(jù)收集,患者的信息有可能會(huì)成為研究資料,因此患者本身在某種程度上可能也已成為“受試者”,所以真實(shí)世界研究同樣需要符合倫理的要求。因此某些情況下,真實(shí)世界知情同意是保證研究符合倫理要求的一個(gè)重要環(huán)節(jié),它是一個(gè)持續(xù)的完整過程,保護(hù)受試者權(quán)益。因真實(shí)世界研究多不是預(yù)設(shè)方案,尤其是回顧性研究,收集的大量信息多屬于歷年數(shù)據(jù),且涉及到對(duì)大規(guī)模病例或是生物樣本數(shù)據(jù)進(jìn)行研究,所以獲得每一位受試者同意其數(shù)據(jù)用于臨床的研究有很大的挑戰(zhàn)。如果經(jīng)倫理審查,認(rèn)為課題研究不大于最小風(fēng)險(xiǎn),且研究者使用受試者數(shù)據(jù)不會(huì)對(duì)患者造成不利的影響和受試者重要隱私信息的泄露,一般可考慮免除知情2.基于前瞻性數(shù)據(jù)健康監(jiān)測(cè)等,該類數(shù)據(jù)在收集之前已確定具體的研究目的,需要收集的數(shù)據(jù)也很明確,故數(shù)較規(guī)范比較標(biāo)準(zhǔn),完整性準(zhǔn)確性比較好。基于前瞻性數(shù)據(jù)的RWS一般采用隊(duì)列研究的設(shè)計(jì),隊(duì)于健康結(jié)果的病因或者風(fēng)險(xiǎn)因素的假說,通過對(duì)研究對(duì)象的追蹤,觀察不同群組健康結(jié)局臨床研究中,往往有計(jì)劃地招募患者參加,進(jìn)而隨訪患者究不同的治療或者某些疾病特點(diǎn)是否和不同疾病結(jié)局的相關(guān)關(guān)系。前瞻性隊(duì)列研究的樣本量訪時(shí)間同樣重要,研究的樣本量越大,隨訪的時(shí)間越長(zhǎng),觀察到的健康結(jié)局?jǐn)?shù)量越多。開展性隊(duì)列研究的主要考慮因素有以下幾點(diǎn):?研究人群的選取疾病注冊(cè)或患者注冊(cè)登記就是系統(tǒng)性地收集某些特點(diǎn)的患者,比如某些診斷、治療或疾病癥狀等,這樣的登記研究可能使用患者的病歷記錄和相關(guān)信息,而不是所有的可以獲得的龐大的數(shù)據(jù)。不同的疾病注冊(cè)登記的樣本量或者收集信息的深度和廣度可能是不一樣的,可能是一心或多中心的研究。考慮到不同的研究目的和執(zhí)行的可能,這樣的研究也可以設(shè)定一些入排標(biāo)準(zhǔn)。一般來說,嚴(yán)格的入排標(biāo)準(zhǔn),是為了加強(qiáng)研究本身的內(nèi)部有效性(internalvalid),的入排標(biāo)準(zhǔn),會(huì)提高研究結(jié)果的廣泛代表性或外推性(exter到研究結(jié)果的內(nèi)部有效性和外推性兩全其美,在設(shè)計(jì)階段,如何入選患者需要在臨床醫(yī)生和流行?基線調(diào)查的研究?jī)?nèi)容的盡量豐富完整前瞻性隊(duì)列研究的基線研究,本身也是一個(gè)橫斷面的研究。在計(jì)劃和展開研究早期階慮是否要利用橫斷面信息,一方面回答具體的科學(xué)也是對(duì)數(shù)據(jù)的可行性和部分?jǐn)?shù)據(jù)質(zhì)量的檢驗(yàn)。在這一分析過程中,應(yīng)該特別關(guān)注對(duì)主要暴露因素,甚至暴露水平的測(cè)量和評(píng)估。例如主要暴露因素效度的研究(validationstudy為應(yīng)該考慮未來研究拓展的潛在可能性,盡可能收集豐富完整的數(shù)據(jù)。這樣的基線數(shù)據(jù)會(huì)定義患者在研究基線時(shí)間點(diǎn)更多的暴露因素和暴露水平,使驗(yàn)證研究假說或研究其他問題成為可能。最?樣本量和研究深度的平衡有些情況下,前瞻性隊(duì)列研究限于研究條件,研究某些科學(xué)問題受限于樣本量小,沒有足夠的把握度來驗(yàn)證假說,在這種情況下,鼓勵(lì)多個(gè)群組研究的共同研究(cohortconsortium),本量,促進(jìn)科研合作。同時(shí),研究的大樣本也相應(yīng)地減少了抽樣誤差。在小樣本量研究的情況下,盡可能在數(shù)據(jù)采集的深度上努力,在創(chuàng)新性方面做出探索。具體樣本量計(jì)算可根?提高患者依從性,長(zhǎng)期隨訪患者前瞻性隊(duì)列研究可能會(huì)隨訪數(shù)十年,未來研究的健康結(jié)局不僅可能包括電子病歷險(xiǎn)登記等電子化平臺(tái)提供的信息,也應(yīng)該包括未來可能隨訪等獲得的信息。有些研究時(shí)間a.充分知情:患者脫落或失訪的兩個(gè)常見原因分別是不良反應(yīng)或頻繁檢查,讓患者充分了解研究流程,提前告知可能不良反應(yīng)并進(jìn)行相應(yīng)預(yù)防措施可有效提高患者b.人文關(guān)懷:研究過程中的醫(yī)患互動(dòng),可以發(fā)放健康信c.定期提醒:定期系統(tǒng)或人工提醒可提高患者用藥及訪視的依從性。d.多種溝通方式:保留患者及家屬多個(gè)長(zhǎng)期的聯(lián)系方式,包括住址,手機(jī),線上等,并及時(shí)更新,可有效避免患者換號(hào)后導(dǎo)致的失訪。對(duì)于失訪的患者,也應(yīng)在不同時(shí)間段電話或者通過其它聯(lián)系方式爭(zhēng)取,減少失訪。?失訪及缺失數(shù)據(jù)考量研究者需要在研究開始時(shí)針對(duì)缺失數(shù)據(jù)制定計(jì)劃,盡可能防止數(shù)據(jù)缺失,需要更加重視。一般來說,失訪低于5%的時(shí)候,引起的偏也可能會(huì)引起偏倚[8]。如果失訪的原因是完全隨機(jī)的,和暴露因素以及研究結(jié)果沒有聯(lián)系,失訪低于60%一般是可以接受的。如果失訪在某些明確因素的條件下是隨機(jī)階段,通過對(duì)這些確定因素的分層分析,可以控制失訪帶來的偏倚。此外,即便失訪不一定會(huì)帶來偏倚,仍會(huì)影響研究的準(zhǔn)確性,或者說導(dǎo)致研究可信區(qū)間變寬。因此,存在失訪的情況下,應(yīng)該進(jìn)一步分析暴露組和非暴露組失訪比例是否有顯著性不同,失訪是否會(huì)和一些關(guān)鍵指標(biāo)存在關(guān)?隊(duì)列研究中的巢式病例對(duì)照研究巢式病例對(duì)照研究是在現(xiàn)存隊(duì)列研究基礎(chǔ)上的病例對(duì)照研究。在隨訪研究人群后,選擇作為病例,然后通過年齡和性別等因素配比,選擇對(duì)照組,進(jìn)而比較病例和對(duì)照的暴露因素是否不同,來研究疾病和暴露的關(guān)系。一般來說在暴露因素的測(cè)量難度大、費(fèi)用比較高或者病例比較?實(shí)效性臨床研究盡管實(shí)效性臨床研究(PRCT)在RWS中劃分在試有相似之處。其主要用于常規(guī)臨床實(shí)踐中療效對(duì)比研究,另外,成本效果分析(cost-高組間可比性,減少選擇偏倚。通常選擇兩種待比較的臨床干預(yù)措施或方案,采用相對(duì)寬泛的入方案的低標(biāo)準(zhǔn)化是PRCT重要特征之一,即研究在實(shí)治療方法[9]。1954年美國病毒學(xué)家J.Salk主持實(shí)施的臨床研究“索爾克脊髓灰質(zhì)炎疫苗試驗(yàn)”),ResearchNetwork主導(dǎo)的“阿司匹林心血管獲益研究”(1.數(shù)據(jù)管理流程RWS研究流程管理的核心整體來說還是充分發(fā)揮軟件,移動(dòng)端和人工智能結(jié)構(gòu)化等新技術(shù)功能。加強(qiáng)電子數(shù)據(jù)采集強(qiáng)系統(tǒng)邏輯核查功能,讓系統(tǒng)自動(dòng)進(jìn)行數(shù)據(jù)核查,時(shí)時(shí)保障數(shù)據(jù)質(zhì)量;從研究設(shè)計(jì)層面應(yīng)該不必要的隨訪和檢測(cè),尤其是來院隨訪。充分利用在線隨訪功能,即充分讓患者參與,讓患者報(bào)告結(jié)局,自動(dòng)進(jìn)行患者隨訪提醒、問卷量表推送,患者端數(shù)據(jù)采集及醫(yī)患溝通,提高隨訪效率和質(zhì)量;數(shù)據(jù)點(diǎn)分級(jí)管理,強(qiáng)制性保證關(guān)鍵數(shù)據(jù)的收集的準(zhǔn)確真實(shí)性。從研究監(jiān)查與技術(shù)層面進(jìn)行技術(shù)創(chuàng)新:使用移動(dòng)APP進(jìn)行數(shù)據(jù)源收集,線上中心化錄入配合文本識(shí)別(OCR)和智功能以節(jié)約錄入成本。同時(shí)遠(yuǎn)程監(jiān)查以減少差旅成本。2.數(shù)據(jù)質(zhì)量控制數(shù)據(jù)質(zhì)量控制是確保研究數(shù)據(jù)真實(shí)、準(zhǔn)確、可靠的關(guān)鍵。研究各個(gè)階段都需要對(duì)可能影響數(shù)量的各個(gè)因素和環(huán)節(jié)進(jìn)行控制,涉及從數(shù)據(jù)收集、處理、到統(tǒng)計(jì)分析報(bào)告的全過程。參照量評(píng)價(jià)ALCOA+原則[11-13],數(shù)據(jù)的可溯源性、完整性、一致性、及準(zhǔn)確性等指標(biāo)在在RWS尤為重要,需要重點(diǎn)關(guān)注。數(shù)據(jù)質(zhì)控則需要建立完善的RWS(SOP)以及人員定期的培訓(xùn)。主要包括:1)保證數(shù)據(jù)源質(zhì)量,確保數(shù)據(jù)源信息的完整性和準(zhǔn)確性,減少數(shù)據(jù)源本身的缺失和偏差。臨床病歷作為關(guān)鍵數(shù)據(jù)源,其不僅要符合病歷書寫規(guī)范、醫(yī)院三級(jí)質(zhì)控要求等,還應(yīng)提高病歷質(zhì)控標(biāo)準(zhǔn)2)在采集數(shù)據(jù)前,制定詳細(xì)的研究設(shè)計(jì)方案和分析計(jì)劃。評(píng)估確立采集字段,確認(rèn)關(guān)鍵字段已被3)建立數(shù)據(jù)采集和錄入的標(biāo)準(zhǔn)指南,確保錄入數(shù)據(jù)與數(shù)據(jù)源的一致性。對(duì)于錄入過程中的任何修4)制定完善的數(shù)據(jù)質(zhì)量管理計(jì)劃,確立關(guān)鍵字段;制定系統(tǒng)質(zhì)控和人工質(zhì)控計(jì)劃,確保數(shù)據(jù)的真實(shí)性、準(zhǔn)確性和完整性。數(shù)據(jù)源核查確認(rèn)是保證研究數(shù)據(jù)真實(shí)完整的必要措施大規(guī)模的數(shù)據(jù),可充分利用系統(tǒng)實(shí)時(shí)自動(dòng)邏輯核查來加強(qiáng)質(zhì)控,降低人工質(zhì)控成本;對(duì)于關(guān)鍵字),和關(guān)鍵環(huán)節(jié)。臨床研究中誤差的來源可以分為兩類:一類是隨機(jī)誤差(randome1.選擇偏倚(selectionbias)的控制選擇偏倚是在RWS中比較常見的偏倚。大多數(shù)情況下可以匹配或者隨機(jī)的方法。比如臨床科研常見的一個(gè)實(shí)例,某研究數(shù)過一系列入排之后僅有500人可用于分析,如果其中要考慮是否存在選擇偏倚的問題,即數(shù)據(jù)全面完整的患者和因數(shù)據(jù)缺失而排除的患者之間是否可比,這是一個(gè)需要考慮和評(píng)估的要點(diǎn)。如果信息缺失的患者因?yàn)槟撤N治療療效不佳退出,甚至死亡而導(dǎo)致失訪,那么排除后的數(shù)據(jù)而產(chǎn)生的結(jié)果會(huì)嚴(yán)重影響研究結(jié)果的準(zhǔn)確性、可靠性以及外推1)嚴(yán)格掌握研究對(duì)象的納入或排除標(biāo)準(zhǔn)。第一,不患與和肺癌的關(guān)系,那么就要將慢性阻塞性肺?。–OPD)排除出研究人群。第組可比。如對(duì)照組和病例組在基線信息上盡量可比,如年齡,性別,病情嚴(yán)重程度,經(jīng)濟(jì)狀況2)盡量提高應(yīng)答率,減少失訪率,并對(duì)失訪3)盡可能采用多種對(duì)照。理想的是以人群中全體病例和非病例(或其有代象。如以醫(yī)院病例為研究對(duì)象,宜在多個(gè)醫(yī)院選擇對(duì)象,且素,最大程度提高組間的可比性,將偏倚最小化,從而增強(qiáng)論證強(qiáng)度。后續(xù)的隨訪過程遵從性研究的原則,即研究在常規(guī)臨床實(shí)踐下進(jìn)行,盡可能減少對(duì)常規(guī)治療的干預(yù),反映真實(shí)臨踐中的情況。2.信息偏倚(informationbias)的控制信息偏倚主要來自資料收集和解釋過程中的錯(cuò)誤信息,比如問卷的問題,生物標(biāo)本的問題,管理的問題,設(shè)計(jì)與分析的問題。而產(chǎn)生這些不正確信息的原因可以是研究對(duì)象本身的記憶誤差,也可以由研究者的態(tài)度或方法不當(dāng)所致,更重要的是在研究設(shè)計(jì)過程中對(duì)調(diào)查表設(shè)計(jì),指標(biāo)設(shè)立和檢測(cè)方法的選擇缺乏科學(xué)性和合理性,因此要在研究的不同階段控制和消除影響信息?研究設(shè)計(jì)階段:在研究設(shè)計(jì)中對(duì)暴露因素必須有嚴(yán)格,客觀的定義,并力求指標(biāo)定量化。要有統(tǒng)一、明確的診斷標(biāo)準(zhǔn),調(diào)查表的問題應(yīng)易于理解和回答,例如:當(dāng)詢問對(duì)象是否吸煙時(shí),首先要明確對(duì)應(yīng)于研究對(duì)象應(yīng)清楚地了解本次研究的目的、意義和要求,以獲取其配合和支持。對(duì)于涉及生活和隱私的問卷,應(yīng)事先告知對(duì)象所有應(yīng)答均獲保調(diào)查員需經(jīng)過嚴(yán)格培訓(xùn),能正確理解調(diào)查的意義、方法和內(nèi)容,能嚴(yán)謹(jǐn)客觀地從事資?資料收集階段:信息偏倚與調(diào)查對(duì)象的記憶程度有關(guān),在研究中可對(duì)同一內(nèi)容以不同的形式重復(fù)詢問,以幫助調(diào)查對(duì)象回憶并檢驗(yàn)其應(yīng)答的可信性。如詢問吸煙暴露年生中哪幾年吸煙,哪幾年不吸煙"。為了便于對(duì)象子,量匙等來為某些暴露因素如每日飲酒量、鹽攝入量等定量。向研究對(duì)象提供有關(guān)因研究中的各種測(cè)量?jī)x器、試劑和方法都應(yīng)標(biāo)準(zhǔn)化。應(yīng)使用同一型號(hào)的儀器并定期校驗(yàn),試劑對(duì)于信息偏倚,除了在方法學(xué)上杜絕其來源外,對(duì)其所致的錯(cuò)誤的分類結(jié)果,可進(jìn)一步在資析過程中加以測(cè)量、校正,并進(jìn)行相應(yīng)的靈敏度分析。3.混雜(confounding)的控制混雜是一類在RWS中值得全程關(guān)注卻又無法完全避減小混雜對(duì)結(jié)果的影響。識(shí)別和選擇混雜因素,通對(duì)于較成熟的領(lǐng)域,任何已有證據(jù)提示為混雜的變量都應(yīng)該考慮;可以基于文獻(xiàn)回顧以及研究人員專業(yè)領(lǐng)域的知識(shí)和理解。對(duì)于嶄新的領(lǐng)域,考慮那些與疾病有關(guān)也可能與暴露有關(guān)的因素。如果難以確定,可以在資源允許的條件下,考慮對(duì)所有與疾病有關(guān)的因素都進(jìn)行測(cè)量,盡可能的收集更多的數(shù)據(jù)點(diǎn)。?限制:研究設(shè)計(jì)開始階段,針對(duì)某些可能的混雜因素,對(duì)研究對(duì)象的入排標(biāo)準(zhǔn)加以限制是常用的控制混雜的方法,然而這樣會(huì)使得研究對(duì)象減少。優(yōu)點(diǎn)在于篩檢大量個(gè)體,只入選其中分,增加了研究對(duì)象的同質(zhì)性(homogeneity),提高了研究的內(nèi)部有效性,但是缺點(diǎn)是降低了研究效率,可能會(huì)影響結(jié)果的外推。而限制范圍如果太寬或不當(dāng),又可能有殘余混雜。?匹配:隊(duì)列研究中,匹配是暴露者與非暴露者在某因素上的匹配,一旦匹配,原則上即可完全控制匹配因素引起的混雜,不必在統(tǒng)計(jì)分析階段進(jìn)一步控制。而病例對(duì)照研究中,匹配后要按照匹配因素進(jìn)行分層分析,這是控制混雜的必要條件,并且,匹配并非直接控制混雜?分層分析:目的在于估計(jì)和控制混雜的影響,評(píng)估和描述效應(yīng)修正因子(modifier)不同水平分層中的研究結(jié)果。方法是將研究資料按照混雜因素來進(jìn)行分層。分層分析缺點(diǎn)在于:一能分析一種暴露-疾病關(guān)聯(lián);連續(xù)性變量轉(zhuǎn)變?yōu)殡x散性變量,丟失了一定程度的信息,可能造成殘余混雜;需要控制的混雜較多時(shí),分層則不是最明智的選擇。?多因素分析:將多個(gè)可能的混雜因素變量引入分析模型,可以是多元線性模型,logistic回歸,比例風(fēng)險(xiǎn)模型,因子分析等。要點(diǎn)在于在設(shè)計(jì)階段和數(shù)據(jù)采集階段將可能的混雜因素收?傾向性評(píng)分:在比較不同的治療方法對(duì)疾病的安全性和有效性評(píng)價(jià)的研究中,不同組別的患者往往沒有可比性,比如采取手術(shù)治療的患者和保守治療的患者在疾病研究程度、年齡和擔(dān)能力等方面會(huì)有較大的不同,這些因素都是評(píng)價(jià)手術(shù)或保守治療效果的重要的混雜因素,如果不能得到控制和調(diào)整,得到的結(jié)果往往是不準(zhǔn)確的或者是錯(cuò)誤的。為了同時(shí)控制多種雜因素在兩組人群分布的不平衡,可以采用使用傾向性評(píng)分的方法。傾向性評(píng)分是指在變量條件下,一個(gè)觀察對(duì)象可能接受某種處理(或暴露)因素的可能性。當(dāng)研究涉及到型會(huì)因共線性等問題,使得統(tǒng)計(jì)模型無法正常估計(jì)效應(yīng)。在觀察性研究中,通過對(duì)的分層分析、匹配、回歸分析,權(quán)重等方法,以期達(dá)到控制混雜的目的[14]。循證醫(yī)學(xué)金字塔證據(jù)分級(jí)(hierarchyofevidence)方法[15]最早誕生于治療研究領(lǐng)域,證據(jù)分級(jí)的概念提出來之初,將所有RCT的證據(jù)的證據(jù)等級(jí)或可信度低于RCT研究產(chǎn)生的證據(jù)。的心血管死亡率評(píng)估這一問題,最優(yōu)的證據(jù)來源療器械注冊(cè)審批指南》提出隨著真實(shí)世界臨床研究的增多,可以利用這些證據(jù)用來支持醫(yī)療器械的監(jiān)管決策[2]??梢奟WE甚至可以作為藥械審批的充。因此,把RWS的證據(jù)級(jí)別簡(jiǎn)單劃分在金字塔證據(jù)分不意味著通過RWS所產(chǎn)生的證據(jù)等級(jí)價(jià)應(yīng)該依據(jù)選取的研究設(shè)計(jì)與研究問題之間的相關(guān)性、研究質(zhì)量控制程度,以及選取的研究數(shù)據(jù)的可靠性進(jìn)行評(píng)價(jià)。本文借鑒循證醫(yī)學(xué)金字塔證據(jù)分級(jí)方法[16],將常見的RWS類的高低進(jìn)行排序(圖2同時(shí)建議研究者參照一系列影響證據(jù)等級(jí)的關(guān)鍵因素來客觀評(píng)估真實(shí)世界證據(jù)的證據(jù)級(jí)別,例如,以下表格(表4)中的關(guān)鍵點(diǎn)均是提高真實(shí)世界證據(jù)等圖2:常見真實(shí)世界研究的證據(jù)等級(jí)表3:提高真實(shí)世界研究證據(jù)等級(jí)的關(guān)鍵因素1有效數(shù)據(jù)的樣本量足夠2前瞻性設(shè)計(jì),治療/暴露因素和健康結(jié)局時(shí)間跨度合理3研究人群的選擇具有代表性4有明確合理的納入及排除標(biāo)準(zhǔn),保證研究的內(nèi)部有效性5對(duì)治療/暴露因素、健康結(jié)局和主要混雜因素評(píng)估準(zhǔn)確6控制和分析偏倚、混雜因素和數(shù)據(jù)缺失7數(shù)據(jù)收集的完整性高8數(shù)據(jù)來源可靠、準(zhǔn)確9有清晰的質(zhì)量控制10隨訪成功率高,對(duì)不完整數(shù)據(jù)或失訪病例進(jìn)行評(píng)估*1有效數(shù)據(jù)的樣本量足夠2前瞻性設(shè)計(jì),治療/暴露因素和健康結(jié)局時(shí)間跨度合理3研究人群的選擇具有代表性4有明確合理的納入及排除標(biāo)準(zhǔn),保證研究的內(nèi)部有效性5對(duì)治療/暴露因素、健康結(jié)局和主要混雜因素評(píng)估準(zhǔn)確6控制和分析偏倚、混雜因素和數(shù)據(jù)缺失7數(shù)據(jù)收集的完整性高8數(shù)據(jù)來源可靠、準(zhǔn)確9有清晰的質(zhì)量控制10隨訪成功率高,對(duì)不完整數(shù)據(jù)或失訪病例進(jìn)行評(píng)估*11使用統(tǒng)計(jì)分析方法適當(dāng)12對(duì)結(jié)果的分析客觀可靠13研究結(jié)論與研究問題相關(guān)性高14橫向比較既往同類研究15研究結(jié)果得到既往作用機(jī)制和動(dòng)物實(shí)驗(yàn)等證據(jù)支持16罕見疾病研究**注:*:針對(duì)前瞻性研究**:針對(duì)單純病例研究單純病例研究前瞻隊(duì)列研究回顧隊(duì)列研究病例對(duì)照研究橫斷面研究實(shí)用性臨床研究ClinicalOncology的一篇基于已指南流程中涉及的相關(guān)要素[17],對(duì)該研究進(jìn)行了如下分析。解釋研究的科學(xué)背景,及報(bào)告特定研究的理由介紹了影響甲狀腺癌死亡的主要信息,包括發(fā)病和死亡數(shù)據(jù),同時(shí)早期診斷甲狀腺癌和報(bào)告無臨床癥狀甲狀腺癌等。突出長(zhǎng)期生存的甲狀腺癌患者可能死于研究目標(biāo)非常明確具體,即估計(jì)甲狀腺癌患者死于甲狀腺癌、非甲狀腺癥、非癌癥的機(jī)率,估計(jì)甲狀腺癌的預(yù)后,為醫(yī)生提供適用于計(jì)算和預(yù)測(cè)描述研究環(huán)境、地點(diǎn)和時(shí)間點(diǎn),包括入排研究對(duì)象、暴露因素和并通過圖示的方式體現(xiàn)入排標(biāo)準(zhǔn),明確展示獲得最終研清楚地定義所有的結(jié)局、暴露、預(yù)測(cè)因子、潛在的混該研究涉及的變量較為全面(主要包括診斷年齡、性別、種族、病瘤侵犯、腫瘤大小、淋巴結(jié)累及放療,主要變量缺失的患者將被排除在外。)研究認(rèn)為死因記錄錯(cuò)誤造成的潛在錯(cuò)分可能是死因分析的局?jǐn)?shù)據(jù)均來自美國SEER數(shù)據(jù)庫,該數(shù)據(jù)庫樣本量大、有代表性、覆蓋人群廣、數(shù)據(jù)質(zhì)量較好。介紹這些變量的同時(shí),著重說明了暴露因素和結(jié)局變量,研究分析了人群選取的代表性、甲狀腺癌的診斷的客觀性等,在研究設(shè)計(jì)和變量測(cè)量階段均考慮了潛在的偏倚的影響;同時(shí),通過對(duì)競(jìng)爭(zhēng)風(fēng)險(xiǎn)的分析,控制有數(shù)據(jù)且樣本量足夠大且不增加額外負(fù)擔(dān),故未涉及樣本量計(jì)基于貝葉斯信息準(zhǔn)則的模型選擇技術(shù)構(gòu)建。為了減少偏倚,使用了外部隊(duì)列校對(duì)于入排標(biāo)準(zhǔn)中的關(guān)鍵變量缺失、未知等病例,做排除處理,不納入統(tǒng)計(jì)分析(a)報(bào)告未校正的估計(jì)值,如果適用,給出混雜因素校正后的估研究建立比例風(fēng)險(xiǎn)回歸模型,開展多因素分析,對(duì)混雜因素進(jìn)行控制的同時(shí)也估了未校正和校正后的結(jié)果,用于評(píng)估模型的可信度,并對(duì)三種死因的討論研究的局限性,包括潛在的偏倚或不準(zhǔn)確的來源。討論任何潛在偏指出選擇比例風(fēng)險(xiǎn)回歸模型的原因,與特定原因風(fēng)險(xiǎn)模型法的比較。由作者考慮死因的錯(cuò)分會(huì)影響結(jié)果的有效性,但是也強(qiáng)調(diào)依據(jù)之前的死亡患得益于足夠大的樣本量和代表性,并使用了驗(yàn)證隊(duì)列,得出21世紀(jì)是數(shù)據(jù)引導(dǎo)決策的時(shí)代。計(jì)算機(jī)技術(shù)支持的臨床實(shí)究奠定了基礎(chǔ)。在海量數(shù)據(jù)背景下,可基于現(xiàn)有數(shù)據(jù)庫中的數(shù)據(jù)進(jìn)行分析,來支持不同種類的業(yè)務(wù)。隨著機(jī)器學(xué)習(xí)的發(fā)展,圖像識(shí)別,文本識(shí)別,聲音識(shí)別等新技術(shù)可以快速幫助臨床數(shù)據(jù)結(jié)構(gòu)化,大數(shù)據(jù)分析方法,云儲(chǔ)存及云計(jì)算等技術(shù)的逐漸成熟以及區(qū)域鏈技術(shù)(blockchain)的提出真實(shí)世界證據(jù)作為一個(gè)較新的概念,還存在著一些有爭(zhēng)議的內(nèi)容,其相關(guān)技術(shù)方法也還有善,目前僅作為藥品和醫(yī)療器械審批決策的補(bǔ)充證據(jù)。然而,真實(shí)世界
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025年魔力不漏無柄喝水杯項(xiàng)目投資可行性研究分析報(bào)告
- 2025年度涵洞施工勞務(wù)分包合同材料供應(yīng)協(xié)議
- it培訓(xùn)申請(qǐng)書范文
- 撤訴執(zhí)行申請(qǐng)書
- 申請(qǐng)活動(dòng)申請(qǐng)書
- 2025年度智能交通系統(tǒng)建設(shè)項(xiàng)目雙包合同范本
- 2025年中國針閥行業(yè)市場(chǎng)發(fā)展前景及發(fā)展趨勢(shì)與投資戰(zhàn)略研究報(bào)告
- 2025年度互聯(lián)網(wǎng)平臺(tái)居間服務(wù)費(fèi)合同
- 戶外活動(dòng)申請(qǐng)書
- 2023-2029年中國防水耐火紙行業(yè)市場(chǎng)深度評(píng)估及投資戰(zhàn)略規(guī)劃報(bào)告
- 2025年中國山泉水市場(chǎng)前景預(yù)測(cè)及投資規(guī)劃研究報(bào)告
- 部編五下語文教學(xué)多元評(píng)價(jià)方案
- GB/T 18109-2024凍魚
- 《榜樣9》觀后感心得體會(huì)二
- 《西安交通大學(xué)》課件
- 小學(xué)二年級(jí)數(shù)學(xué)計(jì)算題共4165題
- 一氧化碳中毒培訓(xùn)
- 初二上冊(cè)好的數(shù)學(xué)試卷
- 廣東省潮州市2024-2025學(xué)年九年級(jí)上學(xué)期期末道德與法治試卷(含答案)
- 突發(fā)公共衛(wèi)生事件衛(wèi)生應(yīng)急
- 部編版2024-2025學(xué)年三年級(jí)上冊(cè)語文期末測(cè)試卷(含答案)
評(píng)論
0/150
提交評(píng)論