版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、目錄TOC o 1-3 h z u HYPERLINK l _Toc311197653 1.ORRACLEE 11gg RACC FORR ReddHat Linuux ASS5.5安安裝操作手手冊(cè) PAGEREF _Toc311197653 h 1 HYPERLINK l _Toc311197654 具體步驟 PAGEREF _Toc311197654 h 1 HYPERLINK l _Toc311197655 2.Orraclee10g RAC數(shù)數(shù)據(jù)庫簡(jiǎn)介介 PAGEREF _Toc311197655 h 2 HYPERLINK l _Toc311197656 2.1.oraccle111
2、g RAAC結(jié)構(gòu) PAGEREF _Toc311197656 h 2 HYPERLINK l _Toc311197657 3.安裝裝Redhhat AAS 5.5 PAGEREF _Toc311197657 h 4 HYPERLINK l _Toc311197658 4.RAAC系統(tǒng)相相關(guān)規(guī)劃 PAGEREF _Toc311197658 h 9 HYPERLINK l _Toc311197659 4.1.Redhhat LLinuxx Oraacle RAC配配置注意項(xiàng)項(xiàng) PAGEREF _Toc311197659 h 11 HYPERLINK l _Toc311197660 4.2.前期準(zhǔn)備
3、備 PAGEREF _Toc311197660 h 12 HYPERLINK l _Toc311197661 4.2.11.ORACCLE安裝裝依賴包 PAGEREF _Toc311197661 h 12 HYPERLINK l _Toc311197662 4.2.22.配置時(shí)鐘鐘同步 PAGEREF _Toc311197662 h 12 HYPERLINK l _Toc311197663 4.2.33.配置環(huán)境境變量 PAGEREF _Toc311197663 h 14 HYPERLINK l _Toc311197664 4.2.44.為用戶等等效性設(shè)置置SSH PAGEREF _Toc31
4、1197664 h 16 HYPERLINK l _Toc311197665 4.2.55.配置hanngcheeck-ttimerr模塊 PAGEREF _Toc311197665 h 19 HYPERLINK l _Toc311197666 4.2.66.連接ISCCSI硬盤盤 PAGEREF _Toc311197666 h 19 HYPERLINK l _Toc311197667 4.2.77.ASM配置置共享磁盤盤 PAGEREF _Toc311197667 h 19 HYPERLINK l _Toc311197668 5.安裝裝軟件 PAGEREF _Toc311197668 h 2
5、4 HYPERLINK l _Toc311197669 5.1.安裝CRSS軟件 PAGEREF _Toc311197669 h 24 HYPERLINK l _Toc311197670 5.2.安裝ORAACLE數(shù)數(shù)據(jù)庫 PAGEREF _Toc311197670 h 31 HYPERLINK l _Toc311197671 5.3.配置Oraacle Net PAGEREF _Toc311197671 h 36 HYPERLINK l _Toc311197672 5.4.建立實(shí)例例 PAGEREF _Toc311197672 h 40 HYPERLINK l _Toc311197673 5
6、.5.配置客戶戶端 PAGEREF _Toc311197673 h 49 HYPERLINK l _Toc311197674 5.6.測(cè)試RACC PAGEREF _Toc311197674 h 50 HYPERLINK l _Toc311197675 5.7.集群基本本命令 PAGEREF _Toc311197675 h 52 HYPERLINK l _Toc311197676 6.Liinux RAC 安裝問題 PAGEREF _Toc311197676 h 56 HYPERLINK l _Toc311197677 6.1.節(jié)點(diǎn)聯(lián)通通性問題 PAGEREF _Toc311197677 h
7、56 HYPERLINK l _Toc311197678 6.2.設(shè)備權(quán)限限問題 PAGEREF _Toc311197678 h 56 HYPERLINK l _Toc311197679 6.3.文件夾權(quán)權(quán)限問題 PAGEREF _Toc311197679 h 57 HYPERLINK l _Toc31111976880 6.4.登錄oraacle用用戶時(shí)登錄錄界面報(bào)錯(cuò)錯(cuò) PAGEREF _Toc311197680 h 57 HYPERLINK l _Toc311197681 6.5.無法使用用sudoo命令 PAGEREF _Toc311197681 h 57 HYPERLINK l _To
8、c311197682 6.6.安裝失敗敗后,注意意事項(xiàng) PAGEREF _Toc311197682 h 58 HYPERLINK l _Toc31111976883 6.7.創(chuàng)建ASMM實(shí)例,找找不到磁盤盤 PAGEREF _Toc311197683 h 58 HYPERLINK l _Toc311197684 6.8.磁盤無法法掛載,報(bào)報(bào)ORA-125223錯(cuò)誤 PAGEREF _Toc311197684 h 58ORACLLE 11g RAAC FOR RedHHat LLinuxx AS55.5安裝操操作手冊(cè)文檔摘要本文檔主要要講述在rredhaat liinux as 55.5上安安裝
9、oraacle 11g RRAC的安安裝步驟與與方法,本本手冊(cè)所講講述的內(nèi)容容已經(jīng)成功功實(shí)施過,并并在健康運(yùn)運(yùn)行。本文檔講述述的內(nèi)容同同樣適合rredhaat liinux與與ORACCLE 111G的其其他版本,但但是可能在在細(xì)節(jié)上有有出入該文檔將盡盡量的詳細(xì)細(xì),但是在在使用本文文檔前,仍仍然建議必必須具有一一定的ORRACLEE和LINNUX基礎(chǔ)礎(chǔ)知識(shí)第一次撰寫寫如此復(fù)雜雜的操作指指南,錯(cuò)誤誤疏漏之處處難免,敬敬請(qǐng)批評(píng)指指正具體步驟本手冊(cè)在以以下環(huán)境中中試驗(yàn)安裝裝成功:1、IBMM服務(wù)器(64位 雙網(wǎng)卡)2臺(tái),網(wǎng)網(wǎng)絡(luò)存儲(chǔ)硬硬盤已做好好raidd 52、光纖盤盤陣、光纖纖交換機(jī)3、服務(wù)器器安
10、裝 rredhaat ass5.5,本本次安裝需需要的軟件件:1、linnux_xx86_111gR11_cluusterrwaree.zipp2、linnux_111gR11_dattabasse_10013.zzip3、oraacleaasm-22.6.118-1994.ell5PAEE-2.00.5-11.el55.i6886.rppm4、oraacleaasmliib-2.0.4-1.ell5.i3386.rrpm5、oraacleaasm-ssuppoort-22.1.77-1.eel5.ii386.rpm6、isccsi包(DVD版版下的Seerverr有)下載地址:1、2 HYP
11、ERLINK /technetwork/database/enterprise-edition/downloads/index.html hhttp:/m/tecchnettworkk/dattabasse/ennterpprisee-ediitionn/dowwnloaads/iindexx.htmml3、4、55 HYPERLINK /technetwork/server-storage/linux/downloads/rhel5-084877.html htttp:/www.oraccle.ccom/ttechnnetwoork/sserveer-sttoragge/liinux/dow
12、nnloadds/rhhel5-0848877.hhtml本手冊(cè)的根根本目標(biāo)是是安裝并實(shí)實(shí)現(xiàn)ASMM+RACC,安裝過過程中以安安裝實(shí)際情情況為準(zhǔn),并并參考網(wǎng)上上很多實(shí)施施方案、OOTN網(wǎng)站站等大量文文檔,力爭(zhēng)爭(zhēng)把安裝中中遇到的問問題及解決決方法完整整的表達(dá)出出來。本文檔由 Oraccle100g RAAC數(shù)據(jù)庫庫簡(jiǎn)介、安安裝Reddhat as5.5、針對(duì)OOraclle配置rredhaat、ASSM配置共共享磁盤、安裝配置置Oraccle RRAC、創(chuàng)創(chuàng)建和刪除除數(shù)據(jù)庫六六部分組成成。注:以下部部分如果沒沒有特別說說明,則要要求在每個(gè)個(gè)節(jié)點(diǎn)分別別執(zhí)行Oraclle10gg RACC數(shù)據(jù)庫簡(jiǎn)
13、簡(jiǎn)介oraclle11g RACC結(jié)構(gòu)下圖顯示了了 Oraacle RAC 11g 配置的的主要組件件。 集群群中的節(jié)點(diǎn)點(diǎn)通常是單單獨(dú)的服務(wù)務(wù)器(主機(jī)機(jī)), 本本文中,兩兩個(gè)節(jié)點(diǎn)即即是兩臺(tái)ss48000服務(wù)器。根據(jù)集群群規(guī)模的大大小,可以以擴(kuò)展到更更多節(jié)點(diǎn)。硬件在硬件級(jí)別別上,RAAC 集群群中的各節(jié)節(jié)點(diǎn)共享三三種功能:1.對(duì)共享享磁盤存儲(chǔ)儲(chǔ)的訪問2.與專用用網(wǎng)絡(luò)的連連接3.對(duì)公共共網(wǎng)絡(luò)的訪訪問。共享磁盤存存儲(chǔ)Oraclle RAAC 依賴賴于一個(gè)共共享磁盤體體系結(jié)構(gòu)。 數(shù)據(jù)庫庫文件、聯(lián)聯(lián)機(jī)重做日日志和數(shù)據(jù)據(jù)庫的控制制文件必須須都能為集集群中的每每個(gè)節(jié)點(diǎn)所所訪問。 共享磁盤盤還存儲(chǔ) Oracc
14、le CClustter RRegisstry 和 Vootingg Dissk(稍后后討論)。 配置共共享存儲(chǔ)有有多種方法法,包括直直接連接磁磁盤(通常常是使用銅銅纜或光纖纖的 SCCSI)、存儲(chǔ)區(qū)域域網(wǎng) (SSAN) 和網(wǎng)絡(luò)連連接存儲(chǔ) (NASS)。專用網(wǎng)絡(luò)每個(gè)集群節(jié)節(jié)點(diǎn)通過專專用高速網(wǎng)網(wǎng)絡(luò)連接到到所有其他他節(jié)點(diǎn),這這種專用高高速網(wǎng)絡(luò)也也稱為集群群互聯(lián)或高高速互聯(lián) (HSII)。 OOraclle 的 Cachhe Fuusionn 技術(shù)使使用這種網(wǎng)網(wǎng)絡(luò)將每個(gè)個(gè)主機(jī)的物物理內(nèi)存 (RAMM) 有效效地組合成成一個(gè)高速速緩存。 Oraccle CCachee Fussion 通過在專專用網(wǎng)絡(luò)
15、上上傳輸某個(gè)個(gè) Oraacle 實(shí)例高速速緩存中存存儲(chǔ)的數(shù)據(jù)據(jù)允許其他他任何實(shí)例例訪問這些些數(shù)據(jù)。 它還通過過在集群節(jié)節(jié)點(diǎn)中傳輸輸鎖定和其其他同步信信息保持?jǐn)?shù)數(shù)據(jù)完整性性和高速緩緩存一致性性。專用網(wǎng)絡(luò)通通常是用千千兆以太網(wǎng)網(wǎng)構(gòu)建的,但但是對(duì)于高高容量的環(huán)環(huán)境,很多多廠商提供供了專門為為 Oraacle RAC 設(shè)計(jì)的低低延遲、高高帶寬的專專有解決方方案。 LLinuxx 還提供供一種將多多個(gè)物理 NIC 綁定為一一個(gè)虛擬 NIC 的方法(此此處不涉及及)來增加加帶寬和提提高可用性性。公共網(wǎng)絡(luò)為維持高可可用性,為為每個(gè)集群群節(jié)點(diǎn)分配配了一個(gè)虛虛擬 IPP 地址 (VIPP)。 如如果主機(jī)發(fā)發(fā)生故
16、障,則則可以將故故障節(jié)點(diǎn)的的 IP 地址重新新分配給一一個(gè)可用節(jié)節(jié)點(diǎn),從而而允許應(yīng)用用程序通過過相同的 IP 地地址繼續(xù)訪訪問數(shù)據(jù)庫庫。Oraclle 集群群就緒服務(wù)務(wù)(CRSS)Oraclle RAAC 11g 引進(jìn)了了 Oraacle 集群就緒緒服務(wù) (CRS) 一組用用于集群環(huán)環(huán)境的與平平臺(tái)無關(guān)的的系統(tǒng)服務(wù)務(wù)。 在 RAC 和 Orraclee 并行服服務(wù)器先前前版本中,OOraclle 依靠靠廠商提供供的集群管管理軟件來來提供這些些服務(wù)。 雖然 CCRS 與與廠商供應(yīng)應(yīng)的集群件件協(xié)同工作作,但 OOraclle RAAC 100g 所需需組件只是是 CRSS。 實(shí)際際上,必須須在安裝
17、RAC 之前安裝裝 CRSS。Oraclle RAAC 軟件件Oraclle RAAC 11g 軟件是是 RACC 數(shù)據(jù)庫庫的核心,每每個(gè)集群節(jié)節(jié)點(diǎn)上都必必須安裝。 幸運(yùn)的的是,Orraclee Uniiverssal IInstaallerr (OUUI) 可可以完成在在每個(gè)節(jié)點(diǎn)點(diǎn)上安裝 RAC 軟件的大大部分工作作。 您只只需在一個(gè)個(gè)節(jié)點(diǎn)上安安裝 RAAC OUII 會(huì)完成成其余的工工作。Oraclle 自動(dòng)動(dòng)存儲(chǔ)管理理 (ASSM)ASM 是是 Oraacle 數(shù)據(jù)庫 11g 中的一一個(gè)新特性性,它以一一種與平臺(tái)臺(tái)無關(guān)的方方式提供文文件系統(tǒng)服服務(wù)、邏輯輯容量管理理器和軟件件 RAIID。
18、Orraclee ASMM 可以條條帶化和鏡鏡像磁盤,從從而實(shí)現(xiàn)了了在數(shù)據(jù)庫庫被加載的的情況下添添加或移除除磁盤以及及自動(dòng)平衡衡 I/OO 以刪除除“熱點(diǎn)”。它還支支持直接和和異步的 I/O,并并使用 OOraclle9i 中引入的的 Oraacle 數(shù)據(jù)管理理器 APPI(簡(jiǎn)化化的 I/O 系統(tǒng)統(tǒng)調(diào)用接口口)。Oraclle ASSM 不是是通用的文文件系統(tǒng),只只能用于 Oraccle 數(shù)數(shù)據(jù)文件、重做日志志、控制文文件和 RRMAN 快速恢復(fù)復(fù)區(qū)。ASSM 中的的文件既可可以由數(shù)據(jù)據(jù)庫自動(dòng)創(chuàng)創(chuàng)建和命名名(使用 Oraccle 管管理文件特特性),也也可以由 DBA 手動(dòng)創(chuàng)建建和命名。由于操
19、作作系統(tǒng)無法法訪問 AASM 中中存儲(chǔ)的文文件,因此此對(duì)使用 ASM 文件的數(shù)數(shù)據(jù)庫執(zhí)行行備份和恢恢復(fù)操作的的唯一途徑徑就是使用用恢復(fù)管理理器 (RRMAN)。ASM 作作為單獨(dú)的的 Oraacle 實(shí)例實(shí)施施,只有它它在運(yùn)行時(shí)時(shí)其他數(shù)據(jù)據(jù)庫才能訪訪問它。AASM 需需要的內(nèi)存存不多: 對(duì)大部分分系統(tǒng)來說說只需 664MB。 在 OOraclle RAAC 環(huán)境境中,ASSM 實(shí)例例必須運(yùn)行行在每個(gè)集集群節(jié)點(diǎn)上上。 安裝Reedhatt AS 5.5本文檔實(shí)例例安裝在IIBM XX36500 M3服服務(wù)器上,雙雙網(wǎng)卡、每每個(gè)節(jié)點(diǎn)通通過光纖交交換機(jī)連接接兩個(gè)盤陣陣。安裝過過程中最好好把連接節(jié)節(jié)點(diǎn)
20、和盤陣陣的光纖拔拔下;或者者如果不拔拔下光纖,安安裝過程中中分區(qū)時(shí)只只選擇本機(jī)機(jī)硬盤,不不要選擇盤盤陣。假設(shè)服務(wù)器器全新安裝裝redhhat,并并且服務(wù)器器為oraacle專專用。Oraclle 11g 經(jīng)認(rèn)證證可以在不不需要更新新的情況下下運(yùn)行 RRedhaat ASS 5.5的基本版版本。(由由于某些原原因,服務(wù)務(wù)器無法用用光驅(qū)引導(dǎo)導(dǎo)安裝Reedhatt AS 5.5,所有采用用以下方法法安裝) 首首先使用UUltraaISO將將Redhhat aas 5.5寫入U(xiǎn)U盤,開機(jī)機(jī)的時(shí)候選選擇從U盤盤啟動(dòng),按按照提示繼繼續(xù) 啟啟動(dòng)屏幕上上出現(xiàn)時(shí)在在底部顯示示 booot:。選選擇 Ennter
21、,從從控制臺(tái)上上執(zhí)行圖形形安裝。(對(duì)對(duì)于其他安安裝方法和和選項(xiàng),請(qǐng)請(qǐng)參閱 RRed HHat 安安裝指南。)如圖33-1圖 3-11安裝程序掃掃描硬件,短短暫顯示 Red Hat 閃屏,然然后開始顯顯示一系列列屏幕提示示。選擇語言選擇簡(jiǎn)體中中文。配置鍵盤接受默認(rèn)值值。 當(dāng)當(dāng)出現(xiàn)選擇擇安裝介質(zhì)質(zhì)時(shí),將光光驅(qū)插上去去,(一定定要將U盤盤拔下,不不然以后都都得插上UU盤才能啟啟動(dòng)),如如圖3-22圖 3-22歡迎屏幕單單擊下一步步,如圖33-3.配置鼠標(biāo)標(biāo)接受默認(rèn)值值。安裝類型選擇 Cuustomm。設(shè)置磁盤分分區(qū)本文不介紹紹磁盤分區(qū)區(qū)的詳細(xì)方方法,而是是假設(shè)您熟熟悉磁盤分分區(qū)方法交換分區(qū) 將此分分
22、區(qū)大小至至少設(shè)置為為系統(tǒng) RRAM 的的兩倍,但但32位系系統(tǒng)不要超超過 2GGB。如果果需要大于于 2GBB 的交換換空間,則則創(chuàng)建多個(gè)個(gè)交換分區(qū)區(qū)。如圖33-4圖 3-44配置啟動(dòng)加加載程序接受默認(rèn)值值。配置網(wǎng)絡(luò)此時(shí)配置兩兩個(gè)網(wǎng)卡,用用規(guī)劃好的的兩個(gè)地址址,一個(gè)公公網(wǎng)地址,一一個(gè)私有地地址。使用靜態(tài) IP 地地址配置數(shù)數(shù)據(jù)庫服務(wù)務(wù)器。單擊擊 Ediit。出現(xiàn)一個(gè)彈彈出窗口。取消選中中 Connfiguure uusingg DHCCP 復(fù)選選框,并輸輸入服務(wù)器器的 IPP 地址和和網(wǎng)絡(luò)掩碼碼。確保選選中 Acctivaate oon booot,然然后單擊 OK。在 Hosstnamme
23、框中中,選擇 manuuallyy 并輸入入主機(jī)名ddbracc1集群依依次類推。在 Misscelllaneoous SSettiings 框中,輸輸入其他網(wǎng)網(wǎng)絡(luò)設(shè)置。如圖3-5圖 3-55配置防火墻墻本次將不配配置防火墻墻。選擇 No ffirewwall。圖 3-66其他語言支支持接受默認(rèn)值值。選擇時(shí)區(qū)選擇適合您您區(qū)域的時(shí)時(shí)間設(shè)置。將系統(tǒng)時(shí)時(shí)鐘設(shè)置為為 UTCC 對(duì)服務(wù)務(wù)器而言通通常是一個(gè)個(gè)很好的做做法。為此此,單擊 Systtem cclockk usees UTTC。SELinnux(SSecurrity Enhaancedd Linnux),如圖3-7 圖 3-77設(shè)置 Rooot
24、 口口令輸入 rooot 的的口令,并并再次輸入入以進(jìn)行確確認(rèn)。選擇程序包包組最下面選擇擇全選。單擊 下一一步 繼續(xù)續(xù)操作。準(zhǔn)備安裝單擊 下一一步。安裝程序包包軟件將被復(fù)復(fù)制到硬盤盤并被安裝裝。根據(jù)提提示更改光光盤,然后后在安裝完完成時(shí)單擊擊 下一步步。配置圖形界界面 (XX)接受默認(rèn)值值,除非安安裝程序無無法識(shí)別您您的視頻卡卡。如果您您的視頻卡卡無法被識(shí)識(shí)別,則將將無法繼續(xù)續(xù)操作。配置監(jiān)視器器如果安裝程程序正確識(shí)識(shí)別了您的的監(jiān)視器,則則接受默認(rèn)認(rèn)值。否則則,從列表表中選擇一一個(gè)兼容的的監(jiān)視器。定制圖形配配置接受默認(rèn)值值。從系統(tǒng)中取取出安裝介介質(zhì),然后后單擊 下下一步。系統(tǒng)自動(dòng)重重新啟動(dòng)并并顯
25、示一個(gè)個(gè)新的歡迎迎屏幕。若無特別說說明,“$”提示符均均表示在ooraclle用戶下下執(zhí)行,“#”提示符均均表示在rroot用用戶下執(zhí)行行RAC系統(tǒng)統(tǒng)相關(guān)規(guī)劃劃服務(wù)器名項(xiàng)目名稱 RAC節(jié)點(diǎn)點(diǎn)1RAC節(jié)點(diǎn)點(diǎn)2硬件型號(hào)IBM服務(wù)務(wù)器IBM服務(wù)務(wù)器操作系統(tǒng)Redhaat ass 5.55 (32位)Redhaat ass 5.55 (32位)服務(wù)器主機(jī)機(jī)名DATA-HOSTT01DATA-HOSTT02IP地址((ethh0))語言環(huán)境中文/英文文中文/英文文域名服務(wù)方方式無無時(shí)區(qū)中國(guó)中國(guó)安裝方式安裝全部安安裝包安裝全部安安裝包內(nèi)置硬盤容量146G146G數(shù)量1(RAIID0)1(RAIID0)系統(tǒng)
26、分區(qū)物理路徑/30G30GSwap16G16G/homee50G50G/tmp5G5G/usr5G5G/opt100G100G系統(tǒng)用戶RootOraclleRootOraclle磁盤陣列柜柜型號(hào)每硬盤容量量1T總?cè)萘?4TRAID名名稱RAID 5磁盤分區(qū)OCR(oraccle集群群注冊(cè)表)/dev/raw/raw11 /dev/sdb11 1000MM(主分區(qū)區(qū))表決磁盤(votiing ddisk)/dev/raw/raw22 /dev/sdb22 10000M(主分分區(qū))ASM/dev/sdb33 6T ASM卷名名:FDBB圖3-1操操作系統(tǒng)安安裝規(guī)劃項(xiàng)目DB1DB2機(jī)器名(HHost
27、NName)DATA-HOSTT01DATA-HOSTT02公有ip(Publlic)192.1168.22.2/DATAA-HOSST01192.1168.22.4/DATAA-HOSST02心跳/私有有ip(PPrivaate)2/ DATAA-HOSST01-privv3/ DATAA-HOSST02-priivVIP(僅僅配置在hhostss中)192.1168.22.3/ DATAA-HOSST01-vip192.1168.22.5/ DATAA-HOSST02-vipOraclle Seervicce Naamefdb1fdb2ORA_CCRS_HHOME/homee/oraacl
28、e/oraccle/pproduuct/111.1.0/crrs/homee/oraacle/oraccle/prodduct/11.1.0/crrsORACLLE_HOOME/homee/oraacle/oraccle/pproduuct/111.1.0/db_11/homee/oraacle/oraccle/pproduuct/111.1.0/db_11ORACLLE_BAASE/homee/oraacle/oraccle/homee/oraacle/oraccle圖3-2 Oraclle安裝配配置項(xiàng)目描述OCR磁盤盤/dev/raw/raw11 /dev/sdb11 10000M表決磁盤
29、/dev/raw/raw22 /dev/sdb22 10000MASM卷/dev/sdb3 6T Asm卷名名:FDBBOraclle安裝目目錄/homee/oraacle/oraccle圖3-3存存儲(chǔ)分配表表圖3-4 RAC體體系Redhaat Liinux Oraccle RRAC配置置注意項(xiàng)集群中各節(jié)節(jié)點(diǎn)的時(shí)間間應(yīng)盡量一一致不要給公共共網(wǎng)卡指定定192.168.*.*和和10.*.*.*這樣的私私有IP地地址公共網(wǎng)絡(luò)必必須使用各各個(gè)節(jié)點(diǎn)的的同一個(gè)網(wǎng)網(wǎng)卡每個(gè)節(jié)點(diǎn)需需要一個(gè)VVIP,VVIP必須須和公共網(wǎng)網(wǎng)絡(luò)在同一一個(gè)子網(wǎng)中中在有些系統(tǒng)統(tǒng)中(如SSolarris),需需要給VIIP指定默默認(rèn)
30、網(wǎng)關(guān)對(duì)硬盤分區(qū)區(qū)時(shí),要保保證在所有有節(jié)點(diǎn)上都都能看到分分區(qū)信息要為OCRR設(shè)備和vvote設(shè)設(shè)備指定正正確的權(quán)限限和屬主要為公共IIP、私有有IP和VVIP指定定主機(jī)名,主主機(jī)名不能能包含大寫寫字母和_,但是可可以包含減減號(hào)如果配置失失敗,應(yīng)該該把剛才的的配置結(jié)果果全部刪除除,從頭再再來在安裝cllusteerwarre時(shí),需需要設(shè)置環(huán)環(huán)境變量OORCLEE_HOMME。在安安裝Oraacle和和RAC時(shí)時(shí),需要重重新指定這這個(gè)變量,而而且不能指指定同一個(gè)個(gè)目錄正確配置節(jié)節(jié)點(diǎn)間的信信任關(guān)系(SSH) 前期準(zhǔn)備備ORACLLE安裝依依賴包一、安裝操操作系統(tǒng)Swap不不能低于22G二、關(guān)閉ssel
31、innux安全全程序三、選擇提提供的程序序四、安裝rrpm包(DVD版版,全在盤盤上的Seerverr目錄下)(具體的的包名,忘忘了,僅給給出包前面面的名稱,會(huì)會(huì)玩Linnux的人人,應(yīng)該知知道怎么做做的) 1. conppat-llibsttdc+-3 2. comppat-ggcc-334 3.ggcc-44 4.llibXpp-1 5.oopenmmotiff-2 6.ccompaat-dbb-4 7. unixxODBCC-這邊會(huì)有依依賴包,在在Servver目錄錄下都可以以找到,請(qǐng)請(qǐng)耐心點(diǎn)配置時(shí)鐘同同步所有節(jié)點(diǎn)的的時(shí)間必須須同步,這這通常是通通過配置NNTP服務(wù)務(wù)實(shí)現(xiàn)的。在集群中中一
32、某一節(jié)節(jié)點(diǎn)作為時(shí)時(shí)間服務(wù)器器,NTPP服務(wù)只需需要占用很很少的系統(tǒng)統(tǒng)資源。整整理以第一一個(gè)節(jié)點(diǎn)(DATAA-HOSST01)為時(shí)間服服務(wù)器,DDATA-HOSTT02向它它同步,其其配置方法法如下:編輯DATTA-HOOST011的/ettc/nttp.coonf文件件,編輯后后的內(nèi)容如如下:serveer 1127.1127.11.0 #注注意不是1127.00.0.11fudgee 1127.1127.11.0 sttartuum 111drifttfilee /var/lib/ntp/drifftbroaddcasttdelaay 0.0008編輯DATTA-HOOST022的/ettc
33、/nttp.coonf文件件,編輯后后的內(nèi)容如如下:serveer 1992.1668.2.2 preffer #IIP以第一一節(jié)點(diǎn)的ppubliic IPP為準(zhǔn)drifttfilee /vat/lib/ntp/drifftbroaddcasttdelaay 0.0008配置完成后后,啟動(dòng)NNTP服務(wù)務(wù)root用用戶下執(zhí)行行/etcc/iniit.d/ntpdd staart1、建立組組及用戶grouppadd -gg 7000 dbauseraadd -u 6000 -gg ddba oraaclepasswwd ooraclle #設(shè)置ooraclle用戶密密碼注意在這里里,每個(gè)節(jié)節(jié)點(diǎn)的o
34、rraclee用戶IDD,DBAA組ID必必須一致,其其他使用默默認(rèn)值,同同時(shí)創(chuàng)建完完畢后在每每個(gè)節(jié)點(diǎn)執(zhí)執(zhí)行如下命命令#chowwn R orraclee:dbaa /hoome/ooraclle修改每個(gè)節(jié)節(jié)點(diǎn)系統(tǒng)內(nèi)內(nèi)核參數(shù)./etcc/syssctl.conff,#vi /etc/syscctl.cconfkernnel.sshmmnni = 40966kerneel.seem = 250 320000 1000 1228fs.fiile-mmax = 655536net.iipv4.ip_llocall_porrt_raange = 10024 6650000net.ccore.rmemm
35、_deffaultt = 110485576net.ccore.rmemm_maxx = 110485576net.ccore.wmemm_deffaultt = 22621444net.ccore.wmemm_maxx = 22621444/sbinn/syssctl p使其生效效配置環(huán)境變變量據(jù)oraccle的安安裝文檔要要求,CRRS的目錄錄最好不是是ORACCLE_BBASE的的子目錄,因因?yàn)榘惭b過過程中會(huì)改改變CRSS的父目錄錄的權(quán)限,這這會(huì)影響OORACLLE的安裝裝。在按以以上要求生生成對(duì)應(yīng)目目錄之前,需需檢查所在在磁盤的空空間是否滿滿足安裝要要求,確定定之后生成成目錄,并并將相
36、關(guān)環(huán)環(huán)境變量設(shè)設(shè)置在orraclee用戶的pprofiile中(ooraclle 用戶下vvi .bassh_prrofille)。設(shè)置每個(gè)節(jié)節(jié)點(diǎn)ORAACLE用用戶環(huán)境變變量(修改改ORACCLE的.bashh_proofilee),該文件如下下:# .baash_pprofiile# Gett thee aliiasess andd funnctioonsif -f /.baashrcc ; thenn. /.basshrcfi# Useer sppeciffic eenvirronmeent aand sstarttup pprogrramsexporrt TMMP=/ttmpexpor
37、rt TMMPDIRR=$TMMPexporrt ORRACLEE_BASSE=/hhome/oraccle/ooraclle ooraclle安裝目目錄 /hhome/oraccle/ooraclle/prroducct/11.1.0/dbb_1exporrt ORRACLEE_HOMME=$OORACLLE_BAASE/pproduuct/111.1.0/dbb_1 ooraclle安裝目目錄exporrt ORRA_CRRS_HOOME=$ORACCLE_BBASE/prodduct/11.1.0/crrs rrac 安安裝目錄 /homme/orraclee/oraacle/prodd
38、uct/11.1.0/ccrsexporrt ORRACLEE_SIDD=fdbb1 SIDD exporrt ORRACLEE_TERRM=xttermexporrt PAATH=/usr/sbinn:$PAATHexporrt PAATH=$ORACCLE_BBASE/prodduct/10.22.0/ccrs/bbin:$ORACCLE_HHOME/bin:$PATTHLD_LIIBRARRY_PAATH=$ORACCLE_HHOME/lib:/libb:/ussr/liib; eexporrt LDD_LIBBRARYY_PATTHexporrt NLLS_LAANG=AAMERIIC
39、AN_AMERRICA.AL322UTF88PATH=$PATTH:$HHOME/binexporrt PAATH注意:在節(jié)節(jié)點(diǎn)DATTA-HOOST022上,ORAACLE_SID應(yīng)應(yīng)該變?yōu)閒fdb2 ,后后面安裝ccrs會(huì)報(bào)報(bào)錯(cuò),手動(dòng)動(dòng)執(zhí)行 eexporrt ORRACLEE_HOMME=$OORACLLE_BAASE/pproduuct/111.1.0/dbb_1 配置每個(gè)節(jié)節(jié)點(diǎn)的/eetc/hhostss文件#vi /etc/hostts然后修改里里面的內(nèi)容容為如下# Do not remoove tthe ffolloowingg linne, oor vaariouus prrog
40、raams# thaat reequirre neetworrk fuunctiionallity willl faiil.127.00.0.11locaalhosst.loocalddomaiin llocallhostt:1locaalhosst6.llocalldomaain6 llocallhostt6192.1168.22.2 DAATA-HHOST001192.1168.22.3 DAATA-HHOST001-viip2 DAATA-HHOST001-prriv192.1168.22.4 DAATA-HHOST002192.1168.22.5 DAATA-HHOST002-vipp
41、3 DAATA-HHOST002-priiv 2臺(tái)主主機(jī)hossts文件件最好一樣樣,不然節(jié)節(jié)點(diǎn)2的rrac服務(wù)務(wù)起不來。虛擬地址址可以隨便便起一個(gè)(保保證同puublicc adddresss一個(gè)網(wǎng)段段),在安安裝RACC的時(shí)候,vvipcaa會(huì)自動(dòng)將將虛擬地址址綁定在公公共網(wǎng)卡上上的。注意:確保保在每個(gè)節(jié)節(jié)點(diǎn)上/eetc/hhostss文件的回回送地址中中不包含節(jié)節(jié)點(diǎn)名(dbseerverr1 或 dbseerverr2)。如果機(jī)機(jī)器名出現(xiàn)現(xiàn)在回送地地址條目中中,如下所所示: 127.00.0.11 JMRRAC1 locaalhosst.loocalddomaiin loocalhhos
42、t需要將其如如下刪除: 127.00.0.11 loccalhoost.llocalldomaain llocallhostt編輯/ettc/seecuriity/llimitts.coonf文件件,添加如如下內(nèi)容Oracllesofttnprooc20477Oraclleharddnprooc163884Oracllesofttnofiile10244Oraclleharddnofiile655336為用戶等效效性設(shè)置SSSH在安裝 OOraclle RAAC 111g 期間,OOUI 需需要把文件件復(fù)制到集集群中的其其他主機(jī)上上并在其上上執(zhí)行程序序。 為了了允許 OOUI 完完成此任務(wù)務(wù),
43、必須配配置 SSSH 以啟啟用用戶等等效性。 用 SSSH 建立立用戶等效效性就提供供了一種在在集群中其其他主機(jī)上上復(fù)制文件件和執(zhí)行程程序時(shí)不需需要口令提提示的安全全方式。第一步是生生成 SSSH 的公公共密鑰和和專用密鑰鑰。 SSSH 協(xié)議議有兩個(gè)版版本;版本本 1 使使用 RSSA,版本本 2 使使用 DSSA,因此此我們將創(chuàng)創(chuàng)建這兩種種類型的密密鑰,以確確保 SSSH 能夠夠使用任一一版本。 ssh-keyggen 程程序?qū)⒏鶕?jù)據(jù)傳遞給它它的參數(shù)生生成任一類類型的公共共密鑰和專專用密鑰。當(dāng)您運(yùn)行 ssh-keyggen 時(shí)時(shí),將提示示您輸入一一個(gè)用于保保存密鑰的的位置。 當(dāng)提示時(shí)時(shí)只需按
44、 Enteer 接受受默認(rèn)值。 隨后將將提示您輸輸入一個(gè)口口令短語。 輸入您您能記住的的口令,然然后再次輸輸入該口令令進(jìn)行確認(rèn)認(rèn)。 當(dāng)您您完成以下下步驟后,在在 /.ssh 目錄中將將會(huì)有四個(gè)個(gè)文件: id_rrsa、iid_rssa.puub、idd_dsaa 和 iid_dssa.puub。 iid_rssa 和 id_ddsa 文文件是您的的專用密鑰鑰, idd_rsaa.pubb 和 iid_dssa.puub 文件件是您的公公共密鑰,必必須將其復(fù)復(fù)制到集群群中其他每每個(gè)主機(jī)上上。在每個(gè)主機(jī)機(jī)上,以 oraccle 用用戶身份登登錄:$ mkddir /.sssh$ chmmod 77
45、55 /.sssh$ /ussr/biin/sssh-keeygenn -t rsaGenerratinng puublicc/priivatee rsaa keyy paiir.Enterr fille inn whiich tto saave tthe kkey (/homme/orraclee/.sssh/idd_rsaa):Enterr passsphrrase (emppty ffor nno paassphhrasee):Enterr samme paassphhrasee agaain:Your idenntifiicatiion hhas bbeen saveed inn /h
46、oome/ooraclle/.sssh/iid_rssa.Your publlic kkey hhas bbeen saveed inn /hoome/ooraclle/.sssh/iid_rssa.puub.The kkey ffingeerpriint iis:4b:dff:76:77:772:baa:31:cd:cc4:e22:0c:e66:ef:30:ffc:377 oraacle注意:本例例中此處一一路按回車車選擇默認(rèn)認(rèn)$ /ussr/biin/sssh-keeygenn -t dsaGenerratinng puublicc/priivatee dsaa keyy paiir.En
47、terr fille inn whiich tto saave tthe kkey (/homme/orraclee/.sssh/idd_dsaa):Enterr passsphrrase (emppty ffor nno paassphhrasee):Enterr samme paassphhrasee agaain:Your idenntifiicatiion hhas bbeen saveed inn /hoome/ooraclle/.sssh/iid_dssa.Your publlic kkey hhas bbeen saveed inn /hoome/ooraclle/.sssh/i
48、id_dssa.puub.The kkey ffingeerpriint iis:af:377:ca:69:33c:a00:08:97:ccb:9cc:0b:b0:220:700:e3:4a HYPERLINK mailto:oracle oraccledds1.ooradeemo.oorg注意:本例例中此處一一路按回車車選擇默認(rèn)認(rèn)$ catt *.pubb /.sshh/autthoriized_keyss現(xiàn)在,必須須將每個(gè)主主機(jī)上的公公共密鑰文文件 idd_rsaa.pubb 和 iid_dssa.puub 的內(nèi)內(nèi)容復(fù)制到到其他每個(gè)個(gè)主機(jī)的 /.sssh/aauthoorizeed_kee
49、ys 文文件中。 使用 sssh 將將每個(gè)文件件的內(nèi)容復(fù)復(fù)制到 /.sssh/auuthorrizedd_keyys 文件件。 請(qǐng)注注意,當(dāng)您您使用 sssh 第第一次訪問問遠(yuǎn)程主機(jī)機(jī)時(shí),其 RSA 密鑰將是是未知的,從從而將提示示您確認(rèn)是是否希望連連接該主機(jī)機(jī)。 SSSH 將記記錄該遠(yuǎn)程程主機(jī)的 RSA 密鑰,并并在以后連連接該主機(jī)機(jī)時(shí)不再做做出相關(guān)提提示。只需在第一一個(gè)主機(jī)上上,以 ooraclle 用戶戶身份登錄錄(復(fù)制本本地帳戶的的密鑰,以以便連接本本地主機(jī)的的 sshh 能夠起起作用):(如果您要要剪切和粘粘貼這些命命令,則分分別運(yùn)行它它們。 SSSH 每每次會(huì)提示示輸入 oorac
50、lle 的口口令,如果果同時(shí)粘貼貼這些命令令,則第一一個(gè)命令在在提示輸入入口令之前前刷新輸入入緩沖區(qū),從從而導(dǎo)致其其他命令將將會(huì)丟失。)$ scpp authhorizzed_kkeys DATTA-HOOST022:/hoome/ooraclle/.sssh/kkeysThe aautheenticcity of hhost datta-hoost022 (19) ccantt be estaablisshed.RSA kkey ffingeerpriint iis d11:23:a7:ddf:c55:fc:4e:110:d22:83:60:449:255:e8:eb:111.Are yyo
51、u ssure you wantt to conttinuee connnectting (yess/no)? yeesWarniing: Permmanenntly addeed dataa-hosst02 (RRSA) to tthe llist of kknownn hossts.oraclle dataa-hosst02 s ppasswword:$cat keyssauuthorrizedd_keyys$ scpp autthoriized_keyss DDATA-HOSTT01:/homee/oraacle/.sshh/.:$ chmmod 6644 /.sssh/auuthorr
52、izedd_keyys請(qǐng)注意,這這次有的SSSH不會(huì)會(huì)提示您輸輸入oraacle的的口令。這這是因?yàn)榈诘谝粋€(gè)主機(jī)機(jī)(datta-hoost011)現(xiàn)在知知道了第二二個(gè)主機(jī)的的公共密鑰鑰,而SSSH現(xiàn)在使使用的是一一種不同的的認(rèn)證協(xié)議議。 建立用戶等等效性如果一切均均設(shè)置正確確,則您現(xiàn)現(xiàn)在就可以以使用 sssh 在在其他集群群主機(jī)上不不必輸入口口令而登錄錄、執(zhí)行程程序和復(fù)制制文件了。 通過在在遠(yuǎn)程集群群主機(jī)上運(yùn)運(yùn)行諸如 datee 等簡(jiǎn)單單命令來驗(yàn)驗(yàn)證用戶等等效性:$ sshh DATTA-HOOST022Sun JJun 227 199:07:19 CCDT 22010測(cè)試每個(gè)方方向上所有有服
53、務(wù)器的的連通性是是非常重要要的。這樣樣會(huì)確保當(dāng)當(dāng) OUII 在 CCRS 和和數(shù)據(jù)庫軟軟件安裝期期間試圖復(fù)復(fù)制文件時(shí)時(shí)不會(huì)出現(xiàn)現(xiàn)類似以下下的消息。 該消息息只有在遠(yuǎn)遠(yuǎn)程節(jié)點(diǎn)上上第一次執(zhí)執(zhí)行操作時(shí)時(shí)才會(huì)出現(xiàn)現(xiàn),因此通通過測(cè)試連連通性,您您不僅確保保了遠(yuǎn)程操操作的正常常運(yùn)行,還還完成了初初始的安全全密鑰交換換。The aautheenticcity of hhost dbrrac2 (000) ccantt be estaablisshed.RSA kkey ffingeerpriint iis 8ff:a3:19:776:caa:4f:711:85:42:cc2:7aa:da
54、:eb:553:766:85.Are yyou ssure you wantt to conttinuee connnectting (yess/no)? yees注意: 以以上步驟執(zhí)執(zhí)行完以后后,需要執(zhí)執(zhí)行和本機(jī)機(jī)建立等效效性,否則則安裝CRRS時(shí)也會(huì)會(huì)出錯(cuò),在在每個(gè)節(jié)點(diǎn)點(diǎn)上分別執(zhí)執(zhí)行:在再再每個(gè)節(jié)點(diǎn)點(diǎn)上執(zhí)行如如下命令,應(yīng)應(yīng)該直接顯顯示相應(yīng)的的時(shí)間,而而不會(huì)提示示輸入密碼碼,輸入密密碼則是不不成功,一一般是因?yàn)闉槟夸洐?quán)限限的問題,cchmodd 7755 /hoome/ooraclle ,$ sshh hosstnamme(此處hoostnaame分別別為DATTA-HOOST011、DAT
55、AA-HOSST02)對(duì)每個(gè)ipp地址進(jìn)行行ssh 操作配置hanngcheeck-ttimerr模塊編輯/ettc/rcc.d/rrc.loocalmodepprobee haangchheck-timeer編輯/ettc/mooprobbe.coonf ooptioons hhangccheckk-timmer hanggchecck_tiick=110 haang_mmargiin=300連接ISCCSI硬盤盤iscsiiadm modee diiscovvery -ttype seendtaargetts porrtal 1922.1688.2.2200iscsiiadm modee
56、nnodeiscsiiadm -mmode nodde -T ttargeetnamme(執(zhí)行行iscssiadmm modde nodee的結(jié)果) porrtal 1192.1168.22.2000:32660 logginASM配置置共享磁盤盤先查看系統(tǒng)統(tǒng)分區(qū)#fdissk l /ddev/ssdb發(fā)現(xiàn)陣列柜柜,被加載載在/deev/sddb上,在在分區(qū)先要要確保陣列列柜上沒有有被分區(qū),如如有分區(qū),需需要?jiǎng)h除以以前分區(qū),然然后在根據(jù)據(jù)前面磁盤盤分區(qū)規(guī)劃劃對(duì)磁盤陣陣列柜分區(qū)區(qū)(下面例子子中數(shù)值可可能不同,命命令是相同同的)#partted /deev/sddb #硬盤容容量大小大大于2.22
57、T所以使使用該分區(qū)命令令只在一個(gè)個(gè)節(jié)點(diǎn)上執(zhí)執(zhí)行,另外外一個(gè)節(jié)點(diǎn)點(diǎn)上執(zhí)行分分區(qū)同步命命令(partted)mmklabble gtpp根據(jù)提示分分區(qū)(partted)mmkparrtfs#遇到選擇擇磁盤類型型是單擊eenterr#根據(jù)提示示填入磁盤盤的staart ,eend,此此處謹(jǐn)慎點(diǎn)點(diǎn),parrted不不需要執(zhí)行行類似與ffdiskk的w寫入入操作,即即可以分盤盤提示:關(guān)于于分區(qū)命令令partted的詳詳細(xì)說明,參參考其他llinuxx命令手冊(cè)冊(cè)由于我們把把oraccle的OOCR(ooraclle集群注注冊(cè)表)、 表決磁盤盤(votting diskk)安裝在在裸設(shè)備上上,對(duì)于裸裸設(shè)備要
58、使使用它,需需要編輯/etc/syscconfiig/raawdevvicess文件,將將裸設(shè)備添添加到系統(tǒng)統(tǒng)中,然后后再為裸設(shè)設(shè)備設(shè)定屬屬組信息以以及權(quán)限信信息。 把下面的內(nèi)內(nèi)容添加到到/etcc/syssconffig/rrawdeevicees文件中中#OCR/dev/raw/raw11 /devv/sdbb1/dev/raw/raw22 /devv/sdbb2/dev/raw/raw33 /devv/sdbb3#OCR/dev/raw/raw55 /devv/sdbb5/dev/raw/raw66 /devv/sdbb6/dev/raw/raw77 /devv/sdbb7注意:在22.
59、6內(nèi)核核的Redd Hatt Linnux上,當(dāng)當(dāng)系統(tǒng)重啟啟后,裸設(shè)設(shè)備的屬組組信息將被還原為為系統(tǒng)默認(rèn)認(rèn)值(rooot:ddisk)。為了使得得裸設(shè)備屬屬組信息可可以被保留留,你要在/ettc/rcc.d/rrc.loocal中中強(qiáng)制更新新裸設(shè)備的的屬組信息息,即在文文件中加入入下述內(nèi)容容:chownn oraacle:dba /deev/raaw/raaw1chownn oraacle:dba /deev/raaw/raaw2chownn oraacle:dba /deev/raaw/raaw3chmodd 6600 /deev/raaw/raaw1chmodd 6600 /deev/ra
60、aw/raaw2chmodd 6600 /deev/raaw/raaw3在Redhhat aas 5.5上配置置裸設(shè)備必必須對(duì)/eetc/uudev/rulees/600-raww.rulles文件件進(jìn)行配置置內(nèi)容如下下ACTIOON=”add”,KERRNEL=”sdb1”,RUNN+=”/binn/raww /ddev/rraw/rraw1 %NN”ACTIOON=”add”,ENVVMAJJOR=”8”,ENVVMINNOR=”8”,RUNN+=”/binn/raww /ddev/rraw/rraw1 %M %m”ACTIOON=”add”,KERRNEL=”sdb2”,RUNN+=”/
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- α-Apooxytetracycline-生命科學(xué)試劑-MCE-3621
- PB-22-7-Hydroxyisoquinoline-isomer-生命科學(xué)試劑-MCE-3092
- L-Arginyl-L-alanine-生命科學(xué)試劑-MCE-1970
- BDW-OH-生命科學(xué)試劑-MCE-6441
- 4-Chlorocathinone-hydrochloride-生命科學(xué)試劑-MCE-4146
- 1-Methyl-3-amino-4-cyanopyrazole-生命科學(xué)試劑-MCE-7778
- 2025年度智能城市基礎(chǔ)設(shè)施合作框架協(xié)議
- 二零二五年度茶葉種植基地租賃與經(jīng)營(yíng)管理合同
- 二零二五年度貨車駕駛員勞動(dòng)合同(貨車駕駛與車輛融資租賃)
- 2025年度解除合同終止合同樣本:5G通信技術(shù)合作終止合同書
- 廣東2024年廣東金融學(xué)院招聘專職輔導(dǎo)員9人筆試歷年典型考點(diǎn)(頻考版試卷)附帶答案詳解
- 2025年研究生考試考研英語(二204)試卷與參考答案
- DB31∕731-2020 船舶修正總噸單位產(chǎn)品能源消耗限額
- 2024-年全國(guó)醫(yī)學(xué)博士外語統(tǒng)一入學(xué)考試英語試題
- 天津市-2024年-社區(qū)工作者-上半年筆試真題卷
- 2024年衛(wèi)生專業(yè)技術(shù)資格考試衛(wèi)生檢驗(yàn)技術(shù)(初級(jí)(師)211)相關(guān)專業(yè)知識(shí)試題及答案指導(dǎo)
- 公務(wù)用車分時(shí)租賃實(shí)施方案
- 《手衛(wèi)生知識(shí)培訓(xùn)》培訓(xùn)課件
- 《祛痘產(chǎn)品祛痘產(chǎn)品》課件
- 江蘇省南京鼓樓區(qū)2024年中考聯(lián)考英語試題含答案
- 兒科護(hù)理學(xué)試題及答案解析-神經(jīng)系統(tǒng)疾病患兒的護(hù)理(二)
評(píng)論
0/150
提交評(píng)論