bs mpi22安裝手冊(cè)個(gè)人信息主索引

1、項(xiàng)目組版本歷史日期版本說(shuō)明作者2013-12-16V0.1初稿斌2013-12-18V0.2添加 solr 的配置說(shuō)明斌2014-01-13V0.3添加 MPI 的 RPC 配置說(shuō)明2014-01-21V1.0定稿目錄1引言41.1編寫(xiě)目的42系統(tǒng)運(yùn)行環(huán)境安裝說(shuō)明2.4JDK 的安裝與環(huán)境變量配置4WEB 應(yīng)用服務(wù)器的安裝4數(shù)據(jù)庫(kù)的安裝5zookeeper 服務(wù)的安裝123MPI 安裝說(shuō)明133.1Solr 使用和部署...6單個(gè) solr 配置13Solr 分布式配置14SolrSolr節(jié)點(diǎn)配置15索引定時(shí)備份配置1

2、6利用節(jié)點(diǎn)恢復(fù)數(shù)據(jù)16利用備份索引恢復(fù)數(shù)據(jù)163.2MPI 程序發(fā)布...63.2.7MPI 程序部署16RPC 服務(wù)相關(guān)配置17MPI 程序連接數(shù)據(jù)庫(kù)配置17MPI 程序 solr 配置17MPI 程序 RPC 發(fā)布及配置服務(wù)18MPI 程序消息配置18MPI 錯(cuò)誤日志檢測(cè)設(shè)置204附錄說(shuō)明214.1常見(jiàn)問(wèn)題214.1.1Weblogic 下 JAAS 問(wèn)題解決方法211引言1.1 編寫(xiě)目的本文檔的編寫(xiě)目的是為了輔助工程實(shí)施本部署前請(qǐng)務(wù)必詳細(xì)閱讀本文檔。及其他相關(guān)能夠順利地部署本，在2系統(tǒng)運(yùn)行環(huán)境安裝說(shuō)明2.1 JDK 的安裝與環(huán)境變量

3、配置執(zhí)行 JDK 的安裝程序（1.5 以上版本），設(shè)置安裝路徑進(jìn)行安裝即可。1.2.右鍵電腦->屬性->高級(jí)->環(huán)境變量，新建以下系統(tǒng)變量（假定 JDK 的安裝路徑為“D:Program FilesJava”）： JAVA_HOME=D:Program FilesJavajdk1.6.0_10classpath=.;%JAVA_HOME%libdt.jar;%JAVA_HOME%libtools.jar;（.;一定不能少，因?yàn)樗懋?dāng)前路徑)path=%JAVA_HOME%bin測(cè)試 JDK 是否安裝并配置正確：public class Testpublic static v

4、oid main(String args) System.out.println("This is a test program.");將上面的代碼保存為文件名為“Test.java”的文件。打開(kāi)開(kāi)始菜單->運(yùn)行 cmd，cd3.到“Test.java”所在目錄，然后鍵入下面令：javac Test.java javaTest此時(shí)如果看到打印出來(lái)“This is a test program.”的話說(shuō)明安裝沒(méi)有打印出這句話，你需要仔細(xì)檢查一下你的配置情況。了，如果2.2 WEB 應(yīng)用服務(wù)器的安裝以 Tomcat6 應(yīng)用服務(wù)器的安裝為例進(jìn)行說(shuō)明：1.執(zhí)行 Tomcat6

5、 的安裝程序，設(shè)置安裝路徑、端進(jìn)行安裝即可。2.安裝 Tomcat6 后需要配置環(huán)境變量，右鍵電腦->屬性->高級(jí)->環(huán)境變量，修改classpath 環(huán) 境 變 量 ， 把 Tomcat6 安 裝 目 錄 下 的 commonlib 目錄下的“servlet-api.jar”文件所在路徑追加到 classpath 環(huán)境變量中，修改后的 classpath 變量值為（假定 Tomcat 安裝路徑為“D:Program FilesTomcat”）： classpath=.;%JAVA_HOME%libdt.jar;%JAVA_HOME%libtools.jar;D:Progra

6、mFilesTomcat commonlibservlet-api.jar;注意： 最新版本的 Tomcat 中可能沒(méi)有 common 這個(gè)文件夾了。所以 servlet-api.jar的路徑應(yīng)該為“D:Program FilesTomcatlibservlet-api.jar”。3.啟動(dòng) Tomcat 服務(wù)，然后在瀏覽器中是指服務(wù)器 IP，8180 是 Tomcat 安裝時(shí)設(shè)置的端（5），如果看到了如下圖的 Tomcat的歡迎頁(yè)面，就說(shuō)明已經(jīng)安裝配置！2.3 數(shù)據(jù)庫(kù)的安裝在數(shù)據(jù)庫(kù)已經(jīng)安裝情況下，通過(guò)如下方案可以完成MPI1.0 系統(tǒng)基礎(chǔ)數(shù)據(jù)庫(kù)和基礎(chǔ)數(shù)據(jù)維護(hù)工作。方法一

7、：直接執(zhí)行表結(jié)構(gòu)和基礎(chǔ)數(shù)據(jù)前提條件：已在服務(wù)器上安裝了 Oracle 或 DB2 數(shù)據(jù)庫(kù)，并創(chuàng)建了一個(gè)空庫(kù)。將數(shù)據(jù)庫(kù)表結(jié)構(gòu) SQLMPI1.0 系統(tǒng)提供 Oracle 和 DB2 兩個(gè)版本的數(shù)據(jù)庫(kù)）直接拷貝粘貼到數(shù)據(jù)庫(kù)中執(zhí)行，即可建立數(shù)據(jù)庫(kù)表結(jié)構(gòu)。方法二：通過(guò)基礎(chǔ)數(shù)據(jù)安裝工具“ServerSetUp”創(chuàng)建基礎(chǔ)數(shù)據(jù)庫(kù)前提條件：已在服務(wù)器上安裝了 Oracle 或 DB2 數(shù)據(jù)庫(kù)，并創(chuàng)建了一個(gè)空庫(kù)。在“數(shù)據(jù)庫(kù)數(shù)據(jù)庫(kù)安裝”目錄下打開(kāi)“ServerSetUp”目錄，并雙擊運(yùn)行“dbsetup.exe”程序，彈出數(shù)據(jù)庫(kù)安裝向?qū)Ы缑妫缦聢D：選擇“標(biāo)準(zhǔn)安裝”或“自定義安裝”（選擇“標(biāo)準(zhǔn)安裝”后不可選擇所需

8、安裝的數(shù)據(jù)庫(kù)對(duì)象，默認(rèn)全部安裝；選擇“自定義安裝”后，可選擇所需創(chuàng)建的數(shù)據(jù)庫(kù)對(duì)象及需要導(dǎo)入的數(shù)據(jù)）。此處以“標(biāo)準(zhǔn)安裝”為例，點(diǎn)擊“下一步”按鈕，彈出目標(biāo)數(shù)據(jù)庫(kù)選擇界面，如下圖：選擇需安裝的目標(biāo)數(shù)據(jù)庫(kù)類(lèi)型（系統(tǒng)目前只支持 Oracle 數(shù)據(jù)庫(kù)和 DB2 數(shù)據(jù)庫(kù)），以“Oracle”為例，點(diǎn)擊“圖：”按鈕，彈出安裝系統(tǒng)選擇界面，如下所要安裝的系統(tǒng)，并點(diǎn)擊“”按鈕，彈出數(shù)據(jù)庫(kù)連接參數(shù)設(shè)置界面，如下圖：設(shè)置數(shù)據(jù)庫(kù)連接參數(shù)前，首先需要設(shè)置數(shù)據(jù)源。點(diǎn)擊“數(shù)據(jù)源設(shè)置”按鈕，彈出 ODBC 數(shù)據(jù)源管理器界面，如下圖：在上圖界面中點(diǎn)擊“添加”按鈕，彈出數(shù)據(jù)源驅(qū)動(dòng)選擇界面，如下圖：選擇 Oracle 數(shù)據(jù)驅(qū)動(dòng)，點(diǎn)

9、擊“完成”按鈕，彈出 Oracle 數(shù)據(jù)驅(qū)動(dòng)設(shè)置界面，如下圖：輸入數(shù)據(jù)源名稱(chēng)、數(shù)據(jù)庫(kù)服務(wù)名和用戶(hù)名后，點(diǎn)擊“Test Connection”按鈕，彈出 Oracle 數(shù)據(jù)驅(qū)動(dòng)連接界面，如下圖：輸入數(shù)據(jù)庫(kù)后，點(diǎn)擊“OK”按鈕，則會(huì)彈出測(cè)試連接如下圖：的提示框，確定后，繼續(xù)點(diǎn)擊“OK”按鈕，即可在 ODBC 數(shù)據(jù)源管理器界面查看到剛剛新建的數(shù)據(jù)源，如下圖：點(diǎn)擊“確定”按鈕關(guān)閉 ODBC 數(shù)據(jù)源管理器界面?；氐綌?shù)據(jù)庫(kù)連接參數(shù)設(shè)置界面，在該界面中輸入數(shù)據(jù)源名稱(chēng)、用戶(hù)名、用戶(hù)后，點(diǎn)擊“連接測(cè)試”按鈕，連接“”標(biāo)示，連接失敗“×”標(biāo)示，如下圖：數(shù)據(jù)庫(kù)連接測(cè)試后，點(diǎn)擊“完成”按鈕，彈出數(shù)據(jù)庫(kù)對(duì)象和

10、數(shù)據(jù)的創(chuàng)建和導(dǎo)入準(zhǔn)備界面，如下圖：點(diǎn)擊“創(chuàng)建”按鈕，在彈出的“是否開(kāi)始創(chuàng)建數(shù)據(jù)庫(kù)!”的提示框中選擇“是”，即可開(kāi)始自動(dòng)創(chuàng)建數(shù)據(jù)庫(kù)對(duì)象以及導(dǎo)數(shù)據(jù)操作，創(chuàng)建完成后，每個(gè)對(duì)象的創(chuàng)建結(jié)果及數(shù)據(jù)的導(dǎo)入數(shù)在界面上都有顯示，如下圖：此時(shí)，mpi 數(shù)據(jù)庫(kù)中的所有對(duì)象都已創(chuàng)建，且所有的基礎(chǔ)數(shù)據(jù)都已導(dǎo)入。安裝向?qū)Ъ纯伞?.4zookeeper 服務(wù)的安裝1. 獲取到 zookeeper 的安裝文件，將其解壓到服務(wù)器的某個(gè)目錄下，比如 D: zookeeper目錄：2. 修改“zookeeperconf”下的“zoo_sample.cfg”文件的文件名為“zoo.cfg”3. 配置屬性如下圖：修改 dataDir

11、確定 zookeeper 新建 dataDir 文件夾的路徑，以及修改 zookeeper 端（clientPort，一般為默認(rèn)）。4.在 D:zookeeperbin 目錄下雙擊“zkServer.cmd”文件，即可啟動(dòng) zookeeper 的服務(wù)。如下圖：3MPI 安裝說(shuō)明3.1 Solr 使用和部署Solr 配置說(shuō)明：Solr 包中有個(gè) solr 目錄，solr 的主要配置都在該目錄下，該目錄中有個(gè) cores文件夾和 solr.xml 配置，solr.xml 中配置了 solr 的外部地址，以及所有 solr 索引庫(kù)的名稱(chēng)和配置路徑；cores 文件夾下是所有的索引庫(kù)目錄，每個(gè)目錄下包

12、含兩個(gè)文件夾 conf 和 data， data 下有兩個(gè)文件夾 index 和 tlog，index 是存放生成的索引文件，tlog 存放 log，conf 下是必要的配置文件 schema.xml 和 solrconfig.xml，schema 用于配置索引的字段信息，solrconfig 用于配置處理、索引配置、緩存配置等信息。Mpi 配置了兩個(gè)索引庫(kù) core1 和 core3，core1 中存mpi 的索引信息，是主要的索引庫(kù)，core3 中存放的是已注銷(xiāo)的個(gè)人信息數(shù)據(jù)。3.1.1單個(gè) solr 配置1.獲 得 solr 的 文 件 包 ， 將 其 解 壓 到 某 個(gè) 服 務(wù) 器 中

13、 ， 比 如 ：D:apache-tomcat-6.0.35webappssolr.修改 solr 的服務(wù)器目錄下的“apache-tomcat-6.0.35bincatalina.bat”文件，添加關(guān)于 solr的啟動(dòng)配置信息如下:2.setJAVA_OPTS=%JAVA_OPTS%-Dbootstrap_conf=true-DzkHost=localhost:2181-DnumShards=1如圖：注意：如果是 linux 系統(tǒng)修改 catalina.sh 文件，添加配置如下（之后章節(jié)不再重復(fù)）：JAVA_OPTS="$JAVA_OPTS -Dbootstrap_conf=tru

14、e -DzkHost=:2181 -DnumShards=1"參數(shù)說(shuō)明：Dbootstrap_conf：是否將配置上傳 zookeeper 統(tǒng)一管理，這里設(shè)置為 trueDzkHost：solr 使用的 zookeeper 地址（ip 和端）DnumShards：solr 的節(jié)點(diǎn)數(shù)（不包括復(fù)雜節(jié)點(diǎn)，是分布式的節(jié)點(diǎn)數(shù)量）3. 修改“apache-tomcat-6.0.35webappssolrsolr”目錄下的“solr.xml”文件：4. 先啟動(dòng)的 zookeeper 服務(wù)，然后啟動(dòng) solr 服務(wù)，）。對(duì)應(yīng)的 url 地址（如：3.1.2Solr 分布式配置若要配

15、置 solr 的分布式，則如 3.1.1 設(shè)置再配置一個(gè) solr服務(wù)器，將所有服務(wù)器的“bincatalina.bat”文件關(guān)于 solr 的啟動(dòng)配置信息為：setJAVA_OPTS=%JAVA_OPTS%-Dbootstrap_conf=true-DzkHost=:2181-DnumShards=2（修改-DnumShards 的數(shù)量，-DnumShards 表示配置的節(jié)點(diǎn)數(shù)，zookeeper 服務(wù) IP 及端要相同）啟動(dòng)所有服務(wù)，如下圖：3.1.3Solr節(jié)點(diǎn)配置該配置可以減少 solr 服務(wù)器檢索。如 3.1.1 所示配置一個(gè) solr 服務(wù)器，將該配置好的服務(wù)器中

16、“bincatalina.bat”文件關(guān)于 solr的啟動(dòng)配置信息為：set JAVA_OPTS=%JAVA_OPTS%-DzkHost=:9080（solr 配置的 zookeeper 服務(wù)器 IP及端口需一致）以下介紹節(jié)點(diǎn)的每個(gè) core 配置，預(yù)設(shè)主節(jié)點(diǎn)配置（solrconfig.xml 文件）：預(yù)設(shè)從節(jié)點(diǎn)的配置（solrconfig.xml 文件）：3.1.4Solr 索引定時(shí)備份配置2.2 版本新增功能，定時(shí)備份索引組件配置（“/mpi/spring/spring-schedule.xml”）如下：3.1.5利用節(jié)點(diǎn)恢復(fù)數(shù)據(jù)1、從節(jié)點(diǎn)數(shù)據(jù)受損，直接2、主節(jié)點(diǎn)數(shù)據(jù)受損

17、，從點(diǎn)服務(wù)；節(jié)點(diǎn)拷貝索引數(shù)據(jù)對(duì)主節(jié)點(diǎn)進(jìn)行覆蓋，重新啟動(dòng)服務(wù)；3.1.6利用備份索引恢復(fù)數(shù)據(jù)1、先關(guān)閉索引服務(wù)器，將要用于恢復(fù)數(shù)據(jù)的備份索引文件一一對(duì)應(yīng)的后重啟索引服務(wù)器。到索引目錄，然3.2 MPI 程序發(fā)布3.2.1MPI 程序部署將項(xiàng)目應(yīng)用程序 WAR 包拷貝粘貼到 Tomcat/ webapps 目錄下，啟動(dòng) Tomcat 服務(wù)，即可通過(guò)裝時(shí)設(shè)置的端署的項(xiàng)目。（5 是指服務(wù)器 IP，8180 是 Tomcat 安，mpi 是指 Tomcat/ webapps 目錄下自動(dòng)解壓后的程序目錄名）已部注：Tomcat 服務(wù)每次啟動(dòng)時(shí)都會(huì)將 webapps 目錄下的 WAR

18、 包解壓一次，為避免 Tomcat服務(wù)每次啟動(dòng)時(shí)重新解壓 WAR 包從而替換了已有的配置信息，應(yīng)在 Tomcat 服務(wù)第一次啟動(dòng)完成后將 WAR 包刪除。3.2.2RPC 服務(wù)相關(guān)配置1、配置本 MPI 的表示外部系統(tǒng)在調(diào)用 MPI 系統(tǒng)的 RPC 服務(wù)時(shí)需要在服務(wù)名前添加名空間，如 MPI 中 mpiProvider 服務(wù)按如上配置后，外部系統(tǒng)調(diào)用時(shí)需要使用mpi31.mpiProvider 的名稱(chēng)； 配置 zookeeper 的接連地址；配置本系統(tǒng)提供 RPC 服務(wù)的調(diào)用2、3、。形式為:hessian:/$ip:$port/$servletContextName/rpcip 和 port

19、 是 MPI 部署的服務(wù)器 ip 和端口，servletContextName 是 MPI 部署的應(yīng)用名稱(chēng)，在 Tomcat 下就是在webapps 目錄的目錄名，或者是在 Context 文件中的 path 的值：3.2.3MPI 程序連接數(shù)據(jù)庫(kù)配置在應(yīng)用程序的WEB-INFconfigspring 目錄下，修改 perties 文件內(nèi)容：根據(jù) mpi 的數(shù)據(jù)庫(kù)類(lèi)型選擇相應(yīng)的數(shù)據(jù)庫(kù)配置，并修改數(shù)據(jù)庫(kù)的連接地址和用戶(hù)名完成后保存文件，重啟應(yīng)用服務(wù)即可連接到指定的數(shù)據(jù)庫(kù)。，3.2.4MPI 程序 solr 配置在應(yīng)用程序的WEB-INFclassesmpispring 目錄下，修改

20、spring-context.xml 文件內(nèi)容：修改 solrZkAddress 參數(shù)，solrZkAddress 為 solr 服務(wù)的 ip 和端文件，重啟應(yīng)用服務(wù)即可連接到指定的 zookeeper 服務(wù)。，修改配置完成后，保存3.2.5MPI 程序 RPC 發(fā)布及配置服務(wù)在前臺(tái)界面“RPC 服務(wù)配置”可以配置 MPI，zookeeper 服務(wù) IP 及端口。如果需要配置服務(wù)則需要填寫(xiě)服務(wù)，若不需要或者需停止改服務(wù)則將此項(xiàng)清空并點(diǎn)擊確定?！竟?jié)點(diǎn)類(lèi)型】主要做用是的定時(shí)器，集群配置是同一只能有一個(gè)主節(jié)點(diǎn)，只有主節(jié)點(diǎn)會(huì)定時(shí)運(yùn)行的定時(shí)器?！臼欠裣掳l(fā)】如果做為主節(jié)點(diǎn)，且有子節(jié)點(diǎn)（另外一個(gè)域的子節(jié)點(diǎn)。

21、節(jié)點(diǎn)），可以配置下發(fā)，當(dāng) mpi 數(shù)據(jù)有更新時(shí)會(huì)定時(shí)將更新數(shù)據(jù)下發(fā)到3.2.6MPI 程序消息配置如果需要使用 MPI 索引更新提醒，需要修改 spring-schedule.xml 內(nèi)的配置，如題：若要消息，sendMessage 的 value 值改為 true。還需要安裝 mateQ：將 mateQ 壓縮包解壓，在配置 conf 文件夾下的 server.ini:1. zookeeper 地址配置:server.ini 里配置連接的 zookeeper 地址及其端口。2. 主題配置：將需要訂閱以及發(fā)布的主題名稱(chēng)配置進(jìn) server.ini 里面。配置文件如圖：(注：MPI 的消息主題為 mpimsg,zookeeper 配置的地址與 MPI 的 zookeeper 地址一致)3.在安裝目錄的 bin 目錄下雙擊"metaServer.bat"文件，即可啟動(dòng) metaQ 的服務(wù)4.消息訂閱接收：spring 里訂閱要接收的主題名稱(chēng)。如圖：處理的類(lèi)里需要有指定的方法來(lái)處理接收的消息， 方法名為 public voidonSubscribeMessage(Object message)，并且要有 rpc 的注解，如下圖：3.2.7MPI 錯(cuò)誤日志檢測(cè)設(shè)置1.配置人郵箱賬號(hào)和在應(yīng)用程序的WEB-INFclassesmpispring 目錄下，修改