BI開源工具調研報告

BI開源工具調研報告BI系統(tǒng)的簡述從技術角度來說BI包含了ETL、DW、OLAP、DM等多環(huán)節(jié)。簡潔的說就是把交易系ETL工具抽取到主題明確的數(shù)據(jù)倉庫中，OLAPCube或報表，透過Portal呈現(xiàn)給用戶，用戶利用這些經(jīng)過分類、聚攏、描述和可視化的數(shù)據(jù)，支持業(yè)務決策。這些眾多的BI工程從規(guī)模和對BI系統(tǒng)支撐的完善程度上來說Framework、Stand-aloneToolsBISuit三種類型。FrameworkBIBI工具，BI解決方案。Stand-aloneToolsBI工具，這是開源工程中數(shù)量最多的一類。很多工具只側重BI系統(tǒng)中的某個環(huán)ETL、Report、OLAPDatabase等等。BISuit在統(tǒng)一的架構下供給了多種BI系統(tǒng)的特性的工具集合。就目前的狀況看，不管是商業(yè)軟件還是開源軟件，還沒有任何一個套件供給了完整的端到端的BI解決方案。這些開源的BISuit是通過連接多個其他的組件和工具的方式形成套件的，由于BI系統(tǒng)涉及到的工具是BI解決方案是很困難的。BI解決方案中的工具BIBI系統(tǒng)中各個階段的工作。ETL工具數(shù)據(jù)抽取、轉換和加載工具。優(yōu)秀的ETL工具應當具有以下特性：1WorkflowManagement,JobExecutionandSchedulingManagerETL任務；2、CentralizedMetadataRepositoryandManagement。集中存儲和治理符合業(yè)界標準的元數(shù)據(jù)；3、DataProfileandValidation?？梢詸z驗數(shù)據(jù)的質量；4、HighPerformance。在大負荷的任務執(zhí)行中照舊有良好的性能；5、Scalable,PlatformIndependent。具有良好的彈性，支持多種操作系統(tǒng)和數(shù)據(jù)庫系統(tǒng)，能操作多種異構的數(shù)據(jù)源；6、OpenArchitectureandAPI。具有開放的架構和易于使用的二次開發(fā)接口。ETL工具有：1、KETLIBMKPMGKineticNetworks公司開發(fā)，現(xiàn)在已經(jīng)有三(ClickStream)分析應用中表現(xiàn)精彩。KETLPlug-inJava開發(fā)；2、KETTLEETLPentaho；3、ra的LL應用；4、EnhydraOctopusJavaETLJDBC來連接各種數(shù)據(jù)源，易于使用和部署。曾有人應用于電信網(wǎng)絡資源分析系統(tǒng)中。報表工具優(yōu)秀的報表工具通常具有以下特性：1、支持多種數(shù)據(jù)源；2、直觀的可視化設計器，簡潔易用的報表定制功能；3、便利的數(shù)據(jù)訪問和格式化，豐富的數(shù)據(jù)呈現(xiàn)方式；4、符合數(shù)據(jù)呈現(xiàn)的通用標準，能和應用程序很好地進展結合；5、易于擴展和部署；目前較為知名的開源報表工具有：1、JasperReports，一個優(yōu)秀的Java報表工具，始于2023，現(xiàn)在JasperSoft公司持CrystalReport，支持PDF、HTML、XLS、CSVXMLJava開發(fā)者最常用的報表工具；2、OpenReportsweb的靈敏報表解決方案，通過掃瞄器自動生成動態(tài)PDF,XLS,HTMLCSVChartJavaJasperReports作為報表引擎，Hibernate,Veloctiy,Webwork；3、JFreeReportPentaho的一局部，它是一個優(yōu)秀的用來生成報表的JavaJavaPDF,Excel,HTMLXHTML,PlainText,XMLCSV文件中；4、EclipseBIRTEclipseJ2EEWEBPDFHTML格式的報表，它供給了核心的報表功能。OLAP工具OLAPMOLAP〔多維型ROLAP〔關系型〕和〔混合型，優(yōu)秀的P工具通常有以下特性：1、良好的執(zhí)行性能，能快速地進展分析處理工作；2、良好的適用性和可伸縮性；3API；OLAP工具有：1、MondrianPentaho的一局部，為一個用JavaOLAP效勞器，實現(xiàn)了MDX語言、XMLJOLAP標準，可以不寫SQLSQL數(shù)據(jù)JDBC數(shù)據(jù)源并把數(shù)據(jù)以多維的方式呈現(xiàn)出來；2、JPivot，是一個JSPOLAP表格和圖表。用戶OLAPMondrian作為其OLAPWCF(WebComponentFramework)XML/XSLT來WebUI組件。JPivot在元數(shù)據(jù)緩存方面的過于簡化的整體性初始扮裝載的做法將限制它只能處理很小的立方體(Cube)。數(shù)據(jù)庫特地的優(yōu)化工作。Bizgres以PostgreSQL為根底進展了數(shù)據(jù)倉庫環(huán)境下的優(yōu)化，提高了分析查詢性能。BI套件下面列出相對成熟和完整，并且有借鑒意義的開源BI套件。openIOpeniJavaWebOLAP效勞器、關系數(shù)據(jù)庫和數(shù)據(jù)挖掘效勞ETL等。Openi主要包括：1、OLAP呈現(xiàn)：JPivot2、報表工具：JFreeChart3、分析數(shù)據(jù)源連接器Openi架構：RDLReportDefineLanguageopenI具有一個BI應有的大局部特性了，report: jasperreport,JFreeChartolap: mondrian+ JPivotdatamining: weka它的各層連接的格外的緊，似乎用了eigenbase做數(shù)據(jù)治理，不是很清楚這局部，openIPortletInterfaceJPivot的JPivotopenI沒有自己的開發(fā)專屬工具，入門門檻也相對較低。JasperSoftJaspersoft商務智能套件是建立在模塊的根底上的，因此很簡潔建立，以此證明其遞增價值。Jaspersoft主要包括：1、JasperServer：為商業(yè)用戶的互動，特定和預設查詢與報告效勞器2、JasperAnalysisOLAP數(shù)據(jù)分析3、JasperETL：開發(fā)人員和數(shù)據(jù)庫治理員的高性能的圖形數(shù)據(jù)整合4、JasperReportsJava報表函數(shù)庫JasperSoft最重要的就是它的報表，但是它支持輸出的格式很多，治理的方式也很多eigenbase做數(shù)據(jù)治理。acegiJDBC驅動。它的產(chǎn)品已經(jīng)形成了一個產(chǎn)品線，最著名固然還是它的JasperReport。你可以看到它為了更好的治理各種報表和數(shù)據(jù)，有自己專屬的呈現(xiàn)平臺JasperServer,這個平臺是06/26/2023JasperSoftBI而邁出的重要一步。jasper沒有數(shù)據(jù)挖掘。有任務調度器，用了quartz；ETL:JasperETL；它有自己的OLAPSERVER：jasperAnalysis；AJAXapplet,DashBoard；SQL,Hibernate(HQL),XPath(XML),EJBQL,MDX〔多維查詢語言，OLAP專用，SQLSERVERXMLA)。SpagoBISpagoBIMondrainJProvitOpenLaszlo產(chǎn)生實時報表。SpagoBI使用java開發(fā)，不依靠于具體的操作系統(tǒng)，有很強的擴展力氣。它主要包括：1、報表工具：JasperReports/EclipseBIRT/iReport2、OLAPServer：Mondrian3、OLAP呈現(xiàn)：JPivot4、數(shù)據(jù)挖掘組件：Weka5、Map引擎：Geo6、ETL：BIE7、搜尋引擎：Lucene8、Dashboard：OpenLaszlo9、PortalServer：JBoss/Tomcat/JOnASRoadmap可以看出，SpagoBIBIBI之外的功能。SpagoBI架構：spagoBI平臺功能很強大，也很簡潔。它的各個組件之間模塊化很好，Plugin加載,來看一下它的各個組件：report:BirtReportDriver, BirtReportEngine,JasperReportDriver,JasperReportEngine；O: r,用地圖顯示數(shù)據(jù)和查詢的；OLAP:JPivotDriver,JPivotEngine；QBE : QbeDriver,QbeEngine；DataMining:WekaDriver, WekaEngine；Security: ExoPortalSecurityProvider；Booklet(小冊子):BookletsComponent:itisacomponentforbookletsgeneration.主要包括文件上傳，工作流，OpenOffice支持；apache的JackRabbit,lucene。是做cms，portlet，workflow出身的，技術很強。spagoBI的使用的工具也比較多：Report: Bird , JasperReport；ETL: Octupus 和talend；OLAP: Mondrian 和JPivot；DataMining :Weka；Portal :eXoPortal；它的呈現(xiàn)層也使用了Xd也使用了一個用codeFlash“:///“:///4.0似乎也要支持DHTML)spagoBIDashBoard界面很友好。spagoBIETL是格外之牛的。你可以看到它下面的數(shù)據(jù)處理層是單獨分出來的。PentahoPentahoBIBI相抗衡。它包括：1、工作流引擎：SharkandJaWE2、數(shù)據(jù)庫：FirebirdRDBMS3、集成治理和開發(fā)環(huán)境：Eclipse4、報表工具：EclipseBIRT5、ETL工具：Enhydra/Kettle6、OLAPServer：Mondrian7、OLAP呈現(xiàn)：JPivot8、數(shù)據(jù)挖掘組件：Weka9Portal效勞器：JBoss10LDap認證：JOSSO11、自定義腳本支持：MozillaRhinoJavascript腳本處理器由上可見Pentaho是一個很完善的BI解決方案。Pentaho偏向于與業(yè)務流程相結合的BI解決方案，側重于大中型企業(yè)應用。Pentaho架構：pentahospagoBI格外相像，不過pentahosolution，以pentahowhitepaper:pentahoBIBI〔Solution)的框架，具有商業(yè)智能〔BI)組件，使得公司可以開發(fā)商業(yè)智能問題的完整解決方案pentaho一樣把數(shù)據(jù)處理層看的很重要，多種數(shù)據(jù)顯示方式，甚至有RSS輸出。pentaho是有各種開源組件組成的。ETL: Kettle (pentahoDataIntegration,previouslyKettle)Report:PentahoReport(它也支持Birt和JasperReport的集成,還有特地的文檔〕OLAP :Mondrian和JPivot (Mondrian已經(jīng)參與了pentaho)Platform:Pentaho