Seafile項(xiàng)目經(jīng)驗(yàn)分享

開源的企業(yè)文件云存儲(chǔ)平臺(tái)潘凌濤@freeplant內(nèi)容提綱產(chǎn)品介紹，Seafile是什么工程理由，為什么要做Seafile工作原理，Seafile是怎么工作的經(jīng)驗(yàn)分享，從Seafile工程從學(xué)到的經(jīng)驗(yàn)Seafile是什么Seafile是一個(gè)面向企業(yè)、團(tuán)隊(duì)的云盤，解決文件管理和共享的問題。在此根底上，Seafile提供群組協(xié)作的功能，形成一個(gè)以文檔為中心的協(xié)作平臺(tái)。資料庫(kù)和個(gè)人頁(yè)面群組頁(yè)面和討論機(jī)構(gòu)頁(yè)面資料庫(kù)頁(yè)面客戶端為什么要做Seafile文件管理和共享和企業(yè)/團(tuán)隊(duì)的最根本的需求。Seafile就是要做一個(gè)高質(zhì)量的開源的企業(yè)云存儲(chǔ)平臺(tái)。同時(shí)參加協(xié)作功能，形成一個(gè)創(chuàng)新的產(chǎn)品。Seafile特色群組協(xié)作功能端到端加密小巧/高性能，可部署于非常多的平臺(tái)10000次/月的效勞器軟件下載1300+GithubStarSeafile怎么工作–資數(shù)據(jù)料庫(kù)模型一個(gè)資料庫(kù)是一個(gè)帶歷史的去重的文件系統(tǒng)Seafile怎么工作–數(shù)據(jù)存儲(chǔ)文件對(duì)象，目錄對(duì)象，文件塊存在操作系統(tǒng)的文件系統(tǒng)上，或者S3/Swift/Ceph這樣的外部存儲(chǔ)中。結(jié)構(gòu)化數(shù)據(jù)存在MySQL或者SQLite。定期到效勞器查看最新的Commit下載文件和元信息，和本地內(nèi)容歸并本地有修改，生成新的Commit，并增量上傳到效勞器同步算法Seafile怎么工作–架構(gòu)Ccnet負(fù)責(zé)通信，Seahub網(wǎng)站界面，HttpServer模塊負(fù)責(zé)網(wǎng)頁(yè)端的文件上傳下載。Seafile負(fù)責(zé)數(shù)據(jù)管理和同步。實(shí)現(xiàn)語(yǔ)言選擇Ccnet/Seafile/HttpServer用C語(yǔ)言實(shí)現(xiàn)，使用libevent事件循環(huán)+線程池處理異步任務(wù)的架構(gòu)。Seahub使用PythonDjango框架。TaskDaemon處理后臺(tái)發(fā)郵件等任務(wù)，用Python語(yǔ)言。實(shí)現(xiàn)語(yǔ)言選擇進(jìn)程間通信使用自己設(shè)計(jì)的RPC。用python和c都上實(shí)現(xiàn)了一遍RPCServer/Client。用json來(lái)做數(shù)據(jù)交換的格式,以支持跨語(yǔ)言的數(shù)據(jù)交換。Seafile工程經(jīng)驗(yàn)產(chǎn)品設(shè)計(jì)架構(gòu)設(shè)計(jì)實(shí)現(xiàn)技術(shù)選擇產(chǎn)品設(shè)計(jì)在確定功能核心的根底上，列出最小功能集合，把易用性和符合群眾習(xí)慣放在第一位來(lái)進(jìn)行設(shè)計(jì)產(chǎn)品設(shè)計(jì)Seafile的核心是團(tuán)隊(duì)文件共享，群組和多資料庫(kù)同步是最根本的功能多資料庫(kù)同步照成了一定的入門難度，但是我們認(rèn)為是必要的。產(chǎn)品設(shè)計(jì)原來(lái)為了方便，客戶端的界面是用Python來(lái)實(shí)現(xiàn)了一個(gè)本地的Web界面。造成了不少混淆，這是不符合群眾習(xí)慣的反面例子。后來(lái)我們改成了Qt。架構(gòu)設(shè)計(jì)客戶端不應(yīng)該采用復(fù)雜的多進(jìn)程架構(gòu)通信協(xié)議選擇程序內(nèi)部的多組件(可能分布在多個(gè)機(jī)器上)通信，效率和便捷性是第一位的，在TCP協(xié)議上直接設(shè)計(jì)一套R(shí)PC是最好的。多程序間以及互聯(lián)網(wǎng)的通信，互操作性才是最重要的。HTTP協(xié)議才是互聯(lián)網(wǎng)標(biāo)準(zhǔn)的通信協(xié)議。通信協(xié)議選擇–HTTP協(xié)議HTTP的害處是比較復(fù)雜，它不是一個(gè)為傳輸文件而設(shè)計(jì)的協(xié)議。在處理文件傳輸?shù)臅r(shí)候，有太多的小陷阱。好處是一旦使用了Http協(xié)議，你的應(yīng)用就能使用上Proxy,Cache,LoadBalance這些根底效勞。實(shí)現(xiàn)語(yǔ)言選擇客戶端：C/C++是最好，最成熟的跨平臺(tái)語(yǔ)言效勞器：Python寫Web和腳本都是非常好的選擇。追求性能的地方要用C?？偨Y(jié)難點(diǎn)：無(wú)論是效勞器還是客戶端都要運(yùn)行在多個(gè)平臺(tái)上。功能選擇還有架構(gòu)設(shè)計(jì)上都要保持簡(jiǎn)單。使用最成熟的、支持最廣泛的實(shí)現(xiàn)技術(shù)。如果重新編寫客戶端使用單進(jìn)程，用