第一百二十三章 係統改造與技術升級

字數:7387   加入書籤

A+A-


    正所謂,工欲善其事,必先利其器。

    所有業務前端的產品和服務,甚至市場營銷活動。

    都需要依靠後端的係統和技術支撐,這也是互聯網公司的核心競爭力。

    尤其是在現在易趣的業務線已經非常多,各種不同的業務類型,對後台技術的需求也越來越複雜的前提下。

    打造一個能夠為前方一線提供足夠支撐和良好用戶體驗的後台係統,

    就成為新成立的“大中台”事業群的核心工作目標。

    可這並不容易……

    就拿電商平台來看:

    易趣公司早期的後台係統,是由龐勇一個人寫的(易趣網b2c)。

    在97年的時候,還用的是veserverpages,動態服務器頁麵)技術,數據庫用的是sqlserver。

    而新成立的淘寶網,則采用了最新的l+php的架構。

    之所以采用這個架構,是因為一方麵用到的技術是開源、免費的,而且無需編譯,發布快速。

    這樣一來,光是要將電商平台在後台係統做整合,就需要對整個係統架構進行重新升級……

    更不用說,還要涉及到一點也不比電商平台係統簡單的搜索平台和社交平台了。

    所以,隋波剛剛布置完一係列的業務線工作,

    就被龐勇請來,參加技術委員會的會議。

    希望讓他聽一聽大家的討論,最後定下一個方案來。

    隋波雖然對技術細節一竅不通,

    但是他一直都是公司產品的“首席體驗官”。

    可以從用戶體驗的角度,提出需求和改進意見。

    這樣,技術部門也可以有針對性的,來進行係統改造和技術升級。

    另外最重要的是,無論是升級係統,還是改進技術,增加服務器、購買數據庫軟件……

    這些都是需要耗費大量資金的。

    如果不讓隋波這個大老板來聽一聽。

    到時候報預算,審批下來也慢啊……

    在技術委員會上,龐勇簡單介紹了目前電商平台的係統架構情況。

    現在暫時來看,整合難度最大的是易趣網和淘寶網。

    像,從王川最初開始研發,就有一整套獨立的後台係統。

    現階段隻需要做數據接口,打通用戶信息就可以,等到後期,電商和搜索業務交叉的需求增加的時候,再做更進一步的整合。

    電商平台所有產品和功能的底層,其實都是商品管理和交易管理兩大係統。

    其中主要包括:存儲數據庫、開發語言、負載均衡、緩存、cdn等。

    同時,要想形成真正具備整合能力的“大中台”,將各種業務線整合在一起,還必須有中間件係統(soa,分布式組件架構),如高性能的服務框架、分布式的數據訪問工具等。

    簡單來說,首先是商品管理係統。

    舉個例子,電商平台商品管理係統,在後台係統有個專用名詞叫商品類目屬性。

    比如服裝,就要分成男裝、女裝,按照季節,又要分為春夏裝、秋冬裝……

    再繼續細分,還可以分為大衣、t恤、褲子……

    甚至還能再細分到材質,是蕾絲還是純棉……

    這樣,商品的類目屬性就會形成非常複雜的網狀結構。

    對此,技術部門最後做出了一個名為forest(森林)係統,來對商品的數據信息進行結構化,以便於前後台的調用。

    另外有一個難點,就是圖片存儲係統。

    前兩年,因為網速和用戶體驗的考慮,易趣網上圖片很少。

    但現在,無論是易趣網還是淘寶網上,都已經開始出現了大量圖片。

    畢竟圖片無論是在商品展示上,還是交易係統中都非常重要。

    “無圖無真相”、“一張好圖勝過千言”。

    現在電商平台的流量中,圖片的訪問流量要占到90%以上。

    這麽多的圖片數據,和這麽大的流量,會給後台係統帶來非常大的壓力。

    尤其是大規模的小文件存儲和讀取,這就需要在存儲技術和緩存技術上,進行升級和創新。

    同時也對,基礎網絡的帶寬提出了更高的要求。

    另外,因為電商平台所有的功能都需要依賴用戶信息,用戶中心模塊必須單獨拿出來,否則以後係統無法擴展。

    這就需要一個中心係統informationcenter),<101nove.com拿出來之後,應用係統每天訪問訪問數據庫讀取用戶信息,以易趣網和淘寶網現在的流量,幾乎每天都有數千萬甚至上億次的讀取,數據庫很快就會崩潰。

    這樣,一方麵需要進行數據庫的分布式數據分層訪問,另外就是緩存技術。

    從前端的緩存,和全局負載均衡設置,傳遞到後端,流量就非常均衡和分散了,對前端的相應性能也大大提高。

    無論是數據庫、負載均衡、緩存、開發語言等,這些還是屬於純技術研發的問題。<101nove.comdn就是真正的硬件投入+軟件研發了。<101nove.comdn?

    entdeliverywork,即內容分發網絡),

    它涉及到硬件(服務器)、軟件(係統)、帶寬(就近分布)三個方麵。

    現在易趣公司在全國已經分布了十多個服務器節點,在電信機房和地方信息港,10m的帶寬,已經遠遠不能滿足現在的網站需求。

    首先要升級到100m帶寬,同時對服務器硬件進行升級,並且升級cdn的架構,提高服務器的單機性能。<101nove.comdn直接關係到數據庫存儲、緩存、負載、流量。

    會影響到所有平台係統的效率和前端所有業務產品的用戶體驗……

    一大堆的技術名詞,聽得隋波雲山霧繞。

    “老龐,你能不能從一個用戶的使用角度,簡單直接的來告訴我,這個係統的後台運作流程?”

    龐勇點點頭,整理了一下思路,說道:

    “這麽來說吧……

    當用戶想要上網買一個商品,他會首先打開我們電商網站,這時,瀏覽器會首先查詢dns服務器,把網址轉換為ip地址,這會因為不同的地區和不同的網絡,轉換後的ip地址不同。

    這首先涉及到負載均衡的第一步,通過dns解析域名,把你的訪問分配的不同的入口,盡可能保證是所有訪問入口中,最快的一個。”

    隋波點點頭,這樣說的確很清晰。

    龐勇繼續道:“當你通過入口成功訪問我們電商網站時,就產生了一個view,頁麵訪問量),同時你作為一個獨立用戶,這次訪問網站的所有頁麵均算成一個uevistor,用戶訪問)。”

    隋波繼續點點頭,是網站規模的重要指標。

    “因為同一時刻訪問網站的人數太多,所以,生成網站首頁頁麵的服務器不能是僅僅一台,目前我們用戶生成易趣和淘寶兩個電商網站首頁的服務器就接近100台,通過負載均衡係統,後台係統會分配給其中一台服務器完成。”

    隋波明白了,負載均衡係統是第一步。

    “通過一係列複雜的邏輯運算和數據處理,給你看的網站首頁的html內容就生成了,瀏覽器下一步會加載頁麵中用到的sript)、圖片等樣式、腳本和資源文件。

    因為同一個域名下並發加載的資源數量有限,為了保證用戶訪問網站的速度,就需要采用cdn來保證流量的分散和就近的cdn節點。”<101nove.comdn他還是有一定了解的,前世時,101nove.comdn,就是出於數據和網站的效率。

    龐勇繼續介紹:“當用戶開始瀏覽首頁,你可能隻是沒有明確的購物意圖和目標,隻是隨意看看,也可能是有一定的購物意圖,主要是屬性上的需求,又或者已經有了明確的目標,隻是進行表和挑選。

    這就需要通過網站內的分類目錄和搜索來完成。

    其中分類目錄背後,就是剛才我提到的forest係統。而搜索,目前我們暫時采用了站內搜索的方式,後續會和團隊溝通,借鑒更精確的搜索技術,做到站外搜索能夠直接鏈接到商品頁麵。”

    隋波點頭表示知道了。

    “你找到心儀的商品後,可能會有打開圖片,或者瀏覽商品詳情,加入購物車等等行為。

    不論你是否進行了交易,你的訪問行為都會被係統如實記錄下來,用於後續的業務邏輯和數據分析。

    這就涉及到了分布式數據存儲和用戶信息中心係統。

    就這樣,用戶的瀏覽數據、交易數據和其他數據記錄不斷保存和積累在我們的數據庫中。

    並通過我們基於數據計算平台的,由數百台服務器組成的數據係統,進行不斷的分析和挖掘。”

    隋波聽到這裏,這才笑道:“你早這麽給我介紹,就很清楚明白了!”

    我聽了一下,現在你們“大中台”事業群的問題是兩個方麵。

    一個是硬件上的升級,一個是軟件上的升級,對吧?”

    龐勇噎了一下,無奈點頭:“這麽說……,也沒錯。”

    那麽多複雜的問題,被隋波這麽歸納了一下,也隻能感歎。

    像隋波這麽牛的人,終於也有缺點啊,他是真不懂技術……

    隋波也從來不諱言這一點。

    所以他一直對技術團隊都非常重視,這也是龐勇、周楓、王川這幫人,跟了他這麽久,依然覺得跟他混還挺不錯的原因。

    除了易趣一直在事業上不斷前進所帶來的成就感,也有隋波的尊重和支持。

    否則,這兩年那麽多新出現的互聯網創業公司,都曾想過挖易趣的技術團隊,從股份到高薪,也是各種誘惑。

    但易趣的核心技術團隊,沒有一個離開的。

    隋波當即拍板:“服務器增加,你按照三年內用戶增加到5000萬為標準,需要增加多少服務器,直接報預算。

    另外帶寬方麵,我們直接和電信談一個全國範圍的合作,所有服務器cdn節點都把帶寬升級,100。

    你說的電商平台的整合和技術升級,我沒意見。

    需要購買國外的數據庫軟件的就買,需要自己研發的,你來組織團隊開發。

    你不是已經開始調各業務線的技術人員到總部了嗎?這裏麵總能找出高手來。

    項目研發的團隊獎勵,按照公司規定,之外再加50%!

    我就提兩個要求:

    第一,係統和技術升級,不能影響到前台的用戶體驗,至於你們怎麽做我不管。

    第二,時間,我給你3個月的時間,你必須完成公司各業務線的係統整合。”

    龐勇拉他來參加技術委員會,就是為了得到他的支持。

    聞言興奮的點頭道:“我明白了,波總,你放心!一定完成任務。”

    隋波又說道:

    “的數據庫和整體係統,複雜程度不亞於電商平台。

    同時搜索團隊現在在優化搜索引擎技術的同時,還在開發營銷平台。

    你和王川你們兩個,平時要多溝通,經驗方麵要多交流。”

    王川也是技術委員會的成員,聞言和龐勇一起點頭。

    :。: