亚洲欧洲另类春色校园网站|视频一区二区三区在线观看|91在线视频网址,男女配种超爽视频免费观看,亚洲高清国产拍青青草原,m3u8久久国产精品影院

                      宜搜手機搜索騰云海,分層存儲方案出至強

                      發(fā)布時間:2015-01-07
                      云海麒麟助力宜搜科技加速搜索引擎

                      自2000年左右初試啼聲以來,中國的互聯(lián)網(wǎng)產(chǎn)業(yè)正在迎來第二個巨大的發(fā)展契機。在層出不窮的商業(yè)模式創(chuàng)新帶動之下,在擁有雄厚實力和用戶基礎的BAT引領之下,在創(chuàng)新的公有云技術的支持之下,越來越多擁有創(chuàng)新想法的互聯(lián)網(wǎng)企業(yè)得到了比以往更好的發(fā)展機遇。


                      而對于互聯(lián)網(wǎng)行業(yè)而言,作為最基礎生產(chǎn)資料的IT基礎架構,對于企業(yè)開展業(yè)務的重要性要遠遠大于任何一個行業(yè)。因此對包括服務器、存儲和網(wǎng)絡在內(nèi)的IT基礎架構,互聯(lián)網(wǎng)企業(yè)投入的關注也要高于絕大多數(shù)的行業(yè)。


                      與一般互聯(lián)網(wǎng)企業(yè)相比,移動互聯(lián)網(wǎng)由于應用本身的規(guī)模相對于PC端應用更小、更簡單,基于移動平臺提供服務的互聯(lián)網(wǎng)企業(yè)對于IT基礎架構的需求也有著比較明顯的差異。在移動領域,初創(chuàng)的互聯(lián)網(wǎng)服務商選擇公有云平臺服務,以減少IT管理壓力的比重要顯著更高。而那些在移動互聯(lián)網(wǎng)服務領域已經(jīng)擁有相當業(yè)務基礎,需要依托自己的數(shù)據(jù)中心來開展業(yè)務的互聯(lián)網(wǎng)服務商而言,更簡單、更易用,在配置方面更為標準化,能更便利地實現(xiàn)橫向擴充以應對快速增長的業(yè)務需求的IT基礎架構,更容易受到IT主管們的青睞。


                      成立于2005年的宜搜公司就是專注于移動市場的互聯(lián)網(wǎng)服務商中一個典型的代表。成立九年以來,宜搜公司的IT基礎架構規(guī)模隨著業(yè)務的不斷增長,而在2007、2009和2011年有過3次大規(guī)模的擴張,目前公司數(shù)據(jù)中心中整體的服務器數(shù)量超過3000臺。其主要業(yè)務來自不同類型的每天數(shù)億次以上的搜索請求,以及手游等其他業(yè)務。


                      圖片和小說等基于移動端的內(nèi)容搜索,是移動端手機搜索中一個重要的功能。以宜搜提供的圖片搜索為例,其主要針對手機用戶提供適合手機觀看的精品圖片,目前資源總量超過數(shù)億張,其中包括jpg,gif等多種圖片格式。?而在圖片搜索系統(tǒng)的最近一次更新中,宜搜采用了來自深圳云海麒麟公司提供的存儲服務器和緩存服務器作為承載整個系統(tǒng)的解決方案,并實現(xiàn)了整體搜索性能的較大提升。


                      宜搜科技首席技術官呂晉介紹,公司與云海麒麟之間的合作關系開始于2013年底,而在使用云海麒麟服務器的半年多時間內(nèi),宜搜對這一新品牌提供的服務器質(zhì)量和可靠性也給予了充分的肯定。


                      在服務器圈子中,成立于2013年11月的云海麒麟是一家全新的公司。公司產(chǎn)品總監(jiān)李增光介紹,為互聯(lián)網(wǎng)公司等少數(shù)幾個行業(yè)提供專門定制的IT基礎架構,是公司在業(yè)務上最為主要的定位?!霸诿绹?,有很多小的服務器廠商專門為一到兩個行業(yè),甚至一兩個用戶專門做定制化的服務器產(chǎn)品,做得很專業(yè)、很精致。我覺得這也是我們可以學習的地sa方?!彼榻B,“我們公司也是按照這個思路來發(fā)展,成立半年多以來,圍繞互聯(lián)網(wǎng)、安防監(jiān)控、信息安全等重要的領域,我們已經(jīng)與客戶形成了有效的互動,完善了從塔式到機架式,到四路、八路服務器再到存儲在內(nèi)的產(chǎn)品線,在全國11個地方建立了辦事處,并和英特爾這樣的上游廠商建立了良好的合作關系。”


                      快速的響應和部署,是互聯(lián)網(wǎng)行業(yè)最大的特點,而在移動互聯(lián)網(wǎng)行業(yè)中,則更是將這種“天下武功,唯快不破”的特點發(fā)揮到了極致。傳統(tǒng)互聯(lián)網(wǎng)行業(yè)之中,人與PC每天互動的時間是有限的,但在移動時代到來之后,人與智能手機、平板電腦之間的互動時間幾乎是除了睡覺之外的所有時間。在新技術、新理念引入上落后別人一步,就會喪失發(fā)展的先機。因此在IT基礎架構的部署方面,IT基礎架構廠商需要提供標準化與定制化結(jié)合的解決方案,一方面為移動互聯(lián)網(wǎng)服務商迅速敏捷的業(yè)務變化提供支持,另一方面又要保證能夠滿足移動產(chǎn)業(yè)隨時的創(chuàng)新產(chǎn)生的對IT基礎架構個性化的需求。


                      在宜搜公司,每天基于移動平臺的內(nèi)容搜索需求以PB級計算,對于后臺存儲的量級要求非常高。但是在海量的搜索內(nèi)容中,可能只有1%的數(shù)據(jù)是每天必須被用到或者訪問的,剩下的絕大部分都是冷數(shù)據(jù),可能會幾天甚至一兩個月之內(nèi)都不會有用戶訪問一次。


                      作為典型的移動互聯(lián)網(wǎng)搜索類應用,宜搜圖片搜索需要一套對數(shù)據(jù)進行有效分層存儲的大型緩存機制。如果所有數(shù)據(jù)都存儲在磁盤中進行讀寫,每天數(shù)以億計的搜索請求之下,性能難免會打折扣。因此采用固態(tài)盤建立緩存服務器存儲熱數(shù)據(jù),將冷數(shù)據(jù)存儲在低成本的SATA接口硬盤中,從性價比方面考慮是最為合適的解決方案。


                      云海麒麟為宜搜提供的解決方案,就是由YH-5212S:2U12盤位SATA硬盤,配備至強E5-2609或2620 v2的存儲服務器,加上YH-5210:2U8盤位,配備英特爾至強E5-2630或2640 v2處理器以及英特爾企業(yè)級固態(tài)盤的緩存服務器組成。在存儲高熱點數(shù)據(jù)的環(huán)境中,云海麒麟提供配備英特爾PCI-E接口固態(tài)盤的解決方案,為宜搜的搜索服務在基礎架構上提供最強性能的支持。


                      在服務器的網(wǎng)絡接口方面,出于總體成本考慮,云海麒麟為宜搜內(nèi)容搜索系統(tǒng)配備了基于英特爾千兆網(wǎng)卡的解決方案。但李增光介紹,在英特爾提供的優(yōu)化指導和技術支持之下,云海麒麟在CPU核心數(shù)和網(wǎng)卡隊列之間的匹配等方面,已經(jīng)開展了許多的調(diào)優(yōu)工作,充分發(fā)揮出了千兆網(wǎng)絡應有的性能?!叭绻麤]有來自上游廠商的支持,單憑我們是無法充分發(fā)揮出現(xiàn)有解決方案的全部潛力的?!彼硎?。


                      在分層存儲領域,許多專門的存儲廠商都能提供完整的解決方案,但在呂晉看來,這些解決方案的成本過高,而作為其重要賣點的高可靠性存儲也不是移動互聯(lián)網(wǎng)行業(yè)最為根本的需求?!拔覀兇鎯Φ臄?shù)據(jù)規(guī)模比較大,而且由于每天互聯(lián)網(wǎng)上的數(shù)據(jù)都在變化,對數(shù)據(jù)更新的需求也是比較快的?!眳螘x說,“我們的數(shù)據(jù)不像銀行、政府機關存儲的數(shù)據(jù)那樣,需要長期穩(wěn)定的保留,因此也不需要對數(shù)據(jù)絕對不能丟失的保障。因此,我們采用分布式架構進行數(shù)據(jù)存儲,相比起低成本和高效率,實施、維護過程中的易用性等關鍵因素,數(shù)據(jù)本身在可靠性方面的小問題并不是我們關注的重點?!?/p>


                      在通過緩存服務器方式實現(xiàn)分層存儲的初期,宜搜也采用過非英特爾固態(tài)盤的解決方案進行過測試,但發(fā)現(xiàn)要么是效果并不理想,要么是成本過高而效益無法體現(xiàn)。“采用英特爾至強處理器結(jié)合英特爾固態(tài)盤的解決方案,在性價比和穩(wěn)定性方面都能比較符合我們的期望。而英特爾架構標準化的配置也會比較順暢,我們在整個解決方案的部署過程之中都非常順利,沒有遇到過預料之外的問題。這對于速度就是一切的互聯(lián)網(wǎng)行業(yè)來說是非常重要的。”


                      “我們在早期使用過一些基于其他品牌的服務器產(chǎn)品,經(jīng)過幾次更新?lián)Q代,現(xiàn)在采用的全部都是基于英特爾架構的產(chǎn)品?!眳螘x介紹,“無論是從架構的成熟度、穩(wěn)定性、計算能力,還是從整個解決方案的性價比方面考慮,基于英特爾架構的服務器和存儲產(chǎn)品都是互聯(lián)網(wǎng)行業(yè)更好的選擇。”


                      由于云海麒麟公司的成立正好趕上英特爾至強v2處理器的推出,在公司成立初期,主推的服務器就已經(jīng)是基于英特爾至強v2的產(chǎn)品,在今年2月開始正式對宜搜供貨時,提供的舊已經(jīng)全部是基于英特爾至強v2的設備。而至強v2在性能上相較于前一代產(chǎn)品的提升,也為云海麒麟和宜搜雙方留下了非常深刻的印象。


                      “一個典型的例子是從去年11月,我們就開始用E5 v2給宜搜做測試,將E5-2620提升到E5-2620 v2,兩代產(chǎn)品的功耗差不多,但要滿足同樣的性能需求,現(xiàn)在只需要60%左右數(shù)量的處理器就可以,單個CPU的性能提升了三四成以上。”李增光說,“在這種情況下,宜搜不需要進行大規(guī)模的系統(tǒng)擴容,只需要將現(xiàn)有的設備進行更新,就足夠滿足日益增長的業(yè)務對于IT基礎架構的需求?!?/p>


                      而宜搜在項目中為新生的云海麒麟公司提供的大力配合,也同樣給李增光留下了深刻的印象。在項目初期用于測試的樣機方面,宜搜主動提出采購一半的樣機,而云海麒麟提供另一半樣機,開展為期三四個月的測試工作。“在研發(fā)測試階段就花錢買樣機的,我們以前真的很少碰到過。”李增光表示,“這對于我們初創(chuàng)階段的企業(yè)而言,的確是很大的幫助?!?/p>


                      或許,云海麒麟提供的服務器產(chǎn)品的性能,以及為宜搜打造定制化產(chǎn)品的誠意,是宜搜以友好姿態(tài)與云海麒麟合作的重要原因。在三次大規(guī)模的服務器擴充完成之后,宜搜的業(yè)務走上穩(wěn)定發(fā)展的軌道,加上虛擬化技術的發(fā)展,使得服務器規(guī)模的大規(guī)模提升不再有必要。但在呂晉看來,計算能力的提升仍舊是宜搜未來業(yè)務發(fā)展方向上會比較關注的一個重點問題。


                      在宜搜目前更為關注的業(yè)務領域,如通過Hadoop集群實現(xiàn)的數(shù)據(jù)分析和挖掘,以及以語音方式實現(xiàn)的移動搜索等領域,都需要更為強大的計算能力。“我們期待英特爾在未來能一如既往地在計算能力方面不斷創(chuàng)新,為互聯(lián)網(wǎng)行業(yè)提供更優(yōu)秀的計算工具?!眳螘x表示。


                      而云海麒麟也對雙方未來進一步的合作和創(chuàng)新給予了充分的期待。在李增光看來,目前用于存儲冷數(shù)據(jù)的2U12存儲服務器如果采用異形主板,還有機會提供更高的存儲密度,而對冷數(shù)據(jù)和熱數(shù)據(jù)進行更為高效的分層存儲上,目前宜搜采用的解決方案還有更多優(yōu)化的機會?!盎诓粩噙M步的英特爾數(shù)據(jù)中心解決方案,我們也會在為改善互聯(lián)網(wǎng)客戶使用體驗的道路上不斷創(chuàng)新?!彼硎?。
                      原文閱讀:http://www.spn.com.cn/news/20140711/45397.html