百大专升本

　　褰撲笟鍔″彂灞曞埌涓?瀹氳妯★紝瀹炴椂鏁版嵁浠撳簱鏄竴涓繀瑕佺殑鍩虹鏈嶅姟銆備粠鏁版嵁椹卞姩鏂归潰鑰冭檻锛屽缁村疄鏃舵暟鎹垎鏋愮郴缁熺殑閲嶈鎬т篃涓嶈█鑰屽柣銆備絾鏄綋鏁版嵁閲忓法澶х殑鎯呭喌涓嬶紝鎷胯吘璁湅鐐规潵璇达紝涓?澶╀笂鎶ョ殑鏁版嵁閲忚揪鍒颁竾浜跨骇鐨勮妯★紝瑕佸疄鐜版瀬浣庡欢杩熺殑瀹炴椂璁＄畻鍜屼簹绉掔骇鐨勫缁村疄鏃舵煡璇㈡槸鏈夋妧鏈寫鎴樼殑銆傛湰鏂囧皢浠嬬粛涓?涓嬩俊鎭祦鍦烘櫙涓嬶紝鑵捐鐪嬬偣鐨勫疄鏃舵暟鎹粨搴撳拰澶氱淮瀹炴椂鏁版嵁鍒嗘瀽绯荤粺鐨勬妧鏈灦鏋勩??

　　鎺ㄨ崘鍚屽10鍒嗛挓鍓嶄笂浜嗕竴涓帹鑽愮瓥鐣ワ紝鎯崇煡閬撳湪涓嶅悓浜虹兢鐨勬帹鑽愭晥鏋滄?庝箞鏍凤紵

　　杩愯惀鍚屽鎯崇煡閬擄紝鍦ㄥ箍涓滅渷鐨勭敤鎴蜂腑锛屾渶鐏殑骞夸笢鍦板煙鍐呭鏄摢浜涳紝鏂逛究鍋氬湴鍩烶ush銆?

　　瀹℃牳鍚屽鎯崇煡閬擄紝杩囧幓5鍒嗛挓锛屾父鎴忕被琚妇鎶ユ渶澶氱殑鍐呭鍜岃处鍙锋槸鍝簺锛?

　　鑰佹澘鍙兘鎯充簡瑙ｏ紝杩囧幓10鍒嗛挓鏈夊灏戠敤鎴峰湪鐪嬬偣娑堣垂浜嗗唴瀹癸紝瀵规秷璐逛汉缇ゆ湁涓?涓畯瑙備簡瑙ｃ??

　　1.绂荤嚎鏁版嵁鍒嗘瀽骞冲彴鑳藉惁婊¤冻杩欎簺闇?姹傦紝缁撹鏄笉鑳芥弧瓒炽?傜绾挎暟鎹垎鏋愬钩鍙颁笉琛岀殑鍘熷洜濡備笅锛?

　　C渚ф暟鎹笂鎶ヨ繃鏉ワ紝闇?瑕佺粡杩嘢park鐨勫灞傜绾胯绠楋紝鏈?缁堢粨鏋滃嚭搴撳埌Mysql鎴栬?匛S鎻愪緵缁欑绾垮垎鏋愬钩鍙版煡璇€?傝繖涓繃绋嬬殑寤舵椂鏈?灏?3-6涓皬鏃讹紝鐩墠姣旇緝甯歌鐨勯兘鏄彁渚涢殧澶╃殑鏌ヨ锛屾墍浠ュ緢澶氬疄鏃舵?ц姹傞珮鐨勪笟鍔″満鏅兘鏄笉鑳芥弧瓒崇殑锛? 鍙︿竴涓棶棰樻槸锛岃吘璁湅鐐圭殑鏁版嵁閲忓お澶э紝甯︽潵鐨勪笉绋冲畾鎬т篃姣旇緝澶э紝缁忓父浼氭湁棰勬枡涓嶅埌鐨勫欢杩熴?傛墍浠ワ紝绂荤嚎鍒嗘瀽骞冲彴鏄棤娉曟弧瓒冲緢澶氶渶姹傜殑銆?

　　2.瀹炴椂鏁版嵁鍒嗘瀽骞冲彴鐨勮瘽锛屼簨涓氱兢鍐呴儴鎻愪緵浜嗗噯瀹炴椂鏁版嵁鏌ヨ鐨勫姛鑳斤紝搴曞眰鎶?鏈敤鐨勬槸Kudu+Impala锛孖mpala铏界劧鏄疢PP鏋舵瀯鐨勫ぇ鏁版嵁璁＄畻寮曟搸锛屽苟涓旇闂互鍒楀紡瀛樺偍鏁版嵁鐨凨udu銆備絾鏄浜庡疄鏃舵暟鎹垎鏋愬満鏅潵璇达紝鏌ヨ鍝嶅簲鐨勯?熷害鍜屾暟鎹殑寤惰繜閮借繕鏄瘮杈冮珮锛屾煡璇竴娆″疄鏃禗AU锛岃繑鍥炵粨鏋滆?楁椂鑷冲皯鍑犲垎閽燂紝鏃犳硶鎻愪緵鑹ソ鐨勪氦浜掑紡鐢ㄦ埛浣撻獙銆?

　　鎵?浠ワ紙Kudu+Impala锛夎繖绉嶉?氱敤澶ф暟鎹鐞嗘鏋剁殑閫熷害浼樺娍鏇村鐨勬槸鐩告瘮锛圫park+Hdfs锛夎繖绉嶇绾垮垎鏋愭鏋舵潵璇寸殑锛屽浜庢垜浠繖涓疄鏃舵?ц姹傛洿楂樼殑鍦烘櫙锛屾槸鏃犳硶婊¤冻鐨勩??

　　浣滆?呭彂鏂囩殑鍐呭琚唴瀹逛腑蹇冨紩鍏ワ紝缁忚繃鍐呭瀹℃牳閾捐矾锛屽惎鐢ㄦ垨鑰呬笅鏋躲?傚惎鐢ㄧ殑鍐呭缁欏埌鎺ㄨ崘绯荤粺鍜岃繍钀ョ郴缁燂紝鐒跺悗鎺ㄨ崘绯荤粺鍜岃繍钀ョ郴缁熷皢鍐呭杩涜C渚у垎鍙戙?傚唴瀹瑰垎鍙戠粰C渚х敤鎴蜂箣鍚庯紝鐢ㄦ埛浼氫骇鐢熷悇绉嶈涓猴紝鏇濆厜銆佺偣鍑汇?佷妇鎶ョ瓑锛岄?氳繃鍩嬬偣涓婃姤瀹炴椂鎺ュ叆鍒版秷鎭槦鍒椾腑銆?

　　绗竴閮ㄥ垎鏋勫缓浜嗕竴涓吘璁湅鐐圭殑瀹炴椂鏁版嵁浠撳簱锛涚浜岄儴鍒嗗氨鏄熀浜嶰LAP瀛樺偍寮曟搸锛屽紑鍙戜簡澶氱淮瀹炴椂鏁版嵁鍒嗘瀽绯荤粺銆?

　　鎴戜滑涓轰粈涔堣鏋勫缓瀹炴椂鏁颁粨锛屽洜涓哄師濮嬬殑涓婃姤鏁版嵁閲忛潪甯稿ぇ锛屼竴澶╀笂鎶ュ嘲鍊煎氨鏈変笂涓囦嚎鏉°?傝?屼笖涓婃姤鏍煎紡娣蜂贡銆傜己涔忓唴瀹圭淮搴︿俊鎭?佺敤鎴风敾鍍忎俊鎭紝涓嬫父娌″姙娉曠洿鎺ヤ娇鐢ㄣ?傝?屾垜浠彁渚涚殑瀹炴椂鏁颁粨锛屾槸鏍规嵁鑵捐鐪嬬偣淇℃伅娴佺殑涓氬姟鍦烘櫙锛岃繘琛屼簡鍐呭缁村害鐨勫叧鑱旓紝鐢ㄦ埛鐢诲儚鐨勫叧鑱旓紝鍚勭绮掑害鐨勮仛鍚堬紝涓嬫父鍙互闈炲父鏂逛究鐨勪娇鐢ㄥ疄鏃舵暟鎹??

　　閭ｅ氨鐪嬩笅鎴戜滑澶氱淮瀹炴椂鏁版嵁鍒嗘瀽绯荤粺鐨勬柟妗堥?夊瀷锛岄?夊瀷鎴戜滑瀵规瘮浜嗚涓氬唴鐨勯鍏堟柟妗堬紝閫夋嫨浜嗘渶绗﹀悎鎴戜滑涓氬姟鍦烘櫙鐨勬柟妗堛??

　　绗竴鍧楁槸瀹炴椂鏁颁粨鐨勯?夊瀷锛屾垜浠?夋嫨鐨勬槸涓氱晫姣旇緝鎴愮啛鐨凩ambda鏋舵瀯锛屼粬鐨勪紭鐐规槸鐏垫椿鎬ч珮銆佸閿欐?ч珮銆佹垚鐔熷害楂樺拰杩佺Щ鎴愭湰浣庯紱缂虹偣鏄疄鏃躲?佺绾挎暟鎹敤涓ゅ浠ｇ爜锛屽彲鑳戒細瀛樺湪涓?涓彛寰勪慨鏀逛簡锛屽彟涓?涓病鏀圭殑闂锛屾垜浠瘡澶╅兘鏈夊仛鏁版嵁瀵硅处鐨勫伐浣滐紝濡傛灉鏈夊紓甯镐細杩涜鍛婅銆?

　　绗簩鍧楁槸瀹炴椂璁＄畻寮曟搸閫夊瀷锛屽洜涓篎link璁捐涔嬪垵灏辨槸涓轰簡娴佸鐞嗭紝SparkStreaming涓ユ牸鏉ヨ杩樻槸寰壒澶勭悊锛孲trom鐢ㄧ殑宸茬粡涓嶅浜嗐?傚啀鐪婩link鍏锋湁Exactly-once鐨勫噯纭?с?佽交閲忕骇Checkpoint瀹归敊鏈哄埗銆佷綆寤舵椂楂樺悶鍚愬拰鏄撶敤鎬ч珮鐨勭壒鐐癸紝鎴戜滑閫夋嫨浜咶link浣滀负瀹炴椂璁＄畻寮曟搸銆?

　　绗笁鍧楁槸瀹炴椂瀛樺偍寮曟搸锛屾垜浠殑瑕佹眰灏辨槸闇?瑕佹湁缁村害绱㈠紩銆佹敮鎸侀珮骞跺彂銆侀鑱氬悎銆侀珮鎬ц兘瀹炴椂澶氱淮OLAP鏌ヨ銆傚彲浠ョ湅鍒帮紝Hbase銆乀dsql鍜孍S閮戒笉鑳芥弧瓒宠姹傦紝Druid鏈変竴涓己闄凤紝瀹冩槸鎸夌収鏃跺簭鍒掑垎Segment锛屾棤娉曞皢鍚屼竴涓唴瀹癸紝瀛樻斁鍦ㄥ悓涓?涓猄egment涓婏紝璁＄畻鍏ㄥ眬TopN鍙兘鏄繎浼煎?硷紝鎵?浠ユ垜浠?夋嫨浜嗘渶杩戜袱骞村ぇ鐏殑MPP鏁版嵁搴撳紩鎿嶤lickHouse銆?

　　鍗冧竾绾?/s鐨勬捣閲忔暟鎹浣曞疄鏃舵帴鍏ワ紝骞朵笖杩涜鏋佷綆寤惰繜缁磋〃鍏宠仈锛? 瀹炴椂瀛樺偍寮曟搸濡備綍鏀寔楂樺苟鍙戝啓鍏ャ?侀珮鍙敤鍒嗗竷寮忓拰楂樻?ц兘绱㈠紩鏌ヨ锛屾槸姣旇緝闅剧殑銆?

　　鍓嶇閲囩敤鐨勬槸寮?婧愮粍浠禔nt Design锛屽埄鐢ㄤ簡Nginx鏈嶅姟鍣紝閮ㄧ讲闈欐?侀〉闈紝骞跺弽鍚戜唬鐞嗕簡娴忚鍣ㄧ殑璇锋眰鍒板悗鍙版湇鍔″櫒涓娿??

　　鍚庡彴鏈嶅姟鏄熀浜庤吘璁嚜鐮旂殑RPC鍚庡彴鏈嶅姟妗嗘灦鍐欑殑锛屽苟涓斾細杩涜涓?浜涗簩绾х紦瀛樸??

　　鎺ュ叆灞備富瑕佹槸浠庡崈涓囩骇/s鐨勫師濮嬫秷鎭槦鍒椾腑锛屾媶鍒嗗嚭涓嶅悓琛屼负鏁版嵁鐨勫井闃熷垪锛屾嬁鐪嬬偣鐨勮棰戞潵璇达紝鎷嗗垎杩囧悗锛屾暟鎹氨鍙湁鐧句竾绾?/s浜嗭紱 瀹炴椂璁＄畻灞備富瑕佽礋璐ｏ紝澶氳琛屼负娴佹按鏁版嵁杩涜琛岃浆鍒楋紝瀹炴椂鍏宠仈鐢ㄦ埛鐢诲儚鏁版嵁鍜屽唴瀹圭淮搴︽暟鎹紱 瀹炴椂鏁颁粨瀛樺偍灞備富瑕佹槸璁捐鍑虹鍚堢湅鐐逛笟鍔＄殑锛屼笅娓稿ソ鐢ㄧ殑瀹炴椂娑堟伅闃熷垪銆傛垜浠殏鏃舵彁渚涗簡涓や釜娑堟伅闃熷垪锛屼綔涓哄疄鏃舵暟浠撶殑涓ゅ眰銆備竴灞侱WM灞傛槸鍐呭ID-鐢ㄦ埛ID绮掑害鑱氬悎鐨勶紝灏辨槸涓?鏉℃暟鎹寘鍚唴瀹笽D-鐢ㄦ埛ID杩樻湁B渚у唴瀹规暟鎹?丆渚х敤鎴锋暟鎹拰鐢ㄦ埛鐢诲儚鏁版嵁锛涘彟涓?灞傛槸DWS灞傦紝鏄唴瀹笽D绮掑害鑱氬悎鐨勶紝涓?鏉℃暟鎹寘鍚唴瀹笽D锛孊渚ф暟鎹拰C渚ф暟鎹?傚彲浠ョ湅鍒板唴瀹笽D-鐢ㄦ埛ID绮掑害鐨勬秷鎭槦鍒楁祦閲忚繘涓?姝ュ噺灏忓埌鍗佷竾绾?/s锛屽唴瀹笽D绮掑害鐨勬洿鏄竾绾?/s锛屽苟涓旀牸寮忔洿鍔犳竻鏅帮紝缁村害淇℃伅鏇村姞涓板瘜銆?

　　瀹炴椂鍐欏叆灞備富瑕佹槸璐熻矗Hash璺敱灏嗘暟鎹啓鍏ワ紱 OLAP瀛樺偍灞傚埄鐢∕PP瀛樺偍寮曟搸锛岃璁＄鍚堜笟鍔＄殑绱㈠紩鍜岀墿鍖栬鍥撅紝楂樻晥瀛樺偍娴烽噺鏁版嵁锛? 鍚庡彴鎺ュ彛灞傛彁渚涢珮鏁堢殑澶氱淮瀹炴椂鏌ヨ鎺ュ彛銆?

　　杩欎釜绯荤粺鏈?澶嶆潅鐨勪袱鍧楋紝瀹炴椂璁＄畻鍜屽疄鏃跺瓨鍌ㄣ?傚厛浠嬬粛瀹炴椂璁＄畻閮ㄥ垎锛氬垎涓哄疄鏃跺叧鑱斿拰瀹炴椂鏁颁粨銆?

　　瀹炴椂缁磋〃鍏宠仈杩欎竴鍧楅毦搴﹀湪浜庛?傜櫨涓囩骇/s鐨勫疄鏃舵暟鎹祦锛屽鏋滅洿鎺ュ幓鍏宠仈Hbase锛?1鍒嗛挓鐨勬暟鎹紝鍏宠仈瀹孒base鑰楁椂鏄皬鏃剁骇鐨勶紝浼氬鑷存暟鎹欢杩熶弗閲嶃??

　　绗竴涓槸锛屽湪Flink瀹炴椂璁＄畻鐜妭锛屽厛鎸夌収1鍒嗛挓杩涜浜嗙獥鍙ｈ仛鍚堬紝灏嗙獥鍙ｅ唴澶氳琛屼负鏁版嵁杞竴琛屽鍒楃殑鏁版嵁鏍煎紡锛岀粡杩囪繖涓?姝ユ搷浣滐紝鍘熸湰灏忔椂绾х殑鍏宠仈鑰楁椂涓嬮檷鍒颁簡鍗佸嚑鍒嗛挓锛屼絾鏄繕鏄笉澶熺殑銆?

　　绗簩涓槸锛屽湪璁块棶Hbase鍐呭涔嬪墠璁剧疆涓?灞俁edis缂撳瓨锛屽洜涓?1000鏉℃暟鎹闂瓾base鏄绾х殑锛岃?岃闂甊edis鏄绉掔骇鐨勶紝璁块棶Redis鐨勯?熷害鍩烘湰鏄闂瓾base鐨?1000鍊嶃?備负浜嗛槻姝㈣繃鏈熺殑鏁版嵁娴垂缂撳瓨锛岀紦瀛樿繃鏈熸椂闂磋缃垚24灏忔椂锛屽悓鏃堕?氳繃鐩戝惉鍐橦base Proxy鏉ヤ繚璇佺紦瀛樼殑涓?鑷存?с?傝繖鏍峰皢璁块棶鏃堕棿浠庡崄鍑犲垎閽熷彉鎴愪簡绉掔骇銆?

　　绗笁涓槸锛屼笂鎶ヨ繃绋嬩腑浼氫笂鎶ヤ笉灏戦潪甯歌鍐呭ID锛岃繖浜涘唴瀹笽D鍦ㄥ唴瀹笻base涓槸涓嶅瓨鍌ㄧ殑锛屼細閫犳垚缂撳瓨绌块?忕殑闂銆傛墍浠ュ湪瀹炴椂璁＄畻鐨勬椂鍊欙紝鎴戜滑鐩存帴杩囨护鎺夎繖浜涘唴瀹笽D锛岄槻姝㈢紦瀛樼┛閫忥紝鍙堝噺灏戜竴浜涙椂闂淬??

　　绗洓涓槸锛屽洜涓鸿缃簡瀹氭椂缂撳瓨锛屼細寮曞叆涓?涓紦瀛橀洩宕╃殑闂銆備负浜嗛槻姝㈤洩宕╋紝鎴戜滑鍦ㄥ疄鏃惰绠椾腑锛岃繘琛屼簡鍓婂嘲濉胺鐨勬搷浣滐紝閿欏紑璁剧疆缂撳瓨鐨勬椂闂淬??

　　鍙互鐪嬪埌锛屼紭鍖栧墠鍚庯紝鏁版嵁閲忎粠鐧句嚎绾у噺灏戝埌浜嗗崄浜跨骇锛岃?楁椂浠庡皬鏃剁骇鍑忓皯鍒颁簡鏁板崄绉掞紝鍑忓皯99%銆?

　　瀹炴椂鏁颁粨鐨勯毦搴﹀湪浜庯細瀹冨浜庢瘮杈冩柊鐨勯鍩燂紝骞朵笖鍚勪釜鍏徃鍚勪釜涓氬姟宸窛姣旇緝澶э紝鎬庝箞鑳借璁″嚭鏂逛究锛屽ソ鐢紝绗﹀悎鐪嬬偣涓氬姟鍦烘櫙鐨勫疄鏃舵暟浠撴槸鏈夐毦搴︾殑銆?

　　鍏堢湅涓?涓嬪疄鏃舵暟浠撳仛浜嗕粈涔堬紝瀹炴椂鏁颁粨瀵瑰灏辨槸鍑犱釜娑堟伅闃熷垪锛屼笉鍚岀殑娑堟伅闃熷垪閲岄潰瀛樻斁鐨勫氨鏄笉鍚岃仛鍚堢矑搴︾殑瀹炴椂鏁版嵁锛屽寘鎷唴瀹笽D銆佺敤鎴稩D銆丆渚ц涓烘暟鎹?丅渚у唴瀹圭淮搴︽暟鎹拰鐢ㄦ埛鐢诲儚鏁版嵁绛夈??

　　鎴戜滑鏄?庝箞鎼缓瀹炴椂鏁颁粨鐨勶紝灏辨槸涓婇潰浠嬬粛鐨勫疄鏃惰绠楀紩鎿庣殑杈撳嚭锛屾斁鍒版秷鎭槦鍒椾腑淇濆瓨锛屽彲浠ユ彁渚涚粰涓嬫父澶氱敤鎴峰鐢ㄣ??

　　鎴戜滑鍙互鐪嬩笅锛屽湪鎴戜滑寤鸿瀹炴椂鏁版嵁浠撳簱鍓嶅悗锛屽紑鍙戜竴涓疄鏃跺簲鐢ㄧ殑鍖哄埆銆傛病鏈夋暟浠撶殑鏃跺?欙紝鎴戜滑闇?瑕佹秷璐瑰崈涓囩骇/s鐨勫師濮嬮槦鍒楋紝杩涜澶嶆潅鐨勬暟鎹竻娲楋紝鐒跺悗鍐嶈繘琛岀敤鎴风敾鍍忓叧鑱斻?佸唴瀹圭淮搴﹀叧鑱旓紝鎵嶈兘鎷垮埌绗﹀悎瑕佹眰鏍煎紡鐨勫疄鏃舵暟鎹紝寮?鍙戝拰鎵╁睍鐨勬垚鏈兘浼氭瘮杈冮珮锛屽鏋滄兂寮?鍙戜竴涓柊鐨勫簲鐢紝鍙堣璧颁竴閬嶈繖涓祦绋嬨?傛湁浜嗘暟浠撲箣鍚庯紝濡傛灉鎯冲紑鍙戝唴瀹笽D绮掑害鐨勫疄鏃跺簲鐢紝灏辩洿鎺ョ敵璇稵PS涓囩骇/s鐨凞WS灞傜殑娑堟伅闃熷垪銆傚紑鍙戞垚鏈彉浣庡緢澶氾紝璧勬簮娑堣?楀皬寰堝锛屽彲鎵╁睍鎬т篃寮哄緢澶氥??

　　鐪嬩釜瀹為檯渚嬪瓙锛屽紑鍙戞垜浠郴缁熺殑瀹炴椂鏁版嵁澶у睆锛屽師鏈渶瑕佽繘琛屽涓婃墍鏈夋搷浣滐紝鎵嶈兘鎷垮埌鏁版嵁銆傜幇鍦ㄥ彧闇?瑕佹秷璐笵WS灞傛秷鎭槦鍒楋紝鍐欎竴鏉link SQL鍗冲彲锛屼粎娑堣??2涓猚pu鏍稿績锛?1G鍐呭瓨銆?

　　鍙互鐪嬪埌锛屼互50涓秷璐硅?呬负渚嬶紝寤虹珛瀹炴椂鏁颁粨鍓嶅悗锛屼笅娓稿紑鍙戜竴涓疄鏃跺簲鐢紝鍙互鍑忓皯98%鐨勮祫婧愭秷鑰椼?傚寘鎷绠楄祫婧愶紝瀛樺偍璧勬簮锛屼汉鍔涙垚鏈拰寮?鍙戜汉鍛樺涔犳帴鍏ユ垚鏈瓑绛夈?傚苟涓旀秷璐硅?呰秺澶氾紝鑺傜渷瓒婂銆傚氨鎷縍edis瀛樺偍杩欎竴閮ㄥ垎鏉ヨ锛屼竴涓湀灏辫兘鐪佷笅涓婄櫨涓囦汉姘戝竵銆?

　　鎴戜滑杩欓噷鍚彇鐨勬槸Clickhouse瀹樻柟鐨勫缓璁紝鍊熷姪ZK瀹炵幇楂樺彲鐢ㄧ殑鏂规銆傛暟鎹啓鍏ヤ竴涓垎鐗囷紝浠呭啓鍏ヤ竴涓壇鏈紝鐒跺悗鍐嶅啓ZK锛岄?氳繃ZK鍛婅瘔鍚屼竴涓垎鐗囩殑鍏朵粬鍓湰锛屽叾浠栧壇鏈啀杩囨潵鎷夊彇鏁版嵁锛屼繚璇佹暟鎹竴鑷存?с??

　　杩欓噷娌℃湁閫夌敤娑堟伅闃熷垪杩涜鏁版嵁鍚屾锛屾槸鍥犱负ZK鏇村姞杞婚噺绾с?傝?屼笖鍐欑殑鏃跺?欙紝浠绘剰鍐欎竴涓壇鏈紝鍏跺畠鍓湰閮借兘澶熼?氳繃ZK鑾峰緱涓?鑷寸殑鏁版嵁銆傝?屼笖灏辩畻鍏跺畠鑺傜偣绗竴娆℃潵鑾峰彇鏁版嵁澶辫触浜嗭紝鍚庨潰鍙鍙戠幇瀹冭窡ZK涓婅褰曠殑鏁版嵁涓嶄竴鑷达紝灏变細鍐嶆灏濊瘯鑾峰彇鏁版嵁锛屼繚璇佷竴鑷存?с??

　　鏁版嵁鍐欏叆閬囧埌鐨勭涓?涓棶棰樻槸锛屾捣閲忔暟鎹洿鎺ュ啓鍏lickhouse鐨勮瘽锛屼細瀵艰嚧ZK鐨凲PS澶珮锛岃В鍐虫柟妗堟槸鏀圭敤Batch鏂瑰紡鍐欏叆銆侭atch璁剧疆澶氬ぇ鍛紝Batch澶皬鐨勮瘽缂撹В涓嶄簡ZK鐨勫帇鍔涳紝Batch涔熶笉鑳藉お澶э紝涓嶇劧涓婃父鍐呭瓨鍘嬪姏澶ぇ锛岄?氳繃瀹為獙锛屾渶缁堟垜浠?夌敤浜嗗ぇ灏忓嚑鍗佷竾鐨凚atch銆?

　　绗簩涓棶棰樻槸锛岄殢鐫?鏁版嵁閲忕殑澧為暱锛屽崟QQ鐪嬬偣鐨勮棰戝唴瀹规瘡澶╁彲鑳藉啓鍏ョ櫨浜跨骇鐨勬暟鎹紝榛樿鏂规鏄啓涓?寮犲垎甯冨紡琛紝杩欏氨浼氶?犳垚鍗曞彴鏈哄櫒鍑虹幇纾佺洏鐨勭摱棰堬紝灏ゅ叾鏄疌lickhouse搴曞眰杩愮敤鐨勬槸Mergetree锛屽師鐞嗙被浼间簬Hbase銆丷ocketsDb鐨勫簳灞侺SM-Tree銆傚湪鍚堝苟鐨勮繃绋嬩腑浼氬瓨鍦ㄥ啓鏀惧ぇ鐨勯棶棰橈紝鍔犻噸纾佺洏鍘嬪姏銆傚嘲鍊兼瘡鍒嗛挓鍑犲崈涓囨潯鏁版嵁锛屽啓瀹岃?楁椂鍑犲崄绉掞紝濡傛灉姝ｅ湪鍋歁erge锛屽氨浼氶樆濉炲啓鍏ヨ姹傦紝鏌ヨ涔熶細闈炲父鎱€?傛垜浠仛鐨勪袱涓紭鍖栨柟妗堬細涓?鏄纾佺洏鍋歊aid锛屾彁鍗囩鐩樼殑IO锛涗簩鏄湪鍐欏叆涔嬪墠杩涜鍒嗚〃锛岀洿鎺ュ垎寮?鍐欏叆鍒颁笉鍚岀殑鍒嗙墖涓婏紝纾佺洏鍘嬪姏鐩存帴鍙樹负1/N銆?

　　绗笁涓棶棰樻槸锛岃櫧鐒舵垜浠啓鍏ユ寜鐓у垎鐗囪繘琛屼簡鍒掑垎锛屼絾鏄繖閲屽紩鍏ヤ簡涓?涓垎甯冨紡绯荤粺甯歌鐨勯棶棰橈紝灏辨槸灞?閮ㄧ殑Top骞堕潪鍏ㄥ眬Top鐨勯棶棰樸?傛瘮濡傚悓涓?涓唴瀹笽D鐨勬暟鎹惤鍦ㄤ簡涓嶅悓鐨勫垎鐗囦笂锛岃绠楀叏灞?Top100闃呰鐨勫唴瀹笽D锛屾湁涓?涓唴瀹笽D鍦ㄥ垎鐗?1涓婃槸Top100锛屼絾鏄湪鍏跺畠鍒嗙墖涓婁笉鏄疶op100锛屽鑷存眹鎬荤殑鏃跺?欙紝浼氫涪澶变竴閮ㄥ垎鏁版嵁锛屽奖鍝嶆渶缁堢粨鏋溿?傛垜浠仛鐨勪紭鍖栨槸鍦ㄥ啓鍏ヤ箣鍓嶅姞涓婁竴灞傝矾鐢憋紝灏嗗悓涓?涓唴瀹笽D鐨勮褰曪紝鍏ㄩ儴璺敱鍒板悓涓?涓垎鐗囦笂锛岃В鍐充簡璇ラ棶棰樸??

　　Clickhouse楂樻?ц兘鏌ヨ鐨勪竴涓叧閿偣鏄█鐤忕储寮曘?傜█鐤忕储寮曡繖涓璁″氨寰堟湁璁茬┒锛岃璁″緱濂藉彲浠ュ姞閫熸煡璇紝璁捐涓嶅ソ鍙嶈?屼細褰卞搷鏌ヨ鏁堢巼銆傛垜鏍规嵁鎴戜滑鐨勪笟鍔″満鏅紝鍥犱负鎴戜滑鐨勬煡璇㈠ぇ閮ㄥ垎閮芥槸鏃堕棿鍜屽唴瀹笽D鐩稿叧鐨勶紝姣斿璇达紝鏌愪釜鍐呭锛岃繃鍘籒鍒嗛挓鍦ㄥ悇涓汉缇よ〃鐜板浣曪紵鎴戞寜鐓ф棩鏈燂紝鍒嗛挓绮掑害鏃堕棿鍜屽唴瀹笽D寤虹珛浜嗙█鐤忕储寮曘?傞拡瀵规煇涓唴瀹圭殑鏌ヨ锛屽缓绔嬬█鐤忕储寮曚箣鍚庯紝鍙互鍑忓皯99%鐨勬枃浠舵壂鎻忋??

　　杩樻湁涓?涓棶棰樺氨鏄紝鎴戜滑鐜板湪鏁版嵁閲忓お澶э紝缁村害澶銆傛嬁QQ鐪嬬偣鐨勮棰戝唴瀹规潵璇达紝涓?澶╂祦姘存湁涓婄櫨浜挎潯锛屾湁浜涚淮搴︽湁鍑犵櫨涓被鍒?傚鏋滀竴娆℃?ф妸鎵?鏈夌淮搴﹁繘琛岄鑱氬悎锛屾暟鎹噺浼氭寚鏁拌啫鑳?锛屾煡璇㈠弽鑰屽彉鎱紝骞朵笖浼氬崰鐢ㄥぇ閲忓唴瀛樼┖闂淬?傛垜浠殑浼樺寲锛岄拡瀵逛笉鍚岀殑缁村害锛屽缓绔嬪搴旂殑棰勮仛鍚堢墿鍖栬鍥撅紝鐢ㄧ┖闂存崲鏃堕棿锛岃繖鏍峰彲浠ョ缉鐭煡璇㈢殑鏃堕棿銆?

　　鍒嗗竷寮忚〃鏌ヨ杩樹細鏈変竴涓棶棰橈紝鏌ヨ鍗曚釜鍐呭ID鐨勪俊鎭紝鍒嗗竷寮忚〃浼氬皢鏌ヨ涓嬪彂鍒版墍鏈夌殑鍒嗙墖涓婏紝鐒跺悗鍐嶈繑鍥炴煡璇㈢粨鏋滆繘琛屾眹鎬汇?傚疄闄呬笂锛屽洜涓哄仛杩囪矾鐢憋紝涓?涓唴瀹笽D鍙瓨鍦ㄤ簬涓?涓垎鐗囦笂锛屽墿涓嬬殑鍒嗙墖閮藉湪绌鸿窇銆傞拡瀵硅繖绫绘煡璇紝鎴戜滑鐨勪紭鍖栨槸鍚庡彴鎸夌収鍚屾牱鐨勮鍒欏厛杩涜璺敱锛岀洿鎺ユ煡璇㈢洰鏍囧垎鐗囷紝杩欐牱鍑忓皯浜哊-1/N鐨勮礋杞斤紝鍙互澶ч噺缂╃煭鏌ヨ鏃堕棿銆傝?屼笖鐢变簬鎴戜滑鏄彁渚涚殑OLAP鏌ヨ锛屾暟鎹弧瓒虫渶缁堜竴鑷存?у嵆鍙紝閫氳繃涓讳粠鍓湰璇诲啓鍒嗙锛屽彲浠ヨ繘涓?姝ユ彁鍗囨?ц兘銆?

　　鎴戜滑鍦ㄥ悗鍙拌繕鍋氫簡涓?涓?1鍒嗛挓鐨勬暟鎹紦瀛橈紝閽堝鐩稿悓鏉′欢鏌ヨ锛屽悗鍙板氨鐩存帴杩斿洖浜嗐??

　　姣斿Hbase锛屽師濮嬫暟鎹兘瀛樻斁鍦℉DFS涓婏紝鎵╁鍙槸Region Server鎵╁锛屼笉娑夊強鍘熷鏁版嵁鐨勮縼绉汇?備絾鏄疌lickhouse鐨勬瘡涓垎鐗囨暟鎹兘鏄湪鏈湴锛屾槸涓?涓瘮杈冨簳灞傚瓨鍌ㄥ紩鎿庯紝涓嶈兘鍍廐base閭ｆ牱鏂逛究鎵╁銆?

　　Redis鏄搱甯屾Ы杩欑绫讳技涓?鑷存?у搱甯岀殑鏂瑰紡锛屾槸姣旇緝缁忓吀鍒嗗竷寮忕紦瀛樼殑鏂规銆俁edis slot鍦≧ehash鐨勮繃绋嬩腑铏界劧瀛樺湪鐭殏鐨刟sk璇讳笉鍙敤锛屼絾鏄?讳綋鏉ヨ杩佺Щ鏄瘮杈冩柟渚跨殑锛屼粠鍘焗[0]杩佺Щ鍒癶[1]锛屾渶鍚庡啀鍒犻櫎h[0]銆備絾鏄疌lickhouse澶ч儴鍒嗛兘鏄疧LAP鎵归噺鏌ヨ锛屼笉鏄偣鏌ワ紝鑰屼笖鐢变簬鍒楀紡瀛樺偍锛屼笉鏀寔鍒犻櫎鐨勭壒鎬э紝涓?鑷存?у搱甯岀殑鏂规涓嶆槸寰堥?傚悎銆?

　　鐩墠鎵╁鐨勬柟妗堟槸锛屽彟澶栨秷璐逛竴浠芥暟鎹紝鍐欏叆鏂癈lickhouse闆嗙兢锛屼袱涓泦缇や竴璧疯窇涓?娈垫椂闂达紝鍥犱负瀹炴椂鏁版嵁灏变繚瀛?3澶╋紝绛?3澶╀箣鍚庯紝鍚庡彴鏈嶅姟鐩存帴璁块棶鏂伴泦缇ゃ??

　　杩滆澶氱淮瀹炴椂鏁版嵁鍒嗘瀽绯荤粺锛氫簹绉掔骇鍝嶅簲澶氱淮鏉′欢鏌ヨ璇锋眰锛屽湪鏈懡涓紦瀛樻儏鍐典笅锛岃繃鍘?30鍒嗛挓鐨勬煡璇紝99%鐨勮姹傝?楁椂鍦?1绉掑唴锛涜繃鍘?24灏忔椂鐨勬煡璇紝90%鐨勮姹傝?楁椂鍦?5绉掑唴锛?99%鐨勮姹傝?楁椂鍦?10绉掑唴銆?

　　姣忔棩澶存潯銆佷笟鐣岃祫璁?佺儹鐐硅祫璁?佸叓鍗︾垎鏂欙紝鍏ㄥぉ璺熻釜寰崥鎾姤銆傚悇绉嶇垎鏂欍?佸唴骞曘?佽姳杈广?佽祫璁竴缃戞墦灏姐?傜櫨涓囦簰鑱旂綉绮変笣浜掑姩鍙備笌锛孴echWeb瀹樻柟寰崥鏈熷緟鎮ㄧ殑鍏虫敞銆?

　　5nm鍙?3nm鎺ㄥ姩 鍙扮Н鐢?2024鍙?2025骞翠骇鑳藉皢涓昏闆嗕腑鍦ㄥ彴鍗楃瀛﹀洯

　　2020鏁板瓧涓浗鎸囨暟鎶ュ憡锛氬幓骞寸敤浜戦噺澧為?熻揪118% 鍖椾笂骞块渶姹傛渶鏃?

　　缇庡浗浜戣绠楀叕鍙窼alesforce璁″垝瑁佸憳1000浜? 绾﹀崰鍏跺憳宸ユ?绘暟鐨?2%

　　vivo X50 Pro+alexanderwang闄愬畾鐗堝浘璧忥細榛戣壊涓庡够褰╃鎾? 鎵撻?犱笌浼椾笉鍚岀殑鏃跺皻鍗曞搧

　　鍗庝负鐣呬韩20 Pro鏄熸渤閾跺紑绠卞浘璧忥細鍙岀幓鐠冩満韬?+6.5鑻卞鐝嶇彔灞? 娣卞緱骞磋交浜哄枩鐖?

　　瓒呮劅鐭ュ緯鍗′簲鎽勫啀鏀?褰卞儚宸呭嘲 2020鏈?寮洪珮绔棗鑸板崕涓篜40 Pro+鍥捐祻