浣滆€咃細Richard_Yi鏉ユ簮锛歨ttps://ricstudio.top/archive...銆婅绠楁満绉戝涓殑鎵€鏈夐棶棰橀兘鍙互閫氳繃鍙︿竴涓眰娆＄殑闂存帴鎬ф潵瑙ｅ喅銆傘€嬧€揇avidJ.Wheeler鈥滆绠楁満涓栫晫鏄潈琛＄殑鑹烘湳鈥?銆傚墠瑷€鏈€杩戞帴瑙︾殑鍑犱釜椤圭洰閮戒娇鐢ㄤ簡Elasticsearch锛堜互涓嬬畝绉癊S锛夋潵瀛樺偍鏁版嵁鍜屾悳绱㈠垎鏋愭暟鎹紝鎵€浠ュES鏈夋墍浜嗚В銆傛湰鏂囨暣鐞嗚嚜宸辩殑鎶€鏈垎浜€傛湰鏂囦笉浼氶噸鐐逛粙缁岴S涓殑鍒嗗竷寮忔妧鏈拰鐩稿叧API鐨勪娇鐢紝鑰屾槸鐫€閲嶅垎浜€滃浣曞揩閫熻幏鍙朎S鈥濊繖涓瘽棰樸€傝繖涔熸槸鎴戝湪瀛︿範涔嬪墠瀵笶S鏈€鎰熷叴瓒ｇ殑閮ㄥ垎銆傛湰鏂囧ぇ鑷村寘鎷互涓嬪唴瀹癸細鍏充簬鎼滅储浼犵粺鍏崇郴鍨嬫暟鎹簱鍜孍S鎼滅储寮曟搸鍘熺悊鐨勫尯鍒€掓帓绱㈠紩璇﹁В鍊掓帓绱㈠紩闀夸粈涔堟牱瀛愶紙postinglist->termdic->termindex锛変竴浜涘皬鎶€宸у叧浜庤创瀛愬垪琛?FOR,RoaringBitmaps)濡備綍蹇€熷仛鑱斿悎鏌ヨ锛?.鍏充簬鎼滅储棣栧厛鎯宠薄涓€涓叧浜庢悳绱㈢殑鍦烘櫙銆傚亣璁炬垜浠鎼滅储涓€棣栬瘲鐨勫唴瀹逛腑甯︽湁鈥滃墠鈥濆瓧鐨勫彜璇椼€備娇鐢ㄤ紶缁熺殑鍏崇郴鏁版嵁搴撳拰ES鏈変粈涔堝尯鍒紵濡傛灉鐢∕ySQL杩欐牱鐨凴DBMS鏉ュ瓨鍌ㄥ彜璇楄瘝锛屾垜浠簲璇ョ敤杩欐牱鐨凷QL鏉ユ煡璇electnamefrompoemswherecontentlike"%鍓?";杩欑О涓洪『搴忔壂鎻忔柟娉曪紝闇€瑕侀亶鍘嗘墍鏈夎褰曡繘琛屽尮閰嶃€備笉浠呮晥鐜囦綆锛岃€屼笖鍦ㄦ悳绱㈢殑鏃跺€欎篃涓嶇鍚堟垜浠殑棰勬湡銆備緥濡傦紝鎴戜滑鍦ㄦ悳绱⑩€淎BCD鈥濈瓑鍏抽敭璇嶆椂锛岄€氬父甯屾湜鐪嬪埌鈥淎鈥濄€佲€淎B鈥濄€佲€淐D鈥濄€佲€淎BC鈥濈殑鎼滅储缁撴灉銆備簬鏄氨鏈変簡涓撲笟鐨勬悳绱㈠紩鎿庯紝姣斿鎴戜滑浠婂ぉ鐨勪富瑙掆€斺€擡S銆傛澶栵紝鎵€鏈塃S绯诲垪闈㈣瘯棰樺強绛旀鍧囧凡鏁寸悊銆傚井淇℃悳绱ava鎶€鏈爤锛屽悗鍙板彂閫侊細闈㈣瘯锛屽彲浠ュ湪绾块槄璇汇€傛悳绱㈠紩鎿庣殑鍘熺悊鎼滅储寮曟搸鐨勬悳绱㈠師鐞嗙畝鍗曟鎷彲浠ュ垎涓哄嚑涓楠わ紝鍐呭鐖彇锛屽仠鐢ㄨ瘝杩囨护锛屾瘮濡備竴浜涙棤鐢ㄧ殑璇皵璇?杩炶瘝濡傗€滅殑鈥濃€滀簡鈥濓紝鍐呭鍒嗚瘝锛屽拰鍏抽敭璇嶆彁鍙栨牴鎹叧閿瘝鍒涘缓鍊掓帓绱㈠紩鐢ㄦ埛杈撳叆鍏抽敭璇嶈繘琛屾悳绱㈣繖閲屾垜浠紩鍏ヤ竴涓蹇碉紝涔熸槸鎴戜滑浠婂ぉ鍒嗘瀽鐨勯噸鐐光€斺€斿€掓帓绱㈠紩銆備篃鏄疎S鐨勬牳蹇冪煡璇嗙偣銆備簡瑙S鐨勫簲璇ョ煡閬擄紝ES鍙互璇存槸Lucene鐨勪竴涓皝瑁咃紝鍏朵腑鍊掓帓绱㈠紩鐨勫疄鐜版槸閫氳繃lucene鐨刯ar鍖呮彁渚涚殑API瀹炵幇鐨勶紝鎵€浠ユ彁鍒板€掓帓绱㈠紩鐨勫唴瀹逛笅闈㈠叾瀹炲氨鏄痩ucene閲岄潰鐨勬墍鏈夊唴瀹广€?.鍊掓帓绱㈠紩棣栧厛锛屾垜浠竴瀹氫笉鑳藉繕璁版垜浠墠闈㈡彁鍒扮殑鎼滅储闇€姹傘€傞鍏堟垜浠湅鐪嬪缓绔嬪€掓帓绱㈠紩鍚庢垜浠笂闈㈢殑鏌ヨ闇€姹備細鏄粈涔堟牱瀛愩€傝繖鏍凤紝涓€鏃︽垜浠緭鍏モ€滃墠闈⑩€濓紝鎴戜滑灏卞彲浠ュ埄鐢ㄥ€掓帓绱㈠紩锛岀洿鎺ュ畾浣嶅埌绗﹀悎鏌ヨ鏉′欢鐨勫彜璇楄瘝銆傚綋鐒讹紝杩欏彧鏄竴涓ぇ鐧借瘽锛岀敤鏉ユ弿杩板€掓帓绱㈠紩鐨勭畝鍗曞伐浣滃師鐞嗐€傚湪ES涓紝鍊掓帓绱㈠紩鍒板簳鏄粈涔堬紝瀹冩槸濡備綍瀛樺偍鐨勭瓑绛夛紝杩欎簺灏辨槸鍊掓帓绱㈠紩鐨勬湰璐ㄣ€?.鍑犱釜姒傚康鍦ㄨ繘鍏ヤ笅闈箣鍓嶏紝鍏堟弿杩板嚑涓墠缃蹇点€傛湳璇叧閿瘝鏄垜鑷繁鐨勮娉曘€傚湪ES涓紝鍏抽敭瀛楃О涓簍erm銆傝创瀛愬垪琛ㄨ繕鏄部鐢ㄤ笂闈㈢殑渚嬪瓙锛寋闈欓噹瀵猴紝鏈涘簮灞辩€戝竷}鏄瘝鏉♀€渂efore鈥濆搴旂殑鍒楄〃銆傚湪ES涓紝杩欎簺琚弿杩颁负鍖呭惈鐗瑰畾鏈鐨勬墍鏈塱d鏂囨。鐨勯泦鍚堛€傜敱浜庢暣鏁板彲浠ヨ楂樻晥鍘嬬缉锛屽洜姝ゆ暣鏁版渶閫傚悎浣滀负鏂囨。鐨勫敮涓€鏍囪瘑鏀惧湪postings鍒楄〃涓€侲S浼氬鐞嗚繖浜涘瓨鍌ㄧ殑鏂囨。锛屽苟灏嗗畠浠浆鎹㈡垚涓€涓敮涓€鐨勬暣鏁癷d銆傚啀璇磋杩欎釜id鐨勮寖鍥淬€侲S鍦ㄥ瓨鍌ㄦ暟鎹椂锛屼細灏嗘暟鎹瓨鍌ㄥ湪姣忎釜鍒嗙墖涓殑涓嶅悓娈典腑銆傝繖鏄竴涓瘮鍒嗙墖鏇村皬鐨勫垎鐗囧崟鍏冿紝杩欎簺鍒嗙墖浼氬畾鏈熷悎骞躲€傛瘡涓猻egment鏈€澶氫細瀛樺偍2^31涓枃妗ｏ紝姣忎釜鏂囨。閮戒細鍒嗛厤涓€涓敮涓€鐨刬d锛岃寖鍥翠粠0鍒?2^31)-1銆傜浉鍏冲悕璇嶅湪ES瀹樻柟鏂囨。涓兘鏈夋弿杩帮紝鍑哄鍙弬鑰冧互涓嬪弬鑰冭祫鏂欍€?.绱㈠紩鍐呴儴缁撴瀯涓婇潰浠嬬粛鐨勫€掓帓绱㈠紩鍙槸涓€涓緢绮楃暐鐨勬ā鍨嬨€傝窛绂荤湡姝ｇ敤浜庡疄闄呯敓浜ц繕宸緱寰堣繙銆傚湪瀹為檯鐢熶骇鍦烘櫙涓紝姣斿鏈€甯哥敤鐨凟S鐨勬棩蹇楀垎鏋愶紝鏃ュ織鍐呭鍒囧垎鍚庡彲浠ュ緱鍒板灏憈erm锛熼偅涔堝浣曞湪澶ч噺鐨勮瘝鏉′腑蹇€熸煡璇㈠嚭瀵瑰簲鐨勮瘝鏉″憿锛熼亶鍘嗗畠鏄剧劧鏄笉鐜板疄鐨勩€傛湳璇瓧鍏告湁涓€涓湳璇瓧鍏搞€備负浜嗗揩閫熸壘鍒拌瘝鏉★紝ES灏嗘墍鏈夎瘝鏉℃寜椤哄簭鎺掑垪锛屽苟閲囩敤浜屽垎鏌ユ壘鐨勬柟寮忋€傛槸涓嶆槸寰堢溂鐔燂紵杩欎笉灏辨槸MySQL鐨勭储寮曟柟寮忓悧锛岀洿鎺ョ敤B+鏍戝缓绔嬬储寮曞瓧鍏告寚鍚戠储寮曟暟鎹€倀ermindex浣嗘槸闂鍙堟潵浜嗭紝浣犺寰桾ermDictionary搴旇鏀惧湪鍝噷鍛紵搴旇鏄湪璁板繂涓惂锛熺鐩榠o澶參浜嗐€傚氨鍍廙ySQL鐨勭储寮曟槸瀛樻斁鍦ㄥ唴瀛樹腑涓€鏍枫€備絾鏄紝濡傛灉灏嗘暣涓湳璇瘝鍏告斁鍏ュ唴瀛樹腑浼氬彂鐢熶粈涔堟儏鍐碉紵鍐呭瓨鐖嗕簡鈥︹€﹀埆蹇樹簡锛孍S榛樿浼氱储寮曟墍鏈夌殑鏂囨湰瀛楁锛岃繖蹇呯劧浼氭秷鑰楀ぇ閲忕殑鍐呭瓨銆備负姝わ紝ES瀵圭储寮曡繘琛屼簡娣卞害浼樺寲銆傚湪淇濊瘉鎵ц鏁堢巼鐨勫悓鏃讹紝灏介噺鍑忓皯鍗犵敤鐨勫唴瀛樼┖闂淬€傛墍浠ユ湁涓€涓湳璇储寮曘€俆erm绱㈠紩鍦ㄦ暟鎹粨鏋勪笂灞炰簬鈥淭rie鏍戔€濓紝涔熷氨鏄垜浠父璇寸殑瀛楀吀鏍戙€傝繖鏄竴涓笓闂ㄥ鐞嗗瓧绗︿覆鍖归厤鐨勬暟鎹粨鏋勶紝鐢ㄤ簬瑙ｅ喅鍦ㄤ竴缁勫瓧绗︿覆涓揩閫熸壘鍒版煇涓瓧绗︿覆鐨勯棶棰樸€傝繖妫垫爲骞舵病鏈夊寘鍚墍鏈夌殑璇嶆潯锛屽畠鍖呭惈浜嗚瘝鏉＄殑涓€浜涘墠缂€锛堣繖涔熸槸瀛楀吀鏍戠殑浣跨敤鍦烘櫙锛屽父鐢ㄥ墠缂€锛夈€傛湳璇储寮曞彲浠ョ敤鏉ュ揩閫熷畾浣嶅埌鏈璇嶅吀涓殑鏌愪釜鍋忕Щ閲忥紝鐒跺悗浠庤繖涓綅缃紑濮嬩緷娆℃煡鎵俱€傚氨鍍忓彸鍥句竴鏍枫€傦紙鎬庝箞鏍凤紝鍍忔垜浠煡鑻辨枃璇嶅吀涓€鏍凤紝瀹氫綅绗竴涓猄寮€澶寸殑鍗曡瘝锛屾垨鑰呭畾浣嶇涓€涓猄h寮€澶寸殑鍗曡瘝锛岀劧鍚庝緷娆℃煡鎵撅級Lucene杩欓噷涔熷仛浜嗕袱涓紭鍖栵紝涓€涓槸termdictionary浠ュ潡鐨勫舰寮忓瓨鍌ㄥ湪纾佺洏涓婏紝涓€涓潡鐢ㄤ竴涓叡鍚岀殑鍓嶇紑杩涜鍘嬬缉銆備緥濡傦紝鍙互鐪佺暐浠b寮€澶寸殑鍗曡瘝銆備簩鏄湪FST锛坒initestatetransducer锛夌殑鏁版嵁缁撴瀯涓紝termindex瀛樻斁鍦ㄥ唴瀛樹腑銆侳ST鏈変袱涓紭鐐癸細瀹冨崰鐢ㄧ殑绌洪棿鏇村皯銆傞€氳繃澶嶇敤璇嶅吀涓殑鍗曡瘝鍓嶇紑鍜屽悗缂€锛屽帇缂╁瓨鍌ㄧ┖闂达紝鏌ヨ閫熷害蹇€侽(len(str))鏌ヨ鏃堕棿澶嶆潅搴︺€傚ソ鐨勶紝鐜板湪鎴戜滑鍙互浜嗚Вlucene鍊掓帓绱㈠紩鐨勬牱瀛愪簡銆?.璐村瓙鍒楄〃鐨勪竴浜涘皬鎶€宸у湪瀹為檯浣跨敤涓紝璐村瓙鍒楄〃杩橀渶瑕佽В鍐冲嚑涓棝鐐广€傚鏋滀笉鍘嬬缉璐村瓙鍒楄〃锛屼細鍗犵敤澶ч噺鐨勭鐩樼┖闂淬€傝仈鍚堟煡璇笅锛屽浣曞揩閫熸壘鍒颁氦闆嗗拰骞堕泦锛夎嚦浜庡浣曞帇缂╋紝鍙兘鏈変汉浼氳寰楁病蹇呰锛屸€減ostinglist涓嶆槸鍙瓨documentid鍚楋紵杩橀渶瑕佸帇缂╁悧锛熲€濓紝浣嗘槸濡傛灉鍙戝笘鍒楄〃涓湁鏁扮櫨涓囦釜docid锛屽帇缂╄捣鏉ユ槸寰堟湁蹇呰鐨勩€傦紙姣斿鎸夋湞浠ｆ煡璇㈠彜璇楄瘝锛燂級锛岃嚦浜庝负浠€涔堣浜ら泦鍜屽苟闆嗭紝ES鏄笓闂ㄧ敤鏉ユ煡鐨勶紝鑲畾鏈夊緢澶氳仈鍚堟煡璇㈢殑闇€姹傦紙AND锛孫R锛夈€傛牴鎹互涓婃€濊矾锛屾垜浠厛鏉ヨ璇村浣曞帇缂┿€?.鍘嬬缉鍙傜収绯诲湪lucene涓紝postingslists闇€瑕佹槸鏈夊簭鐨勬暣鏁版暟缁勩€傝繖鍏锋湁鑳藉閫氳繃澧為噺缂栫爜杩涜鍘嬬缉鐨勫ソ澶勩€傛瘮濡傜幇鍦ㄦ湁涓€涓猧d鍒楄〃[73,300,302,332,343,372]锛岃浆鎹㈡垚姣忎釜id鐩稿浜庡墠涓€涓猧d鐨勫閲忓€硷紙绗竴涓猧d鐨勫墠涓€涓猧d榛樿涓?锛屽閲忔槸瀹冭嚜宸憋級鍒楄〃鏄痆73,227,2,30,11,29]銆傚湪杩欎釜鏂板垪琛ㄤ腑锛屾墍鏈夌殑id閮藉皬浜?55锛屾墍浠ユ瘡涓猧d鍙渶瑕佷竴涓瓧鑺傜殑瀛樺偍绌洪棿銆傚叾瀹濫S浼氬仛鐨勬洿缁嗭紝瀹冧細鎶婃墍鏈夌殑鏂囨。鍒嗘垚寰堝鍧楋紝姣忎釜鍧楁伆濂藉寘鍚?56涓枃妗ｏ紝鐒跺悗鍒嗗埆瀵规瘡涓枃妗ｈ繘琛屽閲忕紪鐮侊紝骞惰绠楀湪杩欎釜鍧椾腑瀛樺偍鎵€鏈夋枃妗ｆ渶澶氶渶瑕佷繚瀛樺灏戜綅姣忎釜id锛屽苟灏嗚繖涓瘮鐗规暟浣滀负澶翠俊鎭紙header锛夋斁鍦ㄦ瘡涓潡鐨勫墠闈€傝繖绉嶆妧鏈О涓哄弬鑰冩鏋躲€備笂鍥句篃鏄疎S瀹樻柟鍗氬鐨勪緥瀛愶紙鍋囪姣忎釜block鍙湁3涓枃浠讹紝鑰屼笉鏄?56涓級銆侳OR鐨勬楠ゅ彲浠ユ鎷负锛氱粡杩囨渶鍚庣殑浣嶅帇缂╋紝鏁村瀷鏁扮粍鐨勭被鍨嬩粠4绉嶅浐瀹氬ぇ灏忥紙8銆?6銆?2銆?4浣嶏級鎵╁睍鍒癧1-64]浣嶏紝涓€鍏?4绉嶃€傞€氳繃浠ヤ笂鏂规硶锛屽彲浠ュぇ澶ц妭鐪佸彂甯冨垪琛ㄧ殑绌洪棿娑堣€楋紝鎻愰珮鏌ヨ鎬ц兘銆備絾鏄负浜嗘彁楂榝ilter杩囨护鏌ヨ鐨勬€ц兘锛孍S鍋氫簡鏇村鐨勫伐浣滐紝閭ｅ氨鏄紦瀛樸€俁oaringBitmaps(forfiltercache)鍦‥S涓紝鍙互浣跨敤杩囨护鍣ㄦ潵浼樺寲鏌ヨ銆傝繃婊ゆ煡璇㈠彧澶勭悊鏂囨。鏄惁鍖归厤锛屼笉娑夊強鏂囨。璇勫垎鎿嶄綔銆傚彲浠ョ紦瀛樻煡璇㈢粨鏋溿€傚浜庤繃婊ゅ櫒鏌ヨ锛宔s鎻愪緵浜嗕竴涓壒娈婄殑缂撳瓨锛屽彨鍋歠iltercache锛岀敤鏉ュ瓨鏀捐繃婊ゅ櫒寰楀埌鐨勭粨鏋滈泦銆傜紦瀛樿繃婊ゅ櫒涓嶉渶瑕佸お澶氬唴瀛橈紝瀹冨彧鏄繚鐣欎竴绉嶄俊鎭紝鍗冲摢浜涙枃妗ｄ笌杩囨护鍣ㄥ尮閰嶃€傚悓鏃跺彲浠ヨ鍏朵粬鏌ヨ澶嶇敤锛屽ぇ澶ф彁楂樹簡鏌ヨ鐨勬€ц兘銆傛垜浠笂闈㈡彁鍒扮殑FrameOfReference鍘嬬缉绠楁硶瀵逛簬postings鍒楄〃鏁堟灉寰堝ソ锛屼絾瀹冧笉閫傜敤浜庨渶瑕佸瓨鍌ㄥ湪鍐呭瓨涓殑杩囨护鍣ㄧ紦瀛樸€傝繃婊ゅ櫒缂撳瓨灏嗗瓨鍌ㄧ粡甯镐娇鐢ㄧ殑鏁版嵁銆傝繃婊ゅ櫒鐨勭紦瀛樻槸涓轰簡鍔犲揩澶勭悊鏁堢巼锛屽鍘嬬缉绠楁硶鏈夋洿楂樼殑瑕佹眰銆傚浜庤繖绉嶇被鍨嬬殑甯栧瓙鍒楄〃锛孍S浣跨敤浜嗕笉鍚岀殑鍘嬬缉鏂规硶銆傛墍浠ヨ鎴戜滑涓€姝ヤ竴姝ユ潵銆傞鍏堟垜浠煡閬損ostings鍒楄〃鏄竴涓帇缂╃┖闂寸殑Integer鏁扮粍銆傚亣璁炬湁杩欐牱涓€涓暟缁勶紝鎴戜滑鍘嬬缉鐨勭涓€涓€濊矾鏄粈涔堬紵鐢ㄤ綅鏉ヨ〃绀猴紝姣忎釜鏂囨。瀵瑰簲鍏朵腑涓€涓紝涔熷氨鏄垜浠父璇寸殑浣嶅浘锛屼綅鍥俱€傚畠閫氬父鐢ㄤ綔鏁版嵁搴撱€佹煡璇㈠紩鎿庡拰鎼滅储寮曟搸涓殑绱㈠紩锛屽苟涓斾綅鎿嶄綔锛堜緥濡備笌浜ら泦鎴栧苟闆嗭級鍙互骞惰鍖栦互鎻愰珮鏁堢巼銆備絾鏄紝浣嶅浘鏈変竴涓槑鏄剧殑缂虹偣銆傛棤璁轰笟鍔′腑瀹為檯浣跨敤浜嗗灏戝厓绱狅紝鍏跺崰鐢ㄧ殑鍐呭瓨绌洪棿閮芥槸涓嶅彉鐨勩€傞偅涓嶉€傚悎绋€鐤忓瓨鍌ㄣ€備笟鐣屽浜庣█鐤忎綅鍥句篃鏈夊緢澶氭垚鐔熺殑鍘嬬缉鏂规锛宭ucene鐢ㄧ殑灏辨槸roaringbitmap銆傝繖閲岀畝鍗曚粙缁嶄竴涓嬪帇缂╄繃绋嬶紝灏哾ocid鎷嗗垎涓洪珮16浣嶅拰浣?6浣嶃€傝仛鍚堥珮浣嶏紙浠ラ珮浣嶄负key锛寁alue涓烘墍鏈夐珮浣嶇浉鍚岀殑浣庝綅鏁扮粍锛夛紝鏍规嵁浣庝綅鏁版嵁鐨勫灏戯紙闀垮害锛夛紝浣跨敤涓嶅悓鐨勫鍣紙鏁版嵁缁撴瀯锛夊瓨鍌ㄤ粠涓嶅悓鐨勯珮浣嶈仛鍚堢殑浣庝綅鏁扮粍鐨勬暟閲忔槸涓嶅悓鐨勶級銆俵en<4096ArrayContainer鐩存帴瀛樺偍鍊糽en>=4096BitmapContainer浣跨敤浣嶅浘瀛樺偍鍒嗗壊绾跨殑鏉ユ簮锛氭渶澶ф€诲€兼槸2^16=65536銆傚亣璁句綅鍥炬柟寮忓瓨鍌ㄩ渶瑕?5536bit=8kb锛岀洿鎺ュ瓨鍌╲alue鐨勬柟寮忥紝涓€涓獀alue鏄?涓瓧鑺傦紝4K鎬诲叡闇€瑕?byte*4K=8kb銆傚洜姝わ紝褰搗alue鐨勬€婚噺<4k鏃讹紝浣跨敤鐩存帴瀛樺偍value鐨勬柟寮忔洿鑺傜渷绌洪棿銆傜┖闂村帇缂╀富瑕佷綋鐜板湪锛氶珮浣嶈仛鍚堬紙鍋囪鏁版嵁涓湁100w涓珮浣嶅€肩浉鍚岀殑鍊硷紝鍘熸湰闇€瑕?00w*2byte锛岀幇鍦ㄥ彧闇€瑕?*2byte锛夈€備綆闃跺帇缂╃殑缂虹偣鏄笌鍘熷浣嶅浘鐩告瘮锛屼綅杩愮畻鐨勯€熷害浼氬彈鍒板奖鍝嶃€傝繖鏄潈琛°€傚钩琛＄殑鑹烘湳銆?.鑱斿悎鏌ヨ璇村畬浜嗗帇缂╋紝鎴戜滑鏉ヨ璇磋仈鍚堟煡璇€傝鎴戜滑浠庝竴涓畝鍗曠殑寮€濮嬨€傚鏋滄煡璇㈡湁filtercache锛屽垯鐩存帴浣跨敤filtercache杩涜璁＄畻锛屽嵆浣跨敤浣嶅浘杩涜AND鎴朞R璁＄畻銆傚鏋渜ueryfilter娌℃湁琚紦瀛橈紝閭ｄ箞浣跨敤skiplist鐨勬柟娉曢亶鍘嗙鐩樹笂鐨刾ostingslist銆備互涓婃槸涓変釜鍙戝笘鍒楄〃銆傛垜浠幇鍦ㄩ渶瑕佸皢瀹冧滑涓嶢ND鐨勫叧绯荤粨鍚堣捣鏉ワ紝浠ヨ幏寰楀彂甯冨垪琛ㄧ殑浜ら泦銆傚厛閫夊嚭鏈€鐭殑postinglist锛屽皢鍙﹀涓や釜postinglist涓€涓€鏌ョ湅鏄惁瀛樺湪锛屾渶鍚庡緱鍒颁氦闆嗙粨鏋溿€傚湪閬嶅巻杩囩▼涓彲浠ヨ烦杩囦竴浜涘厓绱犮€傛瘮濡傛垜浠亶鍘嗗埌缁胯壊13鐨勬椂鍊欙紝鍙互璺宠繃钃濊壊鐨?锛屽洜涓?姣?3灏忋€備娇鐢╯kiplist涔熶細甯︽潵鍙﹀涓€涓ソ澶勩€傝繕璁板緱鎴戝墠闈㈣鐨勫悧锛宲ostings鍒楄〃鏄敤FOR缂栫爜鏂瑰紡瀛樺偍鍦ㄧ鐩樹笂鐨勶紝鎵€鏈夌殑鏂囨。閮戒細琚垎鎴愬緢澶氬潡锛屾瘡涓潡鎭板ソ鍖呭惈256涓枃妗ｏ紝鐒跺悗鍒嗗埆瀵规瘡涓枃妗ｈ繘琛屽閲忕紪鐮侊紝璁＄畻鏈夊灏慴its瑕佹眰瀛樺偍杩欎釜鍧椾腑鐨勬墍鏈夋枃妗ｆ潵淇濆瓨姣忎釜id锛屽苟灏嗚繖涓綅鏁颁綔涓哄潡澶翠俊鎭紙header锛夋斁鍦ㄦ瘡涓潡鐨勫墠闈€傚洜涓鸿繖涓狥OR鐨勭紪鐮佹槸鏈夎В鍘嬫垚鏈殑銆備娇鐢╯kiplist锛岄櫎浜嗚烦杩囬亶鍘嗙殑寮€閿€涔嬪锛岃繕璺宠繃浜嗚В鍘嬭繖浜涘帇缂╁潡鐨勮繃绋嬶紝浠庤€岃妭鐪佷簡cpu銆備簲銆佹€荤粨涓嬮潰鍋氫竴涓妧鏈€荤粨锛堟劅瑙夋湁鐐瑰儚鐜嬪垰鑰佸笀馃槀锛塃S涓轰簡蹇€熷畾浣嶇洰鏍囨枃妗ｏ紝浣跨敤浜嗗€掓帓绱㈠紩鎶€鏈潵浼樺寲鎼滅储閫熷害銆傝櫧鐒剁┖闂存秷鑰楁瘮杈冨ぇ锛屼絾鏄悳绱㈡€ц兘鏈変簡鏄庢樉鐨勬彁鍗囥€?涓轰簡鍦ㄦ捣閲忕殑term涓揩閫熷畾浣嶅埌鏌愪釜term锛屽悓鏃惰妭鐪佸唴瀛樺崰鐢紝鍑忓皯纾佺洏io璇诲彇锛宭ucene閲囩敤浜嗏€渢ermindex->termdictionary->postingslist鈥濈殑鍊掓帓绱㈠紩缁撴瀯锛岄€氳繃FST鍘嬬缉鏀剧疆鍦ㄥ唴瀛樹腑杩涗竴姝ユ彁楂樻悳绱㈡晥鐜囥€備负浜嗗噺灏憄ostings鍒楄〃鐨勭鐩樻秷鑰楋紝lucene浣跨敤浜咶OR锛團rameofReference锛夋妧鏈繘琛屽帇缂╋紝鍘嬬缉鏁堟灉闈炲父鏄庢樉銆侲S鐨勮繃婊よ鍙ヤ娇鐢≧oaringBitmap鎶€鏈紦瀛樻悳绱㈢粨鏋滐紝淇濊瘉楂橀杩囨护鏌ヨ閫熷害鐨勫悓鏃堕檷浣庡瓨鍌ㄧ┖闂存秷鑰椼€傝仈鍚堟煡璇㈡椂锛屽鏋滄湁filtercache锛屽垯鐩存帴鍒╃敤浣嶅浘鐨勫師鐢熺壒鎬у揩閫熸眰骞堕泦寰楀埌鑱斿悎鏌ヨ缁撴灉锛屽惁鍒欎娇鐢╯kiplist瀵瑰涓猵ostings鍒楄〃姹傚苟闆嗭紝璺宠繃閬嶅巻costandSavepartofthedatadecompressioncpucostElasticsearch鐨勭储寮曟€濇兂灏嗙鐩樼殑鍐呭灏藉彲鑳界殑绉诲姩鍒板唴瀛樹腑锛屽噺灏戦殢鏈虹鐩樿鍙栫殑娆℃暟锛堝悓鏃朵篃鍒╃敤纾佺洏鐨勯『搴忚鍙栫壒鎬э級锛岀粨鍚堝悇绉嶅帇缂╃畻娉曪紝骞朵娇鐢ㄦ瀬鍏惰嫑鍒荤殑鎬佸害浣跨敤鍐呭瓨銆傛墍浠ュ湪浣跨敤Elasticsearch鍋氱储寮曠殑鏃跺€欓渶瑕佹敞鎰忥細涓嶉渶瑕佸仛绱㈠紩鐨勫瓧娈典竴瀹氳瀹氫箟娓呮锛屽洜涓洪粯璁ゅ拰鑷姩绱㈠紩涓€鏍枫€傚浜嶴tring绫诲瀷鐨勫瓧娈碉紝涓嶉渶瑕佽В鏋愮殑瀛楁涔熼渶瑕佹槑纭畾涔夈€傚洜涓洪粯璁ゆ儏鍐典笅锛岄€夋嫨涓€涓鍒欑殑ID杩涜鍒嗘瀽涔熷緢閲嶈銆傞殢鏈烘€уお澶х殑ID锛堟瘮濡侸avaUUID锛変笉鍒╀簬鏌ヨ銆傛渶鍚庯紝鎶€鏈€夊瀷鎬绘槸浼撮殢鐫€涓氬姟鍦烘櫙銆傛瘡涓暟鎹簱閮芥湁鑷繁瑕佽В鍐崇殑闂锛堟垨涓撲笟棰嗗煙锛夊搴旇嚜宸辩殑鏁版嵁缁撴瀯锛屼笉鍚岀殑浣跨敤鍦烘櫙鍜屾暟鎹粨鏋勯渶瑕佷笉鍚岀殑绱㈠紩鏉ヨ揪鍒版渶澶у寲鍜屽姞閫熸煡璇㈢殑鐩殑銆傝櫧鐒惰繖绡囨枃绔犺鐨勬槸Lucene濡備綍瀹炵幇鍊掓帓绱㈠紩锛屽浣曚粩缁嗚绠楁瘡涓€鍧楀唴瀛樺拰纾佺洏绌洪棿锛屽浣曚娇鐢ㄥ钁╃殑浣嶈繍绠楁潵鍔犲揩澶勭悊閫熷害锛屼絾鏄鏋滀綘绔欏湪鏇撮珮鐨勫眰娆″幓鎬濊€冿紝姣旇緝涓€涓嬪畠璺烳ySQL涓€鏍凤紝浣犱細鍙戠幇铏界劧閮芥槸绱㈠紩锛屼絾鏄疄鐜版柟寮忓畬鍏ㄤ笉鍚屻€備粠骞夸箟涓婅锛宐-tree绱㈠紩鏄竴绉嶅啓鍏ヤ紭鍖栫殑绱㈠紩缁撴瀯銆傚綋鎴戜滑涓嶉渶瑕佹敮鎸佸揩閫熸洿鏂版椂锛屽彲浠ヤ娇鐢ㄩ鎺掑簭鐨勬柟寮忔潵鎹㈠彇鏇村皬鐨勫瓨鍌ㄧ┖闂淬€佹洿蹇殑妫€绱㈤€熷害绛夊ソ澶勶紝浠ｄ环鏄洿鏂版參锛屽氨鍍廍S涓€鏍枫€傚笇鏈涙湰鏂囪兘缁欏ぇ瀹跺甫鏉ヤ竴浜涙敹鑾穨鍙傝€冩枃妗ｏ細https://www.elastic.co/cn/blo...https://www.elastic.co/cn/blo...http://blog.mikemccandless.co...https://www.infoq.cn/article/...https://zhuanlan.zhihu.com/p/...杩戞湡鐑偣鏂囩珷鎺ㄨ崘锛?.1,000+Java闈㈣瘯棰樺強绛旀锛?021鏈€鏂扮増锛?.鍒湪婊″睆鐨刬f/else閲岋紝璇曡瘯绛栫暐妯″紡锛岀湡鐨勫緢濂藉悆锛侊紒3.鎿嶏紒Java涓瓁x鈮爊ull鐨勬柊璇硶鏄粈涔堬紵4銆丼pringBoot2.5鍙戝竷锛屾繁鑹叉ā寮忓お鐐镐簡锛?.銆奐ava寮€鍙戞墜鍐岋紙宓╁北鐗堬級銆嬫渶鏂板彂甯冿紝璧跺揩涓嬭浇鍚э紒鎰熻涓嶉敊锛屽埆蹇樹簡鐐硅禐+杞彂锛?/p>
