鎮ㄦ墍闇€瑕佸仛鐨勫氨鏄涔?Java 鐨勬爣鍑嗙増鏈紝JavaSE銆? Servlet銆丣SP銆乀omcat銆丼truts绛夐兘鏄潰鍚慗avaEE鐨勬妧鏈紝鍦ㄥぇ鏁版嵁鎶€鏈腑鐢ㄥ緱涓嶅銆?涓嬮潰灏忕紪灏变负澶у浠嬬粛涓€涓嬪ぇ鏁版嵁鐨勬妧鏈姹傘€?璁╂垜浠潵鐪嬬湅銆?/p>

　　澶ф暟鎹妧鏈姹?/p>

　　澶ф暟鎹紑鍙戜汉鍛樻槸褰撲粖澶ф暟鎹涓氫笉鍙垨缂虹殑涓撲笟鎶€鏈汉鍛樸€?浠栦滑鍒╃敤澶ф暟鎹妧鏈紑鍙戝ぇ鏁版嵁绯荤粺銆佸钩鍙般€佸伐鍏风瓑锛屼互婊¤冻浼佷笟澶ф暟鎹浉鍏抽渶姹傘€?瀵逛簬澶ф暟鎹紑鍙戞潵璇达紝鏈€閲嶈鐨勬槸鎺屾彙澶ф暟鎹紑鍙戞墍闇€鐨勬妧鏈€?/p>

　　瀵逛簬寰堝澶栬鎴栬€呭垰寮€濮嬭繘鍏ヨ繖涓涓氱殑鍒濈骇澶ф暟鎹紑鍙戣€呮潵璇达紝鐪嬪埌澶ф暟鎹紑鍙戞秹鍙婂埌鐨勭浉鍏虫妧鏈€佷竴鍫嗗鏉傜殑涓撲笟鏈銆佸悇绉嶅惉璧锋潵寰堥毦鐨勨€滄灦鏋勨€濈瓑绛夛紝寰€寰€浼氳浜烘湜鑰岀敓鐣忋€?浣嗗叾瀹烇紝褰撲綘鐪熸寮€濮嬪涔犵殑鏃跺€欙紝骞舵病鏈変綘鎯宠薄鐨勯偅涔堥毦銆?/p>

　　澶ф暟鎹紑鍙戜汉鍛樼殑鎷涘嫙銆佸彴婀炬暟鎹鐞嗐€佹暟鎹灦鏋勬惌寤恒€佹暟鎹€ц兘浼樺寲绛夐兘鏄紒涓氬繀椤绘帉鎻＄殑鎶€鏈€?缂栧啓浠ｇ爜闇€瑕佷簡瑙ava寮€鍙?Linux寮€鍙戠幆澧冿紱 瀵逛簬鏁版嵁搴擄紝闇€瑕佷簡瑙ysql/MongoDB绛夛紝骞舵湁涓€瀹氱殑璋冧紭缁忛獙锛?瀵逛簬鍒嗗竷寮忔潵璇达紝Hadoop/Hive/Spark/Storm/HBase绛夋槸蹇呴』鐨勩€?/p>

　　渚嬪锛屼竴涓狧adoop澶ф暟鎹伐绋嬪笀闇€瑕佹帉鎻va缂栫▼锛堝垎甯冨紡锛夈€丩inux寮€鍙戠幆澧冦€丠adoop锛圚DFS+MapReduce+Yarn锛夈€丠Base锛圝avaAPI鎿嶄綔锛夈€丠ive锛堟煡璇€佸嚱鏁般€佽鍥撅級銆丼qoop&Flume锛堟暟鎹噰闆嗭級 锛屼互鍙婂叾浠栧 Pig銆丠UE銆丠A 绛夈€?/p>

　　Linux鍜孞ava鍩虹鏂归潰锛岄渶瑕佹帉鎻ava鍩虹銆佽櫄鎷熸満銆佸绾跨▼锛? JavaWeb 鍜屾暟鎹簱锛?鍩烘湰鐨?Linux 璇硶鍜?shell 缂栫▼锛?/p>

　　Hadoop妗嗘灦鏂归潰锛岄渶瑕佹帉鎻DFS shell鎿嶄綔锛堝父鐢ㄥ懡浠ゅ拰鍙傛暟锛夛紱 HDFS Java搴旂敤寮€鍙戯紙鏁版嵁閲囬泦銆佸瓨鍌ㄣ€佹枃浠讹級锛? MapReduce缂栫▼锛堟爣鍑嗗寲銆佽繍琛屻€佽皟璇曪級锛? MapReduce璁＄畻绋嬪簭锛堟帓搴忋€佸垎鍖恒€佷紭鍖栵級绛?/p>

　　鍦℉adoop鏁版嵁鐢熸€佹柟闈紝闇€瑕佹帉鎻Base鏁版嵁鎿嶄綔锛堣銆佸啓銆佹洿鏂帮級鍜屽熀鏈灦鏋勶紱 Hive鏁版嵁瀛樺偍涓庤绠楋紙寤鸿〃銆佸垎鍖恒€佹煡璇€佸嚱鏁帮級锛? Flume&Sqoop閲囬泦瀵煎嚭绯荤粺瀹炵幇锛? Pig鐢ㄤ簬鏁版嵁澶勭悊鍜屾暟鎹垎鏋愩€?/p>

　　瀛︿範澶ф暟鎹繀澶囩殑鍩虹

　　瀛︿範澶ф暟鎹殑涓や釜鍩虹鏄疛AVA鍜孡inux锛屽涔犻『搴忎笉鍒嗗厛鍚庛€?鎮ㄩ渶瑕佹帉鎻′袱鑰咃紝鐒跺悗鎵嶈兘缁х画瀛︿範澶ф暟鎹绋嬨€?/p>

　　1銆丣ava锛氬ぇ瀹堕兘鐭ラ亾Java鐨勬柟鍚戞湁JavaSE銆丣avaEE銆丣avaME銆?瀛︿範澶ф暟鎹簲璇ュ涔犲摢涓柟鍚戯紵

　　鍙渶瑕佸涔燡ava鐨勬爣鍑嗙増鏈紝JavaSE锛屾瘮濡係ervlet銆丣SP銆乀omcat銆丼truts銆丼pring銆丠ibernate銆丮ybatis绛夛紝杩欎簺閮芥槸闈㈠悜JavaEE鐨勬妧鏈紝鍦ㄥぇ鏁版嵁鎶€鏈腑鐢ㄥ緱涓嶅銆?浣犻渶瑕佹槑鐧藉氨鏄繖鏍枫€?/p>

　　褰撶劧锛屼綘杩樻槸闇€瑕佺煡閬撳浣曠敤Java杩炴帴鏁版嵁搴撱€?鎮ㄥ繀椤绘帉鎻?JDBC銆?鏈夊悓瀛﹁Hibernate鎴栬€匨ybites涔熷彲浠ヨ繛鎺ユ暟鎹簱銆?涓轰粈涔堜笉瀛﹀憿锛?杩欏苟涓嶆槸璇村涔犺繖浜涗笉濂斤紝鑰屾槸璇村涔犺繖浜涘彲鑳藉浣犳湁鐢ㄣ€?寰堝鏃跺€欙紝鏈€缁堝湪宸ヤ綔涓苟涓嶅父鐢ㄣ€?鎴戞病鏈夌湅鍒版湁浜哄湪杩涜澶ф暟鎹鐞嗘椂浣跨敤杩欎袱涓笢瑗裤€?/p>

　　褰撶劧锛屽鏋滀綘鏈夎冻澶熺殑绮惧姏锛屼綘鍙互瀛︿範Hibernate鎴栬€匨ybites鐨勫師鐞嗐€?涓嶈鍙涔?API銆?杩欐牱鍙互澧炲姞浣犲Java鐨勬暟鎹簱鎿嶄綔鐨勭悊瑙ｏ紝鍥犱负杩欎袱椤规妧鏈殑鏍稿績灏辨槸Java鐨勫弽灏勫姞涓婂悇绉岼DBC鍔熻兘銆?浣跨敤銆?/p>

　　2銆丩inux锛氬洜涓哄ぇ鏁版嵁鐩稿叧鐨勮蒋浠堕兘鏄湪Linux涓婅繍琛岀殑锛屾墍浠ラ渶瑕佹妸Linux瀛﹀緱鏇存墡瀹炪€?瀛﹀ソLinux瀵逛簬浣犲揩閫熸帉鎻″ぇ鏁版嵁鐩稿叧鎶€鏈湁寰堝ぇ鐨勫府鍔╋紝涔熷彲浠ヨ浣犳洿濂界殑鐞嗚ВHadoop銆? 銆乭ive銆乭base銆乻park绛夊ぇ鏁版嵁杞欢鐨勮繍琛岀幆澧冨拰缃戠粶鐜閰嶇疆锛屽彲浠ラ伩鍏嶅緢澶氶櫡闃便€?瀛︿範shell鍙互鐪嬫噦鑴氭湰锛岃繖鏍锋洿瀹规槗鐞嗚В鍜岄厤缃ぇ鏁版嵁闆嗙兢銆?瀹冭繕鍙互璁╂偍鏇村揩鍦颁簡瑙ｆ湭鏉ュ皢鍙戝竷鐨勬柊鐨勫ぇ鏁版嵁鎶€鏈€?/p>

　　濡備綍浠庨浂寮€濮嬪涔犲ぇ鏁版嵁鎶€鏈?/p>

　　1銆佺‖浠跺噯澶?/p>

　　鎯宠瀛︿範澶ф暟鎹妧鏈紝纭欢鏄繀涓嶅彲灏戠殑銆?鎮ㄩ渶瑕佷竴鍙拌嚦灏戞湁 8GB 鍐呭瓨鐨勮绠楁満銆?濡傛灉瀹堕噷鏈夊鍙扮數鑴戯紝濡傛灉浣犲枩娆贡鎼為偅灏辨洿濂戒簡銆?鍐呭瓨浠?鍏?MB鍙樻垚浜嗙幇鍦?鍏?0MB銆?瀹冧粛鐒舵槸璁＄畻鏈轰腑鏈€缂轰箯鐨勮祫婧愶紝鑰屼笖姘歌繙涓嶅銆?鎵€浠ュ鏋滀綘鎯冲涔犲ぇ鏁版嵁鎶€鏈紝棣栧厛妫€鏌ヤ竴涓嬩綘鐨勭數鑴戞湁澶氬皯鍐呭瓨銆?濡傛灉灏忎簬 8GB锛岃鑰冭檻娣诲姞鏇村鍐呭瓨妯″潡銆?濡傛灉鑳藉姞16GB灏辨洿濂戒簡锛岃繖鏍蜂綘瀛︿範鐨勬椂鍊欏氨浼氭劅瑙夋搷浣滄墽琛屽緱寰堝揩銆?纭洏涓嶉渶瑕佺壒鍒ぇ锛岀洰鍓嶄富娴佺殑500GB灏辫冻澶熶簡銆?/p>

　　2銆佽蒋浠跺噯澶?/p>

　　纭欢鍑嗗濂藉悗锛屽氨鍙互寮€濮嬪畨瑁呰蒋浠朵簡銆?濡傛灉鎮ㄧ啛鎮夎櫄鎷熸満VMware鎴朧irtualBox锛屽彲浠ヨ烦杩囨湰绔犮€?/p>

　　瀹夎瀹岃櫄鎷熸満鍚庯紝鎴戜滑鍙互灏嗚櫄鎷熸満澶嶅埗鎴愬彟澶栦袱涓壇鏈€?杩欐牱锛屾垜浠湪VMware铏氭嫙鏈轰笂妯℃嫙浜嗕笁鍙版湇鍔″櫒锛屾瀯寤轰簡涓€涓笁鑺傜偣鐨勫ぇ鏁版嵁闆嗙兢銆?/p>

　　3.瀹夎CDH

　　CDH 鏄?Cloudera 鐨勫彂琛岀増锛堝寘鎷?Apache Hadoop锛夌殑缂╁啓銆?瀹冩槸鍩轰簬Hadoop缁勪欢鐨勭ǔ瀹氱増鏈紪璇戠殑銆?鍏跺彂甯冪殑ClouderManager锛堢畝绉癈M锛夋槸涓€涓彲浠ュ湪Web椤甸潰涓婂畨瑁呫€佷慨鏀广€佺鐞嗗ぇ鏁版嵁缁勪欢鐨勭郴缁熴€?瀹冪畝鍖栦簡澶ф暟鎹鐞嗐€?鏁版嵁骞冲彴瀹夎銆?/p>

　　4.铚傚发

　　瀵逛簬閭ｄ簺鏈変竴瀹?SQL 缁忛獙鐨勪汉鏉ヨ锛屼粠 Hive 鍏ユ墜鏄竴涓洿濂界殑閫夋嫨銆? Hive鑴辫儙浜嶧aceBook锛屾渶鍒濇槸涓轰簡鏂逛究FaceBook鐨勬暟鎹垎鏋愬笀鑰屾瀯寤虹殑銆? FaceBook鐨勬暟鎹垎鏋愬笀澶ч儴鍒嗛兘鐭ラ亾鎬庝箞鍐橲QL锛屼絾鏄鏋滄兂鐢∕apReduce杈惧埌鍚屾牱鐨勫垎鏋愭晥鏋滐紝姣斿澶氳〃鍏宠仈锛屽涔犲拰寮€鍙戞垚鏈兘闈炲父楂樸€?浜庢槸FaceBook鐨勪笓瀹跺紑鍙戜簡涓€涓彲浠ュ皢SQL璇彞杞崲鎴怣apReduce鐨勭粍浠讹紝鏋佸ぇ鐨勬柟渚夸簡杩欎簺鏁版嵁鍒嗘瀽甯堛€?/p>

　　CDH闆嗙兢鎼缓瀹屾垚鍚庯紝闇€瑕侀€夋嫨瀹夎hive缁勪欢鎵嶅彲浠ヤ娇鐢ㄣ€?濡備綍浣跨敤hive缁勪欢闇€瑕佷粠绠€鍗曞埌澶嶆潅銆?/p>

　　5. 澶ф暟鎹殑鍏朵粬缁勬垚閮ㄥ垎

　　Hadoop 鏄綋鍓嶅ぇ鏁版嵁浜嬪疄涓婄殑鏍囧噯銆? Hadoop 鐢熸€佺郴缁熶腑鏈夎澶氱粍浠躲€?姣忎釜缁勪欢閮芥湁鍏剁壒瀹氱殑搴旂敤鍦烘櫙銆?鎮ㄤ笉蹇呭涔犳瘡涓粍浠躲€?鎮ㄥ彲浠ラ€夋嫨鎮ㄦ劅鍏磋叮鐨勭粍浠舵潵瀛︿範锛屾垨鑰呯瓑寰呭疄闄呭簲鐢ㄣ€?褰撲綘闇€瑕佺殑鏃跺€欙紝浣犱篃鍙互瀛︿範瀹冦€?/p>