²Ä(1/3)¶
§v¹L³\«GªNªº¸Ü¡A©P¤£¾¹¤S¥s¨Óº®u§Þ³N©xµ{ªÃµq¡A¤]¸Ô¹ê·¾³q¤F¤@¤U·j¯Áªº¨Æ¡C
·s®öªº·R°Ý·j¯Á¡A´N¬O¥L±a¶¤°µ¥X¨Óªº¡C
¦pªG¥L¥h¦~¤£Â÷¶}·s®ö¡A»¡¤£©w¾Ìɦ¹¥\³Ò¡A´N¯à®Ê¤É¬°·s®öªºcto¤F¡C
¤£¹L¡A¥L²{¦b¬Oµµ·L¬Pªºcto¡A¤]¤@ÂI¤£®t¡C
µ{ªÃµqªº¬Ýªk¸ò³\«GªN®t¤£¦h¡A¦Ó¥B§ó¥[¦a¥»¤g¤Æ¡C
¡§¦Ê«×¬°¤°»ò°µ¤º®e¡H¦]¬°¦b°ê¤º°µ·j¯Á¡A°µ¤º®e¬O°ß¤@¯à°÷¥Í¦s¤U¥hªº¤è¦¡¡C¡¨
µ{ªÃµqªº¬Ýªk§ó¥[ªº¾U§Qª½±µ¡C
¦b°ê¤º°µ·j¯Á¡A¸ò¡@¨¦¤£¤@¼Ë¡An®Ú¾Úªk«ßªk³W¡An²¾°£©M«Ì½ª¤@¨Ç¤º®e¡C¥H¤În¶K¤ßªº¬°¥Î¤á¦Ò¼{¡A³q¹L¤@¨Ç²`«×ºâªk¡AÀ°§U¥Î¤á²¾°£¤@¨Ç²`«×ªº±M·~¤Æ¤º®e¡C
¦]¬°¶V±M·~¶V¤p²³¡A¶V±e«U¶V¤j²³¡C
n·QÀò¨ú³Ì¦hªº¤j²³¥Î¤áªº³ß·R¡A¤£¯à´£¨Ñ¤Ó±M·~ªº¤º®e¡A¦Ó¬On´£¨Ñ¤@¨Ç²L¥Õ©öÀ´¡B¤£¨º»ò´_Âøªº·j¯Áµ²ªG¡C
¤ñ¦p¦Ê«×¨ºÃä¤w¸g¦b°µ¾÷¾¹¾Ç²ß¡A¤]´N¬O³Ì¦´Áªº¤H¤u´¼¯à¡C§Y³q¹L¥Î¤á·j¯Áµ²ªG¥H¤Î¹ï·j¯Áµ²ªGªº¤ÏõX¡A¨ÓÅý¾÷¾¹¾Ç²ß¡C±q¦Ó¦b¥¼¨Ó·j¯Áªº®ÉÔ¡AÅý¾÷¾¹À°¦£±ÀÂ˧ó²Å¦X¤j²³¤f¨ýªº³ÌÀu¸Ñ¡C
³o´N¤S²£¥Í¤F¤@Ó¦n³B¡A¥i¥H¶i¤@¨BªºÁY¤pÀ˯Á½d³ò¡C
¦Ê«×ªº·j¯Á§Þ³N¤ñ¤£¤W¨¦ºq¡A®t¶Z¤§¤j¡K¡K»·»·¶W¥X·Q¶H¡C¨ä¹ê¤]¤£¤î¦Ê«×¤F¡A¶®ªê¡B·L³n¤]¤@¼Ë¡C
¨¦ºq¯à¦b³Ìµuªº®É¶¡¤º¡A¦b®ü¶qªº¤¬Ápºô¼Æ¾Ú¤¤·j¯Á¥X¬ÛÃö¤º®e¡AµM«á®Ú¾Úºâªk±Æ¦C¡A§e²{¦b¥Î¤á¹q¸£«e¡C
¥i¨ä¥Lªº·j¯Á¤ÞÀº¤£¦æ¡C
n·Qµ¹¥Î¤á´£¨Ñ³Ì§ÖªºÅTÀ³³t«×¡A«ç»ò¿ì¡H
³Ì²³æªº¤èªk¡A´N¬OÁY¤pÀ˯Á¥Ø¼Ð¡C
¨¦ºqÀ˯Á10»õ±ø«H®§¡A¦Ê«×´NÀ˯Á1»õ±ø«H®§¡C
«H®§¨Ó·½¤Ö¤F¡A·j¤£¥X·Qnªºµª®×¡A¤]´N¤£©_©Ç¤F¡C
©Ò¥H¡A¦Ê«×n·Q§¤Ã°ê¤º²Ä¤@ªºÄ_®y¡A´N¤@©w¡B¥u¯à¡B¥²¶·°µ¤º®e¡C³q¹L¦Û²£ªº¤º®e¡A¨ÓÀ±¸ÉÀ˯Á§Þ³N¤è±ªº®z¶µ¡C
³oºØ¤èªk¡A¨Sªkº¡¨¬°ªºÝ¥Î¤áªº»Ý¨D¡A«o¥i¥Hº¡¨¬¥þªÀ·|¤¤80%ªº¥Î¤á»Ý¨D¤F¡A³o´N°÷¤F¡C
¥i¥H»¡¡A¦Ê«×ªº§õÁ`³q¹L¥¿±°h©Ä¡BI«á´åÀ»ªº¤è¦¡¡A§¹¦¨¤F¹ï¨¦ºq¦b·j¯Á»â°ìÅQÅvªº¬D¾Ô¡A¨Ã¥B¦¨¥\¤F¡C³æ±q³o¤@ÂI¨Ó»¡¡A¥i¤ñ·L³n¡B¶®ªêµ¥¥¨ÀY±j¤F¤£¤Ö¡A¨º¥ë¤HÁÙ¦bW«¢«¢ªº·Q¸ò¨¦ºqª±§Þ³N©O¡C
ª±Ó§¾°Ú¡A®Ú¥»¤£¬O¤@Ó¶q¯Åªº¡C
¦b¤j¼Æ¾Ú³B²zªº»â°ì¡A¥þ²y¬ì§Þ¤½¥q³£n¨Ì¾a¤@Ó¥shadoopªº¶}·½®Ö¤ß¬[ºc¡C³oÓ¬[ºc¨Ó·½¡A´N¬O¨¦ºq¹ï¦Û¨ºâªk²z½×ªº¤½¶}¡A«o¨S¦³¤½¶}ºâªk²Ó¸`¡C©Ò¥H¶®ªê©Mªü©¬©_´N²oÀY¦X§@¡A¥l¶°¤F¤@¤j§å³»¦y¬ì¾Ç®a¡A®Ú¾Ú¨¦ºqªººâªk²z½×¡A°µ¥X¤F³oÓ¤j¼Æ¾Ú³B²z¨t²Î¡C
¥i°ÝÃD«Ü¦h¡A¶ZÂ÷¨¦ºq¤½¥¬ªº¤@¨ÇÃöÁä«ü¼Ð¦s¦b¼Æ¿ªº®t¶Z¡AWW¨Sªk¸Ñ¨M¡A¥u¯à«r¤ú±µ¨ü¡C¥]¬A·L³n¡B¨È°¨»¹¡Bªü¨½¡BµØ¬°¡BÁy®Ñ¡B¶®ªê¡B¦Ê«×µ¥¥¨ÀY¡A³£n¨Ï¥Î³oÓ¶}·½¨t²Î¡C
¥u¦³¨¦ºq¤£¥Î¡C
¤£¶È¤£¥Î¡A¥LÌÁÙ¦b2010¦~§¹¦¨¤F¨t²Îªº§ó·s¡K¡K§âì¨Óªº²z½×±À½¡A¤W½u¤F¤@Ó§ó¥ý¶i§ó°ªºÝªº¤j¼Æ¾ÚºÞ²z¨t²Î¡C
¤]´N¬O»¡¡A¥þ¥@¬É¬ì§Þ¥¨ÀY̨ϥΪº¤j¼Æ¾ÚºÞ²z¨t²Îªº©³¼h¬[ºc¡A¤ñ¨¦ºq²^¨Oªº¨ºÓª©¥»¡AÁÙn¸¨«á´X¿ªº®Ä²v¡C
¥¨ÀYÌ·íµM¤]§Üª§¡A·Q°µ¥X¶W¶VhadoopªºªF¦è¡C
°ê¤ºªº¥Nªí´N¬O¦Ê«×¡C
¦b07¦~ªº®ÉÔ¡A¦Ê«×ªÑ»ù¤@¸ô¸°_¡A¤W¤U®¶¾Ä¡C§õ«Û¬õ¨M©w¥NªíµØ®L¡A°µ¤@Ó¥@¬É¯Åªº¶}³Ð©Ê¶µ¥Ø¥X¨Ó¡A°_¦W¡§ª÷¦r¶ð¡¨p¹º¡C
©â½Õ¤F¦Ê«×³Ìºë^ªº®Ö¤ß§Þ³N¤Hû¡A¤S±q¥~±©Û¨Ó¤F¤@Ó±M®a¹Î¶¤¡A±aÀY¤H»®µM´N¬O²{¦bµµ·L¬P¬ãµo¤¤¤ßªºt³d¤H·¨®¶©[¡I
²Ä(1/3)¶
²Ä(2/3)¶
³oÓ¤jp¹º¡A¤£¥Îjava¡Bpython¡A¬Æ¦Ü³sc++³£¤£¥Î¡Aª½±µ¥Îc»y¨¥¼g¥N½X¡C
¥i¿×¬O¶¯¤ß§§§Ó¡C
·í®É¡A¦Ê«×±q³Ì°ª¼h¨ì¤@½u¶}µo¤Hû¡A³£¥Rº¡¿E±¡¡A²¦³º³o¬O¤@¦¸¥sªO¡@¨¦ªº¤j¨Æ¡A°µ¦¨¤F¨¬¥H´§Ú°ê«Â¡C
¶µ¥Ø²ÕºÆ¨g¥[¯Z¡A¦Ê«×¤j·H12¼h¦è°¼ªº¿O¨C¤Ñ±ß¤W³£«G¤@±J¡C
°µ¤F¨â¦~¡A¶µ¥Ø¦¨¥\¤F¡I
¥i¬O¡A³Ì«á¦Ê«×ÁÙ¬O¦^Âk¨ì¤Fhadoopªº°}À礤¡C
¬°¤°»ò¡H
¦]¬°¦³¤@Ó¤p¶µ¥Ø²Õ¡A®³¨Óhadoopªº¥N½X²³æ¥]¸Ë¡A«¼g¤Fapi¡AµM«á®³¹L¥h¸ò¦Ê«×¯Ó®É¨â¦~¡B¥¸¥¨¸ê¥´³yªºª÷¦r¶ð¨t²Î¤ñ¸û©Ê¯à¡C
µ²ªG¡A¤p¶µ¥Ø²Õ¥H·L®zªºÀu¶Õ¨ú³Ó¤F¡I
§õ«Û¬õ¬Ý¨ì³oÓµ²ªG¡A¹y®É¤ß¦Ç·N§N¡A¦p¦P³Q¼â¤F¤@¬Ö²D¤ô¡C
hadoop¬O¶}·½¶µ¥Ø¡A¬O¥þ¥@¬Éªº¶}µoªÌ̤@°_¥h§ó·s¡B«P¶i¡A¼ç¤O¥¨¤j¡Cì³Ðªº¦pªG¨S¦³¥¨¤jÀu¶Õ¡A¦A¥[¤W¾³õ¬Fªv¡A´N¥u¯à¬O´Â¶}·½ªº¤è¦V¨«¤F¡K¡K
ªü¨½¶³ªºªì´Á¡A´¿¹J¨ì¹L¥¨¤j§xÃø¡A³Q·~¤º²`²`½èºÃ¡C¦]¬°³Ì¦´Áªº®ÉÔ¡A¤ý«Ø³Õ¤h§PÂ_¿ù¤F¡A¤]n·d¤@ÓÃþ¦ühadoopªº¤j¼Æ¾Ú¨t²Î¡A¥b§Û¥b§ï¡AÁÙ¬O½k¤F¡C«á¨Ó¬Ý¨ì¨È°¨»¹¶³¦¨¥\¤F¡A¤~«éµM¤j®©¡A»°ºò½ÕÀY§ïÅܤè¦V¡A³o¤~¨ú±o¤F¦¨¥\¡C
¥øÃZ¡B²±¤j¡B·s®ö¡BµØ¬°¡Bª÷¤sµ¥¬ì§Þ¤½¥q¬Ý¨ìªü¨½¦b«e±½ë¦a¹p¡AÁÙ¯u¬O½ë¥X¨Ó¤F¤@±ø¹D¡C³oÓ®ÉÔ¡A¤j®a¤]´N¤£»¡¤°»ò¡§·s²~¸Ë°s¡¨¡B¡§ªü¤Z¹F®É¥N¤~¯à½Ï¥Í¡¨ªº·²D¸Ü¤F¡A»°ºò¸ò¶i¡A¤]³£«Ü¶¶§Qªº°µ¥X¤F¦Û¤vªº¶³pºâ¥¥x¡C
³oI«á³£n¨Ì¦«µÛ¶}·½¶µ¥Øhadoop¡C
µ{ªÃµq¹D¡J¡§§Ú¦b·s®ö®É¡A´N·NÃѨì¤F¤º®eªº«n©Ê¡A¶}©l¹ï·R°Ý·j¯Á¸É¥R¤º®e¨Ó·½¡A¤ñ¦p·R°Ýª¾ÃѤH¡A¤ñ¦Ê«×ª¾¹DÁÙ¦¤@¦~¡C¥i¬O¤½¥qµ¹ªº¤ä«ù¦³¡C§Ú99¦~³Ì¦°µ·j¯Á®É¡A¾ãÓ·j¯Á³¡´N§Ú¤@Ó¤H¡C¨ì¤F¥h¦~¡A¤]¤~120¦h¤Hªº¹Î¶¤¡A§O»¡¸ò¦Ê«×¤ñ¤F¡A³s·jª¯³£¤£¦p¡C¡¨
©P¤£¾¹°Ý¡J¡§¦pªG°µ¤º®e¡A§Aı±oÁÙ»Ýn°µ¤°»ò¡H¡¨
¡§°ò¦©Ê¤º®e¡C¡¨
¡§þӤ象H¡¨
¡§¤ñ¦p·j¯Á¡A«ç»ò°µ³Jª£¶º¡H¦pªG¥Î¨¦ºq¡A·|·j¥X³\¦hªø½g¤j½×¡A«Ü¦h¸ê²`¤j¼pªº¤@¨Ç¤ß±oµ¥µ¥¡C³o¨Ç·íµM«Ü¦n¡A¥i¥Î¤á¥i¯à¤£»Ýn¡A¥u»Ýn¤@Óµ²ªG¡A¬O¥ýª£¶ºÁÙ¬O¥ýª£³J¡H¦Ê«×ª¾¹D«Ü¦nªº°µ¤F¸É¥R¡C¡¨
©P¤£¾¹ÂI¤FÂIÀY¡A¡§ªº½T¡A²³æ·j¯Á§ó²Å¦X¤j²³¤f¨ý¡C¡¨
µ{ªÃµq¹D¡J¡§«¥Ì¦³«áµoÀu¶Õ¡A¬ÝµÛ¦Ê«×«ç»ò°µ¡B°µ¤F¤°»ò¡A¥h¾Ç´N¦n¤F¡C¾ÇÓ¤C¤C¤K¤K¡A´N¯à¥´±Ñ¨¦ºq¡A¦¨¬°°ê¤º²Ä¤G¤F¡Cn¬O°µªº§ó¦n¤F¡A¦b´ë¹D¤è±µo¤O®ÄªG§ó¬ð¥X¡A¶W¶V¦Ê«×¤]¤£¬O¤£¥i¯à¡C¡¨
©P¤£¾¹«¢«¢¯º¹D¡J¡§§A¥i¯u¦³¦Û«H¡I¡¨
µ{ªÃµq«Ü»{¯uªº»¡¡J¡§¦pªG·j¯Á·~°È¥æµ¹§Ú¨Ó°µ¡A§Ú«OÃÒ¤¦~¤§¤º¥´±Ñ¦Ê«×¡I¡¨
©P¤£¾¹¤S¤j¯º¤F¨âÁn¡A¼Ål¹L¥h¤F¡C
·j¯Á·~°È¡A¥L§ó¶É¦VªºªÖ©w¬O¤ý¤p²î¡C
«e¥@¦³¸gÅ窺¡C
·s®öªº·R°Ý·j¯Á¤@ÂI¦W°ó³£¨S°µ°_¨Ó¡A¤ñºô©öªº¦³¹D·j¯ÁÁÙ®t¡A°µªº³Ì¦nªº·íÄÝ·jª¯¡A§¤Ã¤F¥«³õ¦Ñ¤Gªº¦ì¸m¡C
³q¹L¦h¦¸¥æ½Í¡A©P¤£¾¹ºâ¬O¹ï·j¯Á·~°È¡A¦³¤F¤@Óªì¨Bªº»{ÃÑ¡C
³\«GªN¡Bµ{ªÃµq³£¬O·j¯Á»â°ìªº±M®a¡A³£´¿¶}µo¥X¼vÅT¤O¤ñ¸û¤jªº·j¯Á¤ÞÀº¡CÁöµM³£¥¢±Ñ¤F¡A¦ý¸gÅç¬OÄ_¶Qªº¡C
¦pªG¦A§â¤ý¤p²î©Ô¨Ó¡Aµµ·L¬P´N§Î¦¨¤F·j¯Á·~°Èªº¡§¤T¾r°¨¨®¡¨¡C
³oÓ°t¸m¡AÁ`¯à¹Á¸ÕµÛ¸ò¦Ê«×ÙT¤@ÙT¤âµÃ¤F§a¡H
·Q¤@·Q¡AÁÙ¯u¦³ÂI¤p¿³¾Ä¡I
²Ä(2/3)¶
²Ä(3/3)¶
batªº¤T¤j¥¨ÀY¨½¡Aµµ·L¬Pºâ¬On¯u¥¿¦aªï¦V²Ä¤@Ó¹ï¤â¡C
³o®É¡A©P¤£¾¹±µ¨ì¤F¤@Ó«æ«Pªº¹q¸Ü¡C
¬O·Åª¾®L¥´¨Óªº¡C
¡§¦Ñ¤½¡A§A¨Ó¤@½ëÐù¡C¡¨
¡§²{¦b¡H¡¨
©P¤£¾¹¦³¨ÇÅå³Y¡C
·Åª¾®L§s§s¶ã¶ãªº»¡¡J¡§¿ì¤½«Ç¨½èè©ì¹L¦a¡A§Ú¤S¬ïµÛ°ª¸ò¾c¡A¤£¤p¤ßºLˤF¡K¡K¡¨
¡§§Ú¾a¡I¡¨©P¤£¾¹À~¤F¤@¸õ¡A«Üºò±i¡A¡§«ç»ò¼Ë¡H§A¤H¨S¨Æ§a¡H«O¤j¡A¤@©w¬O«O¤j¡I«Ä¤l¨S¤F¡A«¥Ì¥H«á¦A¥Í¡A§A¤~¬O³Ì«nªº¡I¡¨
·Åª¾®L¤S¦n®ð¤S¦n¯º¡A¡§§A»¡¤°»ò©O¡H¤~Ãh¨âÓ¦h¤ë¡A«Ä¤l³£¨S¦¨«¬©O¡AÁÙ«O¤j«O¤p¡A³£n·íª¨ª¨ªº¤H¤F¡AÁÙ³o»òJ¾x¡H¡¨
³o¤f®ð¡A²¤±a¼bÜÒ¡C
¬Ý¼Ë¤l¡A¦o¨Åé¨S¤°»ò°ÝÃD¡C
´N¬O¹À¡A¤~Ãh¨âÓ¤ë¡A¤£¤p¤ßºL¤F¤@¤U¡A¤@¯ë³£°ÝÃD¤£¤j¡C°£«D¬O¤k©Ê¤£·R±¤¨¤l¬y²£¹L¤Ó¦h¦¸¡A¤S©ÎªÌ¤@¨Ç°ü¬ì¯e¯f¡C
·Å¦Ñ®vªÖ©w¨S³o¨Ç°ÝÃD¡C
¡§§A¨S¨Æ¡H¡¨©P¤£¾¹ªQ¤F¤f®ð¡C
¡§¨S¨Æ¡C¡¨·Åª¾®L»y®ð¦³¨Ç¹Ä®§¡C
¡§¨º«ç»ò¤F¡H¡¨
¡§¨û¨û¥Í®ð¤F¡A»¡¤°»ò³£nµ¹§Ú¥ð°²¡C¡¨
¡§§c¡K¡K¡¨
©P¤£¾¹´N¦³ÂI±Y¼ì¡A¦³ÂIµL»y¡C
¤W¦¸¦b´Y¥¤u¼tªº¨Æ¡A©P¤£¾¹ºâ¬OÀ°¤F¦Ñª¨¤@Ó¤j¦£¡C§ë®ç³ø§õ¡A©P¤£¾¹´N¸ò¦Ñª¨½Ð¥Ü¡A»¡¬OÅý·Å¦Ñ®v¦^¥¤¯ù¼t¤W¯Z¡C
ÃhL¤Q¤ë¤F¡AÁ`¤£¯à¤@ª½´e¦b®a¨½§a¡H
·Å¦Ñ®v¤S¤£¬O¨ººØ®a®x¥D°üªº©Ê®æ¡A¦o¬O¨Æ·~«¬¤k©Ê¡A¦³¦Û¤vªº¨Æ·~°l¨D¡C
¦n»¡¤ï»¡¡A¦Ñª¨³o¤~µªÀ³¡C
¨S·Q¨ì¡A¥X¤F³oºØ¨Æ¡I
³o¤U³Â·Ð¤j¤F¡C
·Å¦Ñ®v¦b¿ì¤½«Ç¨½ºL¸ø¤F¡A¥u³o¤@¹õ¡Aªø½ú´N±o´ª¤ß¦n´XÓ¤ë¡C¦A·Q¦b¥¤¯ù¼t¤u§@¬O¤£¤Ó¥i¯à¤F¡C
·Åª¾®L´e´e¤£¼Öªº»¡¡J¡§¨û¨û»¡Åý§A¨Ó±µ§Ú¡A¥hÂå°|¬Ý¬Ý¡AµM«á¡K¡KµM«á´N¤£·Ç§Ú¤W¯Z¤F¡C¡¨
¡§¨S¨Æ¡A¦³§Ú©O¡I§Ú³o´N¹L¥h¡A§Aµ¥µÛ¡I¶â¡A§A¯u¨S¨Æ§a¡H¡¨
¡§ªÖ©w¨S¨Æ°Ú¡A§Ú¤]ª`·N©O¡AºL˪ºÀþ¶¡¡A§Ú¥Î¯Þ»K©Ö¦a©O¡A³s§¾ªÑ³£¨SºLË¡A´N¬O¯Þ»K§á¤F¤@¤U¡C¡¨
¡§¦æ¡A¨º§Aµ¥§Ú¡C¡¨
²Ä(3/3)¶