À¶ÐÇ£¬»ª¹ú£¬½´óÖÐÑëͼÊé¹Ý¡£
¡°ÐÅÏ¢ìØ´ú±íÐÅÏ¢Á¿µÄ´óС£¬Æä¼ÆË㹫ʽΪh(x)=-p(xi)logp(xi)¡£¡±
ËÕ·ÉÕýÅõ×ÅÖÜij»ªµÄÎ÷¹ÏÊéŬÁ¦¿Ð×ÅÒ»¸ö֪ʶҪµã¡£
¡®¶££¡Áµ°®¹¥ÂÔϵͳΪÄú·þÎñ£¡¡¯
¡°àÅ£¿¡±
ËÕ·É¿´×ÅÑÛÇ°Ìø³öµÄÃæ°å£¬²»½ûÒ¡ÁËÒ¡Í·£ºË¯Ãß²»×ã¶¼³öÏֻþõÁË£¿
¡®¶££¡£¡±¾ÏµÍ³ÎªÄú¹¥ÂÔs¼¶Å®Éñ£¬¹¥ÂÔ¹ý³ÌÖлñµÃµÄºÃ¸ÐÖµ¸üÄÜ»»È¡²Æ¸»£¬÷ÈÁ¦ºÍÌåÆÇ£¬ÇëÎÊÊÇ·ñ°ó¶¨£¿¡¯
ÔٴγöÏÖµÄÉùÒôÈÃËÕ·ÉÃ÷°×ÁË£¬ÕæµÄÓÐϵͳÕÒÉÏËûÁË£¬ºÃ¼Ò»ï£¬´©Ô½ÁË20ÄêÁË£¬ÏµÍ³ÖÕÓÚæ©æ©À´³Ù¡£
û´í£¬Ëշɲ¢²»ÊÇÕâ¸öÊÀ½çµÄÈË£¬ËûǰÊÀÊǹ¶ù£¬ÎÞ¸¸ÎÞĸ£¬¹Â¹Âµ¥µ¥µØ»îÁË20¶àÄ꣬½á¹û˯һ¾õ£¬¾ÍĪÃûÆäÃî´©Ô½ÁË¡£Õâ¸öÊÀ½çºÍËûǰÊÀûʲô²»Í¬£¬¿Æ¼¼Ë®Æ½Ò²Ïà²î²»´ó£¬Î¨Ò»±ä»¯±È½Ï´óµÄµØ·½Äª¹ýÓÚËû¶àÁËÒ»¸ö¼Ò£¬Ò»¸öÐÒ¸£ÃÀÂúµÄ¼Ò£¬ÈÃËûÕæÕý¸ÐÊܵ½Á˸¸°®ºÍĸ°®£¬ÃÖ²¹ÁËËÕ·ÉÉÏÒ»ÊÀµÄÒź¶£¬µ±È»£¬ËÕ·ÉÒ²ºÜΪÕâ¸ö¼ÒÕùÆø£¬ËûÉÏÒ»ÊÀËäÈ»ÒòΪûǮ¶øÎÞ·¨ÉÏ´óѧ£¬µ«ÒòΪµ××Ó»¹ÔÚ£¬¼Ó̤̤֮ʵʵŬÁ¦Ñ§Ï°£¬ÕâÒ»ÊÀ¿¼ÉÏÁ˽Õã´óѧµÄ¼ÆËã»úϵ£¬³ÉΪÁ˼ÒÍ¥µÄ½¾°Á¡£
´©Ô½Õß¼Óϵͳ°øÉí£¬Ëշɶ¼»³ÒÉĪ·ÇËû¾ÍÊÇÕâ¸öÊÀ½çµÄÖ÷½Ç£¬×¢¶¨Ó®È¡°×¸»ÃÀ£¬×ßÉÏÈËÉúá۷壿
¡®ÇëÎÊÊÇ·ñ°ó¶¨£¿¡¯
ËշɵÄ˼Ð÷±»À»ØÁËÏÖʵ£¬°ó¶¨ÏµÍ³¾ÍÄÜ×ßÉÏÈËÉúá۷壬¶àô¾Þ´óµÄÓÕ»ó°¡......
¡®µ«ÊÇ£¬ÎҾܾø£¡¡¯
ËÕ·ÉÄÚÐÄÒåÕýÑÔ´Ç¡£
Èç¹û»»¸öÈËÀ´¶¼±ØÈ»»áºÁ²»ÓÌÔ¥µØ½ÓÊÜ£¬µ«ÊÇËշɲ»Í¬£¬ËûǰÊÀÊǹ¶ù£¬ÀÏÌì¸øÁËËûÕâÒ»ÊÀÒ»¸öÐÒ¸£ÃÀÂúµÄ¼ÒÍ¥£¬ËûÒѾ·Ç³£Âú×㣬Ëû²»Çó´ó¸»´ó¹ó£¬Ö»Ç󯽯½å£å££¬ºÍ¼ÒÈËÃÇÐÒ¸£µØÉú»îÔÚÒ»Æð£¬ÈôÓÐÓàÁ¦ÔòºÃºÃѧϰ£¬Îª¹ú¼Ò·¢¹â·¢ÈÈ¡£
¶øÕâ¸öÁµ°®¹¥ÂÔϵͳ£¬Ã÷ÏÔÊǹ¥ÂÔ¸÷·ŮÉñ£¬ÕâÒâζ×ÅËûδÀ´ÒªºÍ¸´Êý¸öÅ®È˾À²ø²»Ç壬ÄÄ»¹ÓÐÐÄ˼ÄÜŬÁ¦Ñ§Ï°£¬±¨Ð§×æ¹ú£¿¶øÇÒ»öº¦±ðÈË¿ÉÁ¯µÄСŮÉú£¬¶àÉÙÓеã×ï¶ñ¸Ð£¬ÒÔºó¿ÉÊÇҪϵØÓüµÄ¡£
¾ÍÔÚËշɵÄÊÖÖ¸Òªµãµ½¡°·ñ¡±µÄÑ¡ÏîÉÏʱ¡£
¡®¹¥ÂÔÖлñÈ¡µÄºÃ¸Ð¶È¸üÄÜΪÄúÔöÇ¿ÖÇÁ¦£¬Ìá¸ßѧϰÄÜÁ¦£¬ÉõÖÁÄÜÔö¼ÓÁé¸Ð£¬ÎªÄúµÄ¿ÆÑÐÊÂÒµÌíש¼ÓÍߣ¬ÈÃÄú¸üºÃµØÎª¹ú¼ÒÉç»á·¢¹â·¢ÈÈ£¡¡¯
ËշɳÁĬÁË£¬ÓÌԥƬ¿Ì£¬ÊÖÖ¸Çáµã¡°ÊÇ¡±¡£
¶Ô²»ÆðÁ˸÷λÃÃ×Ó......ÎÒ²»ÈëµØÓüËÈëµØÓü¡£
¡®¶££¡ÏµÍ³ÔØÈëÖУ¡¡¯
Ƭ¿Ìºó¡£
¡®¶££¡»¶ÓʹÓÃÁµ°®¹¥ÂÔϵͳ£¡ÏµÍ³ÐëÖªÒ»£º±¾ÏµÍ³Ö»¹¥ÂÔs¼¶Å®Éñ£¬ËÞÖ÷ÈçÈô¹¥ÂÔÆäËûÅ®Éú£¬ÔòÊÓΪΥ±³ÏµÍ³ÔÔò£¬ÏµÍ³½«ÍÑÀ룡¡¯
¡®ÏµÍ³ÐëÖª¶þ£º±¾ÏµÍ³·ÇÁµ°®ÏµÍ³¶øÊÇÁµ°®¹¥ÂÔϵͳ£¬ËÞÖ÷²»¿ÉÖ÷¶¯±í°×£¬ÈçÈôÖ÷¶¯±í°×£¬ÔòÊÓΪΥ±³ÏµÍ³ÔÔò£¬ÏµÍ³½«ÍÑÀ룡¡¯
¡®ÏµÍ³ÐëÖªÈý£º±¾ÏµÍ³²»¸ºÔð±£»¤ËÞÖ÷ÈËÉí°²È«£¬ÈçÈô²ñµ¶Á÷½á¾Ö£¬¸Å²»¸ºÔ𣡡¯
ËÕ·ÉÐÄÏ룬²»Ö÷¶¯£¬²»½ÓÊÜ£¬²»×öÔüÊ£¬ÍâΧÓÎ×ß»ñÈ¡ºÃ¸ÐÖµ¼´¿É£¬Õâ¸öÎÒ¿ÉÒÔ£¡
¡®¶££¡·¢ÏÖs¼¶Å®Éñ£¬¶¨Î»ÒÑ¿ªÆô£¬ËÞÖ÷¿É²é¿´¡£¹¥ÂÔÄ¿±ê£º½ªÇãÑ©£¬Ä¿±êºÃ¸Ð¶È£º5¡£¡¯
½ªÇãÑ©£¿
µÚÒ»Õ ϵͳ¼ÓÉí(1/2),µã»÷ÏÂÒ»Ò³¼ÌÐøÔĶÁ