¿ªÆô×ó²à

ÍøÒ×ÔÆÐÅʵʱÒôƵ¿ò¼Ü±³ºó£ºËã·¨ÓÅ»¯´øÀ´²úÆ·ÌåÑéÈ«ÃæÌáÉý

ÊÓÆµ
ÍøÒ×ÔÆÐÅʵʱÒôƵ¿ò¼Ü±³ºó£ºËã·¨ÓÅ»¯´øÀ´²úÆ·ÌåÑéÈ«ÃæÌáÉý
10ÔÂ19ÈÕ£¬Ò»ÄêÒ»¶ÈµÄLiveVideoStackConÒôÊÓÆµ¼¼Êõ´ó»áÔÚ±±¾©ÕÙ¿ª¡£±¾½ì»áÒéÒÔ¡°¼¼Êõ¿ªÆôС®ÊÓ¡¯½ç¡±ÎªÖ÷Ì⣬»ã¼¯×ÊÉîµÄÒôÊÓÆµ¼¼Êõ¹¤³Ìʦ£¬Ì½ÌÖÔÚÒôƵ¡¢ÊÓÆµ¡¢Í¼ÏñµÈ¼¼ÊõµÄʵ¼ùÓë˼¿¼¡£ÍøÒ×ÔÆÐÅ×ÊÉîÒôƵËã·¨¹¤³ÌʦÀÔÚ½ÌÓýר³¡ÖеÄÖ÷ÌâÑݽ²ÉÏ£¬·ÖÏíÁËÈí¼þ²ãʵʱÒôƵ½â¾ö·½°¸ÖУ¬ÍøÒ×ÔÆÐÅNRTCÕë¶ÔWebRTC Ô´ÉúËã·¨²»×ãµÄÓÅ»¯£¬ÒÔ¼°ÔÚÒôÀÖÄÚÈÝÌØÊⳡ¾°ÏµÄÐÂ˼¿¼¡£
1.jpg
ÍøÒ×ÔÆÐÅ×ÊÉîÒôƵËã·¨¹¤³ÌʦÀÖ÷ÌâÑݽ²
»ð±¬µÄÊг¡ÑÜÉú¸ü·á¸»µÄÒôÊÓÆµÓ¦Óó¡¾°
»¥ÁªÍø²úÆ·¶ÔʵʱÒôÊÓÆµ¼¼ÊõµÄÐèÇóÕýÔÚ¸÷¸öǧÒÚ¡¢°ÙÒÚ¹æÄ£µÄÊг¡Öб¬·¢£¬²¢Öð½¥³ÉΪ»ù´¡ÉèÊ©Ð͵ÄÖØÒª¼¼Êõ¡£ÀÈÏΪ£¬Ëæ×ÅδÀ´¸ü¶à¿ÉÍæÐԵĿª·¢±»ÍÚ¾ò£¬ÒôÊÓÆµµÄÓ¦ÓÃÈÔÓкܴóÔö³¤¿Õ¼ä¡£´ËÍ⣬ʵʱÒôÊÓÆµ¼¼ÊõÖúÍÆÁË»¥ÁªÍø²úÆ·µÄ´´Ðºͽø»¯£¬¸³ÓèÁ˲úÆ·ÒÔ¸ü·á¸»¡¢¸ü¸ßЧµÄ³¡¾°±í´ï£¬Ò²´Ù½øÁËʵʱÒôÊÓÆµ¼¼Êõ×ÔÉíµÄ½ø»¯¡£
ʵʱÒôÊÓÆµ¼¼ÊõÐèÒªÓëÐÐÒµºÍÓ¦Óó¡¾°½ôÃܽáºÏ¡£µ±Ç°¼°Î´À´£¬¿Í»§µÄºËÐÄËßÇó³ýÁ˶ÔÎȶ¨¸ßЧµÈ¼¼ÊõÐÔÄܵÄÒªÇóÖ®Í⣬¸öÐÔ»¯µÄÐèÇóÒ²ÔÚÔö¼Ó¡£À½éÉÜ£¬ÍøÒ×ÔÆÐÅ»ùÓÚ×ÔÑеÄÈ«¹¦Äܹ¤Òµ¼¶µÄÒôÊÓÆµ¼¼Êõ¿ò¼ÜNRTC£¬½øÐÐÁËÖî¶à³¡¾°»¯ºÍÕë¶ÔÐԵļ¼ÊõÓÅ»¯£¬ÐγÉÁ˶ÔʵʱÒôƵӦÓõĹ۲ìÓë˼¿¼¡£
ÍøÒ×ÔÆÐÅNRTCÓÅ»¯Ëã·¨£¬ÃÖ²¹WebRTCÔ´ÉúËã·¨µÄ¾ÖÏÞ
Àǿµ÷£¬¾¡¹Üµ±Ç°Õë¶ÔÒ»°ãÐÐÒµµÄÈí¼þ²ãʵʱÒôƵ¿ò¼ÜÒѾ­ÈÕÒæ³ÉÊ죬µ«ÈÔÈ»ÓÐÁ½¸ö½ÏÃ÷ÏÔµÄÍ´µãÐèÒª½â¾ö£ºÒ»ÊÇÔÚ¸´Ôӱ仯µÄÍøÂç×´¿öÖУ¬ÒòΪÐźÅÈõ»òÕßÍøÂ·ÓµÈû¶øÔì³ÉµÄÑÓʱ»ò¶ª°üÏÖÏó£»¶þÊÇËæ×ÅÖÕ¶ËÖÖÀàºÍÓ¦Óó¡¾°¿ç¶ÈµÄÔö¼Ó£¬²»Í¬ÀàÐÍÖÕ¶ËÉ豸ºÍʹÓû·¾³µÄ¾Þ´ó²îÒì¶ÔÕûÌå½â¾ö·½°¸µÄÊÊÅä¶ÈÌá³öÁ˸ü¸ßµÄÒªÇó¡£Ò»°ãÐÐÒµ»ùÓÚ½»Á÷µÄÄ¿µÄ£¬ÔÚ¶ÔÓÚʵʱÒôƵµÄÖî¶àÐèÇóÖУ¬Ê×ÏÈ¿´ÖØ¿ò¼ÜµÄÁ÷³©ÐÔ£¬µÍÑÓʱ¡¢ÒôÁ¿×ã¹»´óµÄͬʱûÓÐÃ÷ÏԵĻØÉù¡¢ÔëÉùºÍÔÓÒô¡£ÔÚÂú×ãÒÔÉÏÐèÇóÖ®Í⣬×îºó²Å»áÈ¥¹Ø×¢ÒôÖÊ¡¢Ë«½²ÌåÑéÒÔ¼°ÆäËûÐÔÄÜ¡£
ÄÇôһ¸ö½â¾öÒÔÉÏÍ´µãÎȶ¨ÔËתµÄÒôƵ¿ò¼Ü¸ÃÈçºÎÉè¼Æ£¿ÒÔWEBRTCµÄÒôƵ¿ò¼ÜͼΪÀý£º
2.jpg
£¨Í¼£ºwebrtcµÄÏß³ÌÄ£ÐÍÓëÊý¾ÝÇý¶¯·½Ê½£¬²»Í¬ÑÕÉ«±íʾ²»Í¬Ị̈߳¬À¶É«¼ýÍ·±íÏÖÊý¾ÝÇý¶¯·½Ê½£©
µ«Ã¿¸öÄ£¿éΪÁ˱£ÕÏʵʱÒôƵµÄÎȶ¨¶¼ÓÐºÜ¶à·½ÃæµÄÎÊÌâÐèҪעÒ⣬ÀýÈç²É¼¯»ØÉù·ÇÏßÐÔ¡¢ÒôÁ¿´óС£¬ÒÔ¼°delayÖÐϵͳÄÚÔÚÑӳٵĴóСÓë±ä»¯µÈ£¬¶¼ÊÇÆ½Ì¨ÏÂÒôƵ²É¼¯ºÍ²¥·ÅµÄ³£¼ûÎÊÌâ¡£
ÓÉÓÚÒôƵǰ´¦ÀíµÄÌôÕ½¼°WebRTC Ô´ÉúËã·¨µÄһЩ²»×ãµÈÔ­Òò£¬ÐèÒª¼¼ÊõÈËÔ±½øÒ»²½ÓÅ»¯ÒÔÌáÉýÕû¸ö¿ò¼ÜµÄ¼¼Êõ±íÏÖ£¬È·±£ÖÕ¶ËÓû§µÄ²úÆ·ÌåÑé¡£ÍøÒ×ÔÆÐŵÄÈ«¹¦Äܹ¤Òµ¼¶µÄÒôÊÓÆµ¼¼Êõ¿ò¼ÜNRTCÕë¶ÔÕâЩ²»×ã×öÁËһϵÁеÄÓÅ»¯¡£±ÈÈ磬²É¼¯»ØÉùµÄ·ÇÏßÐÔÊÇĿǰÏßÉϲɼ¯ÃæÁÙµÄÆÕ±éÎÊÌ⣬ÆäÎȶ¨ÐÔ»áÖ±½ÓÓ°Ïì»ØÉùµÄÏû³ýºÍ´¦ÀíЧ¹û¡£WebRTCÔÚÕâ·½ÃæµÄ²»×ãʹµÃһЩ³§ÉÌΪÁË·þÎñ»ØÉùÏû³ý£¬²»µÃ²»ÒÔ½µµÍÒôÁ¿Îª´ú¼Û¡£Õë¶ÔÔ´ÉúWebRTC Delay Estimation µÄÎȶ¨ÐÔÎÊÌâ£¬ÍøÒ×ÔÆÐŵÄNRTC½«Ô¶¶ËºÍ½ü¶ÎµÄ delay½øÐÐÁË¶ÔÆëÓÅ»¯£¬ÌáÉýÁËÕûÌå¿ò¼ÜÏû³ý»ØÉù¡¢ÔÓÒôºÍ½µÔë·½ÃæµÄÐÔÄÜ¡£
ÔÙÆ©È磬¶ÔÓÚÓû§ÔÚ¹µÍ¨ÖвúÉúµÄÆøÉùµÄ²É¼¯ºÍ´¦Àí£¬Ò²ÊÇÒôƵ¿ò¼ÜÃæÁÙµÄÆÕ±éÄѵãÖ®Ò»¡£ÒòÎªÆøÉù·¢ÒôÄÜÁ¿µÍ£¬»ØÉù´ó£¬¶øÇÒÄÜÁ¿¼¯ÖÐÔÚÖÐ¸ßÆµ£¬ËùÒÔÕý³£Ëã·¨ÎÞ·¨Âú×ã´¦ÀíÐèÇó¡£ÒÔÔ´ÉúWebRTC AEC ºÍNRTC ÔÚiPhone6P ÆøÒô·¢ÒôϵıíÏÖ½øÐжԱȣ¬¾­NRTC¿ò¼Ü½øÐÐËã·¨ÓÅ»¯ºóµÄЧ¹ûÃ÷ÏÔ¸üÓÅ¡£
3.jpg
Ô´Éúwebrtc aec VS NRTC ÔÚiphone6p ÆøÒô·¢ÒôϵıíÏÖ
ÍøÒ×ÔÆÐÅÕë¶ÔÒôÀÖ³¡¾°ÏÂʵʱÒôƵ½â¾ö·½°¸ÈçºÎÈ¡ÉáµÄÐÂ˼¿¼
³ýÁËÒ»°ãÐÔ¹µÍ¨³¡¾°ÏµÄÒôÊÓÆµÓ¦Óã¬ÒôÀÖÄÚÈݼ°ÆäÓ¦Óó¡¾°¶Ô¼¼ÊõÓиüÎªÌØÊâµÄÒªÇó¡£À½éÉÜ£¬ÓëÆÕͨ³¡¾°Ïà±È£¬ÒôÀÖÄÚÈݳ¡¾°¶ÔÉùÒôµÄÒªÇó´æÔڽϴó²îÒ졣ƩÈ磬È˶ú¶ÔÓÚÒôÀֵĸÐÖªÊǸü¼ÓÃô¸ÐµÄ£¬ÉÔÓÐÒôÖʵÄϽµÈ˶ú¾ÍÄܲì¾õ£¬Õâ¶ÔÓÚÉùÒô´¦ÀíÌá³öÁ˸ü¸ßµÄÒªÇó¡£¶øÏà¶ÔÓÚÒÔ½»Á÷ΪĿµÄÒ»°ã³¡¾°£¬ÒôÀÖÄÚÈݶÔʵʱÒôƵ¼¼ÊõÒªÇóµÄÓÅÏȼ¶Ò²ÓÐËù²»Í¬£ºÎȶ¨ºÍÒôÖʳÉΪµÚÒ»ËßÇ󣬽µÔëºÍµÍÑÓ³Ù½µ¼¶Îª´ÎÒªÐèÇó¡£
ÓÉÓÚÒôÀÖÄÚÈݳ¡¾°µÄÉÏÊöÌØÊâÐÔ£¬Ò»°ãµÄʵʱÒôƵ¿ò¼ÜÔÚÒôÀÖÄÚÈݳ¡¾°Ï±ã»á³ÊÏÖijЩ¾ÖÏÞÐÔ¡£±ÈÈ磬ÊÊÓÃÓÚÒ»°ã³¡¾°µÄÒôƵ¿ò¼ÜµÄµÍ²ÉÑùÂÊ¡¢·ÇȫƵ¶Î´¦Àí¡¢¶Ô½ü¶ËÉùÒôºÍ¶ÔË«½²µÄ´Ö²Ú´¦Àí¡¢ÂëÂÊÉèÖýϵ͡¢¼òµ¥µÄAudio QoS¶¼²»×ãÒÔÖ§³ÅÒôÀÖÄÚÈݵÄÌØÊⳡ¾°¡£ÔÙÈ磬ÔÚ²ÉÓøü¸ßÂëÂʵÄÇé¿öÏ£¬Èç¹û»¹ÑØÓÃÒ»°ãµÄ²ßÂÔ£¬±ã»áÔì³É±È½ÏÑÏÖØµÄÓµÈû»ò¶ª°ü¡£ÄÇô£¬Ãæ¶ÔÕâЩеÄÐèÇó¡¢Í´µãºÍ¾ÖÏÞÐÔ£¬ÔÚ×ÊÔ´ÓÐÏÞµÄÇé¿öÏÂÈçºÎÈ¡ÉᣬÀ·ÖÏíÁËÍøÒ×ÔÆÐŵÄËĵãÐÂ˼¿¼£º
•    AGC(auto gain control) ÔÚÒôÀÖÄÚÈÝÏÂÐÂÐèÇ󡪡ªÒòΪÒôÀÖ³¡¾°ÏÂÓÐÇé¸ÐͶÈëµÄÌØÊâÐèÇ󣬱ÈÈçÔÚÇé¸ÐÊæ»ºµÄʱºòÒôÁ¿½ÏµÍ£¬ÔÚÇé¸ÐÃÍÁÒʱÒôÁ¿½Ï¸ß¡£Òò´Ë£¬Èç¹ûÔÚAGCËã·¨ÖжÔÄÜÁ¿½øÐÐÏà½ü´¦Àí£¬¶ÔÓÚÒôÀÖÄÚÈݵĴ«ÊäÊǷdz£´óµÄÉ˺¦£»
•    Howling Control ÔÚÒôÀÖ³¡¾°ÏµÄΣº¦¡ª¡ªÔÚ¶ÔÒôÀÖdemo´¦Àíʱ£¬Èç¹û¶Ôij¸öƵ¶ÎµÄ»ØÉù×ö¹ý·ÖµÄÏû³ý´¦Àí£¬»á¶ÔÈ˵ÄÌý¾õ¸ÐÊÜÔì³ÉºÜ´óÓ°Ï죻
•    NS(Noise Suppression)ÔÚÒôÀÖÄÚÈÝϵÄÍ´´¦¡ª¡ªÓÐЩÒôÀÖ³¡¾°ÀÖÆ÷Öڶ࣬NS´¦Àí»á¶ÔijЩÉùÒôÔì³ÉÒ»¶¨µÄËðÉË¡£ÎªÁË×·Çó¶ÔÔ­ÉùµÄ¼«ÖÂÌåÑ飬ÓÐЩ¹¤³Ìʦ¸É´à¹Ø±ÕNSÄ£¿é£¬ÄþÔ¸ÈÌÊÜÔëÉù£¬Ò²²»Ô¸ËðʧÒôÀÖЧ¹û¡£À½éÉÜ£¬ÍøÒ×ÔÆÐÅÉîÖªÕâÒ»¼¼ÊõÎÊÌâ¸ø²úÆ·ºÍÓû§Ôì³ÉµÄÀ§ÈÅ£¬ÔÚʵ¼ùÖв»¶ÏÓÅ»¯×Ô¼ºµÄNSËã·¨£¬Á¦Õù¸øµ½¿Í»§¸üºÃµÄ¼¼Êõ·þÎñ£»
•    TSM(Time Scale Modification)ÔÚÒôÀÖ³¡¾°ÏµÄÓ°Ï졪¡ªÈç¹û½«ÓÃÓÚÒ»°ã³¡¾°µÄTSMËã·¨Ö±½ÓÕÕ°áµ½ÒôÀÖÄÚÈݳ¡¾°Ï£¬»áµ¼ÖÂÒôÀÖÄÚÈÝÔÚ´«Êäʱ½ÚÅĵı仯£¬ËùÒÔÐèÒª×ö³öרÃÅÊÊÅäÒôÀÖ³¡¾°µÄTSMËã·¨¡£
¡°ÔÚ´¹Ö±ÁìÓòÓú·¢·á¸»µÄ½ñÌ죬Õë¶Ô²»Í¬µÄ³¡¾°£¬¶Ô²ßÂÔ½øÐе÷Õû£¬ÊÇÿ¸öµ×²ã¼¼ÊõÌṩÉÌÓ¦¸Ã˼¿¼µÄÎÊÌ⣬ҲÊÇÍøÒ×ÔÆÐÅһֱŬÁ¦µÄ·½Ïò¡£¡±À×ܽáµÀ¡£Èü¼ÊõÆ¥Åä¿Í»§£¬È÷þÎñ¸ü¼ÓϸÖ£¬¼ÈÊÇÕû¸öÐÐÒµÉú̬׷ÇóµÄ½á¹û£¬Ò²ÊÇÍÆ¶¯ÐÐÒµÉú̬½ø²½µÄ¶¯Á¦¡£

ÊÕ²Ø
ËÍÔÞ
·ÖÏí

·¢±í»Ø¸´

µÇ¼ºó²ÅÄÜÆÀÂÛ

ÒôƵ·ÖÀà´óÈ«

+ ²é¿´È«²¿·ÖÀà