时报早知道
  • 麒纪科技AI解说系统点亮“村BA”之夜

  • 作者:现代时报网   信息来源:现代时报网 
  • 2024-09-20 11:25 收藏
  • 麒纪科技 AI 解说系统
  • 2024年9月17日中秋节的晚上,贵州省台江县“村BA”球王争霸赛现场,欢笑声此起彼伏,一群身着苗族服饰的中国“姑妈”们,正和来自海外的篮球爱好者进行一场别开生面的篮球赛。更令人惊讶的,伴随这场比赛直播的中国国际电视台里,有一个流畅、生动、充满地方特色的现场解说,为乡土体育赛事拉满科技范儿。

    这套引人注目的AI解说系统由中国初创企业麒纪科技提供。麒纪科技成立于2022年10月,专注于多模态大模型技术应用,三位创始人均来自北京大学。此前,麒纪科技成功服务第19届杭州亚运会,其高速运动AI解说系统为乒乓球、跆拳道、跳水、体操等多项赛事提供了精彩的解说服务。

    篮球新玩法:当“姑妈们”重新定义规则

    图说:因最初参与者多为返乡的外嫁妇女,也即当地人口中的“姑妈”,这种新颖的篮球赛便被亲切地称为“姑妈篮球赛”。每支代表队 5 人上场,除了进攻限时 24 秒,球出界、撞人、打手外,常规篮球赛的违例行为都不算数。

    "姑妈篮球赛"源于贵州省黔东南州的雷山县,已经有20年历史。这项独特的民间体育活动打破了传统篮球的规则束缚,创造了一种全新的比赛形式:球员可以抱着球奔跑,没有走步违例的概念,只要不是故意犯规,原则上不会吹罚,多人抢球时,经常演变成一场女子摔角,正如当地人所说,"只要不把篮球抱回家,就不算犯规"。

    但你要是以为“姑妈们”只是随便玩玩,那可就大错特错,这里有激烈对抗,有变速过人,有挡拆顺下,还有超远勾手,精彩程度毫不逊于NBA赛事。

    姑妈篮球完美诠释了体育的魅力,场上的球员赛得开心,场下的观众也看得爽快,毫不意外地,这项接地气的活动火出了圈,甚至火到海外,截止今年5月,姑妈篮球赛相关话题的全网浏览量观看人数已经超过 50 亿人次。

    2024年的中秋节,近百名美国民间球员和啦啦队远道而来,共同感受贵州苗寨“村BA”的火爆和中国文化的魅力。灯火通明的篮球场上,美国“姑妈”队的精彩表现赢得了阵阵掌声,最终台江姑妈队凭借丰富的经验和默契的配合,以27:24战胜充满活力的美国对手,网友纷纷送上评论:“姜还是老的辣!”

    苗寨“姑妈”们对篮球的重定义,给观众带来了前所未有的观赛体验。作为体育赛事不可或缺的一部分,解说肩负着传递现场氛围的重任。面对这场新颖的文化盛会,主办方也大胆启用了AI解说系统,用最新技术捕捉并向全球呈现姑妈篮球赛的独特风采。

    无规则遇上新科技:AI解说“村BA”的别样魅力

    “新奇”“好玩”“无规则”的特点为比赛增添了的乐趣和观赏性,但也给赛事解说带来了巨大的挑战。比赛节奏忽快忽慢,随时可能因为球员的即兴发挥而出现意想不到的变化。如何准确识别和描述这些非常规动作?如何预测比赛的走向?如何向观众尤其是远程观众传达现场的热烈气氛?这些都是AI解说系统需要考虑的难题。

    姑妈篮球赛不仅是一项体育活动,更是苗族文化的重要组成部分,它体现了苗族人民热情好客、热爱生活的精神风貌。因此,要真正解说好姑妈篮球赛,AI系统还需要理解苗族文化背景和传统习俗,准确识别并向观众解释比赛中的社交互动,并将比赛与当地节日庆典联系起来,增加解说的文化深度。

    凭借在杭州亚运会上的卓越表现,麒纪科技的智能体育解说系统吸引了主办方的目光。通过一系列AI技术及其创新应用,麒纪科技的高速运动AI解说系统,成功解说了第19届亚运会乒乓球、跆拳道、跳水、体操等赛事的比赛录播,展示了其在处理多样化体育项目时的灵活性和适应能力,特别是在一些相对小众的项目中,AI解说系统填补了专业解说员资源不足的空白。

    第19届亚运会乒乓球AI智能解说图

    面对此次姑妈篮球赛这一独特的解说场景,麒纪科技通过多种前沿技术的融合应用、大量实际测试和持续的产品迭代,构建了一个基于多模态大模型的智能解说平台,有效整合了视觉、听觉、文本、知识库等多模态信息,在场景理解和情感表达方面实现了质的飞跃,大幅超越了现有的技术解决方案。

    多模态数据处理与理解

    麒纪科技智能解说平台的核心是其强大的多模态数据处理与理解能力,基于多模态视觉大模型,能够实时处理高帧率视频流,精确识别复杂的人体动作和场景信息,包括抱球奔跑、多人拔河式抢球等特殊动作。通过实时分析每帧图像中“姑妈”们的位置,结合运动预测模型,实现了高效的多目标追踪,在拥挤或快速移动的情况下也保持目标追踪的稳定性。

    系统集成了基于深度学习的增强型OCR技术,结合场景理解算法,能够在复杂背景中准确提取和解释文字信息,如动态计分板数据和场外的标识。

    在音频处理方面,平台采用了定制的声学模型和语音识别技术,不仅能处理嘈杂环境下的语音,还能捕捉运动员、教练和现场观众的情绪变化,为解说提供更丰富的语境信息。

    知识融合与语义理解

    数据采集后,进入信息处理阶段。麒纪科技使用大模型检索增强生成(RAG)技术,专门研发了体育赛事解说知识库,通过构建包含苗族文化、当地风土人情、篮球规则等多维度信息的知识图谱,结合开放数据系统从内部数据库和外部信息进行关键信息检索,整合最新的赛事信息和活动背景,自动融入到解说当中。在大幅度提升体育赛事解说自动化的同时,降低了现有解说体系对于民间私有知识库和信息搜集方面的工作强度。

    智能内容生成

    在内容生成环节,平台采用了最新的大语言模型(LLM)技术,基于国产大模型基座,经过了多项体育赛事解说专门数据集的微调,不仅具备强大的自然语言理解能力,还能生成符合体育解说特点的流畅文本。该平台的一大创新在于其动态Prompt工程技术,能够根据比赛的节奏和氛围以及用户偏好,动态调整提示词,从而生成更加个性化和适应场景的解说内容,确保解说始终与现场氛围保持同步,并为观众提供沉浸式的体验。

    个性化语音合成

    在最后的输出阶段,平台采用了先进的神经网络TTS(文本到语音)技术。这不是简单的语音合成,可以结合特定观众偏好的声纹特征,生成富有感情和节奏感的解说音频。麒纪团队表示,他们的目标是形成定制化的语音解说,让每个观众都能获得独特的听觉体验。

    值得一提的是,该解说平台还可以将解说内容实时翻译成多种语言,包括普通话、英语、阿拉伯语等。本次AI英语解说的姑妈篮球友谊赛得到了中国国际电视台的实时直播,这大大拓展了姑妈篮球赛的传播范围,让这项独特的民间体育活动能够走向世界。麒纪科技CEO庄棨宁表示,希望通过前沿人工智能技术赋能体育赛事,推动中国乡村体育在国际舞台上展现独特的文化魅力和创新精神。

    “麒纪科技的这套智能赛事解说系统,通过将先进的人工智能技术与体育赛事相结合,让更多人了解体育,为体育赛事传播注入了新的活力。”建峰资本(QBN capital)合伙人汤复基教授进一步指出,“未来在其他领域,诸如虚拟助手、智慧陪伴服务等领域,他们的技术也可以大显身手,形成远超过现有技术和设备的服务效果和更好的用户体验。多模态大模型技术,必将随着我们的应用推广到各个解决人类实际问题的场景之中。”

    中国国际电视台(CGTN)直播AI英文解说赛事

    在这个科技与文化深度融合的新时代,引人注目的不仅是“村 BA” 和姑妈篮球赛这样充满活力的民间体育活动,像麒纪这样的AI赛事解说平台,也让我们窥见AI赋能文化体育产业新纪元的缩影。

    AI技术正在悄然改变我们体验和分享体育文化的方式。通过多语言翻译和个性化定制,中国传统文化和民间体育的魅力得以跨越语言和文化的藩篱,传播到世界各地。

    AI解说姑妈篮球赛,只是一个开始。随着智能技术在体育领域的不断发展和应用,我们可以期待更多创新的赛事呈现方式,更深入的数据分析,以及更广泛的文化交流,越来越多的中国文化被世界认识、理解和喜爱。