每日聚焦:香港故事|人机交互音乐会:唱响不一样的《东方之珠》
新华社香港7月17日电题:人机交互音乐会:唱响不一样的《东方之珠》
新华社记者 陆敏
“小河弯弯向南流,流到香江去看一看……”
(资料图片)
歌声响起处,大屏幕上五彩斑斓的3D音画随着旋律“起舞”,晶莹欲滴的珠子不断幻变出城市、海港、船帆,还有月色和灯火,水母在玫瑰色的天空中游弋,巨大的海浪卷出彩虹……
一场别开生面的音乐会14日在香港大会堂音乐厅举行,担任指挥的是香港浸会大学交响乐团音乐总监潘明伦。在真人乐团的现场伴奏下,300多个虚拟人声合唱一曲《东方之珠》,配上由人工智能为歌曲创作的3D音画,瑰丽奇幻,气势恢宏。
人工智能专家、浸会大学副校长郭毅可接受新华社记者专访。新华社记者 吴晓初 摄
“这应该是全球首场同类的人机合作表演。”人工智能专家、浸会大学副校长郭毅可说,“人和机器共同创作和完成一个艺术作品,我们做到了。”
这是浸会大学“香港人机共生艺术创造平台技术建设”项目拿出的第一份成绩单。这一项目去年获得香港特区政府拨款5200多万港元,开展为期5年的艺术科技研究。
组建人工智能“合唱团”
今年是香港回归祖国25周年,项目团队首先想到了歌曲《东方之珠》。“用人机交互的方式进行再创作,以此送上我们的祝福。”负责该项目的郭毅可说。
第一个挑战是“组建”320个虚拟歌手组成的人工智能“合唱团”。
通过收集专业歌手的录音歌曲,他们提取和分解了声乐的主要特点,开发了声乐的生成模型,成功创建了一个四声部的合唱,同时通过8个人的人声采样,生成320个具有全新音色的虚拟歌手,“组建”成团。
虚拟歌手们开始“唱”得并不好,会唱错、唱不上高音甚至破音跑调。“声音就是频率,教它们学唱歌不算太难,就是需要不断地通过调整频率进行改善。”郭毅可说。
在彩排中,香港浸会大学交响乐团音乐总监潘明伦身上多处绑着传感器,他不时与台下的技术团队进行沟通。新华社记者 吴晓初 摄
第二个挑战是表演时的人机互动。在舞台上,指挥和乐团是真人,虚拟歌手们要学会“听”指挥的指令,做到与交响乐团的现场演奏无缝衔接,而这并非易事。
记者在彩排现场看到,指挥潘明伦脱去了西装,他的腰上、肩上、手臂和手腕处都绑着装有传感器的绑带,他不时停下指挥,与台下的技术团队进行沟通磨合。
传感器的作用是把指挥的肢体动作“同声传译”给人工智能合唱系统。“难点也在于此,指挥的手势不是固定的,需要有个模糊逻辑让系统学习。开始挺乱的,现在越练越好了。”郭毅可说。
经过长达半年的科研攻关和人机磨合,浸大的人工智能合唱团成功地完成了与真人交响乐团的合作。
人工智能眼里的“东方之珠”
最大的突破来自人工智能的“创作”。配合歌曲意境,人工智能自主创作的3D音画,用天马行空的想象力和表现力向人类描述了它眼中的“东方之珠”。
在这段时长约4分钟的3D音画里,人工智能共生成近3000张图像,且画面之间逻辑顺畅,并与《东方之珠》的歌词和旋律相匹配。“根据歌词内容不断变化,动态生成各种场景。镜头设计了一个虚拟的飞行视角,其速度和高度随旋律而变化,音量高就飞得高;节奏快,速度也会加快。”郭毅可说。
香港浸会大学交响乐团乐手在彩排中演奏。新华社记者 吴晓初 摄
刚开始的时候,团队只是让人工智能根据歌词生成一幅幅画,将它们简单连接。随着探索的深入,他们开始尝试让人工智能“创作”三维视频。“这需要对歌词内容系统地理解,而且逻辑必须连贯,并且自动生成。这个时候我们的创新就开始了。”郭毅可说。
要做到这一点,首先要让机器学会理解歌词的文字内涵,人“教会”机器了解一些相对应的关系,比如香江代表着香港,“珠”的意象要成为贯穿音画的主线等,在此基础上让机器自主想象,自行创作。而在机器完成创作后,具备不具备美感和意义则需要人来反馈,并帮助它修正。
“这就是人机交互的创作。”郭毅可说,“我们开发了一个人工智能驱动的媒体艺术家模型,‘东方之珠’音画是我们向超级人工智能艺术家目标迈出的重要一步。”
让科技赋能艺术
在以往的人工智能艺术创作中,一个传统的思路是机器模仿人。郭毅可对此并不认同。他认为,在艺术创作领域,人工智能有自己独特的创造能力。随着人机交互技术的进步,它的创作可以跟人不一样,也可以被人理解和欣赏,并可能随着人对美学的需求而不断改进。
“科学上的突破往往最先来自于观念,我认为我们中国人有这个能力,不在人家的话语体系里转圈圈。我们这次的创新在于理念变了,由此找到了新的突破点。”郭毅可说。
人工智能专家、浸会大学副校长郭毅可(右二)在彩排现场。新华社记者 吴晓初 摄
《东方之珠》音画第一版,整个图像投影在一颗珠子上,然后珠子一层层打开,到“流到香江去看一看”时,突然幻变成了一朵紫荆花。“我们都惊呆了,‘香江’的概念居然会以一朵紫荆花的形态展现,非常奇妙,这就是机器的创造力。”他说。
如果相信机器能够创造,那么未来的艺术会是什么样?这个问题令郭毅可和他的团队兴奋。郭毅可认为,科技赋能艺术,人机达成更多的互动与交流,为艺术的发展带来全新的可能。
下一步,人机互动要向更深层次探索,比如连接意识、情感。“我们可以把美感编码,让机器认识美感,然后让美感成为它创作的一部分,这是我们研究的一个重要方向。”郭毅可说。
郭毅可希望将来能人机合作创作一部歌剧,将编、导、演、唱集成展现。“探索无止境,没有什么是不可能的。”他说。
视频记者:林宁、梁嘉骏
标签:
相关阅读
-
年内最大规模解禁周来袭 中微公司解禁市值达328.49亿元
2022年年内最大规模解禁周来袭。经东方财富数据Choice统计,在7月18日-22日这周将有94股(剔除上市新股)...
2022-07-18 -
真我GT2大师探索版明天首销 该机搭载高通骁龙8+处理器
7月18日消息,真我GT2大师探索版将于明天正式首销,8GB+128GB售价3499元,12GB+256GB顶配版售价3999元,...
2022-07-18 -
K50电竞版降至2299元 是Redmi K50系列家族第一款上市的机型
7月18日消息,小米京东自营旗舰店显示,Redmi K50电竞版降至2299元,比首发价便宜1000元,有冰斩、暗影...
2022-07-18 -
非洲之王传音4G新机上市 该机配备一块6.7英寸AMOLED水滴屏
6月份,传音宣布将会推出全球首款搭载联发科Helio G99的手机。如今,传音搭载该芯片的新机Infinix Not...
2022-07-18 -
努比亚Z40S Pro核心参数曝光 支持类DC调光与光学屏下指纹
7月20日,号称直屏旗舰新标杆的努比亚Z40S Pro将正式登场。数码博主@数码闲聊站 今日曝光了该机的核心...
2022-07-18 -
Redmi K50i真机照曝光 该机搭载联发科天玑8100旗舰处理器
7月18日消息,Redmi即将在印度发布K50系列新品,名为K50i。赶在发布会之前,mysmartprice曝光了Redmi K...
2022-07-18 -
coco奶茶2022年加盟费用是多少?coco奶茶是什么时候创立的?
CoCo奶茶品牌一直坚持独具匠心的经营,为大众提供物美价廉、味道独特、营养价值高的茶饮。而且CoCo凭借...
2022-07-18 -
天天微资讯!永州市零陵古城上榜!拟入选第二批国家级夜间文化和旅游消费集聚区名单
永州市零陵古城。永州市零陵区柳子街。永州市零陵区东山景区。红网时刻新闻7月18日讯(记者何超)7月18...
2022-07-18 -
环球观察:112家生物医药公司披露上半年业绩预告 26家净利预计翻倍
证券日报记者谢若琳据同花顺数据显示,截至7月17日记者发稿,A股市场452家生物医药公司中,已有112家公...
2022-07-18 -
快资讯丨【专家预告】为啥会出现一个家族里多人患脑血管病的情况?这周四12320专家告诉你
生活中,我们可以看到有的家庭或者家族里,好几位家族成员先后都得了脑出血或者脑梗死,为什么会出现这...
2022-07-18 -
苑东生物研发费占20%新药品不断涌现 一拟中选产品“降价”93%
第二次参加集采的苑东生物,因为产品底子厚,显得更加自信。近日,苑东生物(688513 SH)公告称,公司拟...
2022-07-18 -
光启技术68亿募投项目5年仅投7.7亿 监管追问为何将10亿募资补流
超材料龙头光启技术(002625 SZ)的一次高达68亿元的神奇定增,市场质疑从未中断过。始于2015年,光启技...
2022-07-18
精彩推荐
阅读排行
相关词
- 沃尔沃XC90
- 易烊千玺放弃入职国家话剧院 会尝试走进话剧领域学习和提升自己
- 年内最大规模解禁周来袭 中微公司解禁市值达328.49亿元
- 巨亏航司盼暑期旅游旺季“回血” 半年亏损超去年全年
- 【环球时快讯】云南一家人72年接力守边护边 累计行程16万公里
- 今日热议:痛风可不仅仅是男性“专利”,绝经后的女性更是要注意!
- 当前报道:月经不调,这些“药”好吃又有效
- 最资讯丨07月18日08时, 昆明早高峰路况
- 天天通讯!安徽增本土确诊3例无症状52例
- 环球观焦点:2022年度“活力机关”全民健身活动羽毛球赛举行
- 当前消息!“夜赏铜都 一路向光”第三场活动举办
- 焦点资讯:生命在于运动,看完马上行动
- 简讯:铜官区上半年省市重点项目投资完成率超七成
- 世界观速讯丨每天交易160吨!昆明野生菌大量上市,价格...
- 天天精选!28℃的昆明,热吗?降雨来了,18℃的昆明即将上线
- 每日焦点!压力大焦虑给身体带来5大伤害
- 天天快看:注意防范!云南等9省市部分地区将有大暴雨
- 天天关注:天舟三号完成任务撤离 空间站将迎接问天实验舱
- 【当前独家】速转!华山街道办事处核酸检测点位信息有调整啦!
- 天天最资讯丨就业招聘 | 五华区2022年“百日千万网络招聘专项行动”线上招聘岗位信息
- 快消息!见到此人,请立即报警→
- 天天实时:府院联动+裁审衔接 官渡法院巧妙化解86位保洁员讨薪案
- 环球资讯:快来报名~呈贡花都文化旅游节系列活动即将启动!
- 观焦点:职等你来|呈贡多家企业正在招聘中……
- 今日看点:筑牢安全防线,呈贡区防“溺”于未然
- 天天热点!总戴太阳镜最好2年一换
- 天天新资讯:亚洲首座专业货运机场,正式投运!
- 【环球报资讯】新闻观察丨欧洲经济陷入困境背后的美国“黑手”
- 全球快资讯:总台专访丨土耳其资深媒体人:美国并不希望粮食危机得到解决
- 今日报丨伊朗外交部:美国利用“伊朗恐惧症”在中东制造危机
- 【全球速看料】拜登会晤谈人权 沙特王储回以美国“黑历史”
- 当前视讯!热热热的昆明,即将来一场“及时雨”降温啦
- 新消息丨雨来了!四川重庆陕西等地将迎来降雨
- 世界速递!警示案例:当客车跨实线超车遇上超载货车……
- 环球实时:近期高发!医生、老师、企业家、公务员.......都被骗了
- 环球聚焦:重大刑事案件!见到此人立即报警
- 环球实时:四川北川突发山洪,已致6人死亡12人失联
- 【世界新要闻】施甸:荷花都开好了,你不来看看吗?
- 世界快看:【反诈宣传】精准宣传点对点 助老防骗出实招
- 【环球快播报】在希望的田野上 | 多地早稻、小麦进入成熟期 大面积开镰收割
- 世界热资讯!石林街道“火把节”这样过!
- 世界讯息:英国《金融时报》:美国看起来“不像发达经济体”
- 天天讯息:新闻观察丨海湾国家不愿站队 拜登中东行算盘落空
- 全球球精选!在希望的田野上 | 全国早稻收获已过四成 总体进展顺利
- 每日速讯:总台专访丨赞比亚经济学家:美西方挑动冲突 引发非洲动荡
- 今日报丨好运“莲莲”!阳光下双色珍稀荷花美到窒息
- 全球新动态:@所有家长,这份暑期安全指南一定要看!
- 天天看热讯:夏日游腾冲去火山公园揽胜
- 每日信息:年均气温18.5度!临沧被誉为中国恒春之都
- 焦点资讯:临沧,全球最大的澳洲坚果产业基地
- 今日播报!在希望的田野上|数字赋能、“云”种辣椒,遵义这个基地不简单
- 世界头条:全球连线|香港爱国教育支援中心揭幕
- 当前消息!祖国内地天地广阔 香港青年大有可为
- 当前快讯:【在希望的田野上】全国最“辣”的交易市场!遵义这座“城”奏响红火“椒响曲”
- 观察:【在希望的田野上】遵义辣椒手机种,周黑鸭海底捞都在用
- 天天通讯!惊艳!这些地方荷花已盛开,送你满屏清凉~
- 全球热消息:昆明宜良:绿水青山留乡韵 乡村振兴展新颜
- 快看:普利桥种粮记(十):老雷 我们都看着你呢
- 环球观速讯丨有时我们最大的敌人不是能力,而是说话的本事
- 世界头条:今年上半年保山市旅游业总收入超220亿元
- 环球微资讯!保山中心城市被称为“西南一大都会”
- 天天视点!塞尔维亚总统:西方通过乌克兰打代理人战争
- 今日快看!主播说联播丨美政客自曝“真心话”,拿他国人命大冒险!
- 环球即时看!突破“卡脖子”,圣湘生物迎利好
- 滚动:美国儿童玩枪走火又酿悲剧 5岁弟弟意外枪杀8岁哥哥
- 观热点:何止博尔顿?美国对他国下黑手的“黑历史”太多
- 视点!防范养老诈骗 | 追赃挽损还现场普法,检察官获群众点赞!
- 全球热点评!【廉政故事】言谏监察官王元翰:当街亮家财
- 全球焦点!【故乡物语】父亲素描(三章)
- 看点:实验结果表明:不戴帽子晒太阳或伤害大脑
- 全球资讯:英国发布有史以来首个高温红色预警
- 全球速讯:小女孩抱着雕像不肯撒手!背后故事戳心了
- 当前简讯:国家卫健委:昨日新增本土确诊病例106例
- 热点!两位陌生人,一张十元钞 一段善良与诚信的佳话
- 世界速读:100多元买齐白石、徐悲鸿的数字藏品,是投资还是坑?
- 【天天聚看点】高考花钱可录取?别相信
- 当前热点-2022年国家助学贷款开始受理 多项政策出台缓解还款压力
- 每日热议!浪漫云南欢迎你
- 前沿热点:这个夏天,来云南追“星”吧!
- 焦点快播:官渡:居民盼了20多年的不动产权证拿到手了
- 天天新资讯:杨绛诞辰111周年
- 全球观天下!7月16日0时至24时,云南新增确诊病例2例
- 全球信息:安徽增本土确诊5例无症状42例
- 天天短讯!07月17日08时, 昆明早高峰路况
- 当前时讯:07月17日07时, 昆明早高峰路况
- 每日时讯!组图丨江永:最是一年好“丰”景 早稻开镰收割忙
- 今日快看!【在希望的田野上】足不出户“玩”贵州?看乡村推荐官杜富佳如何“带货”家乡
- 天天精选!推荐一个有助减少皱纹的睡姿:仰卧
- 当前热议!总台专访丨菲律宾专家:美国是造成全球危机的罪魁祸首
- 速读:【在希望的田野上】重庆永川:让山村更美 让村民更富
- 天天观点:东湖评论:让更多“凉策”呵护高温下的坚守
- 世界微头条丨多国专家:美国通胀和激进加息危害巨大
- 全球球精选!美国反控枪议员克鲁兹摊上事!52辆校车摆成一把"枪" 堵在家门口
- 【环球播资讯】尽快报案!警方发布最新提醒
- 【新要闻】樊振东和陈梦继续排名世界第一
- 天天速读:一次购买多次使用!中老铁路昆磨段推出计次票、定期票
- 环球快消息!聚焦重点群体 重庆多措并举稳就业
- 世界即时:村民们该多思念她啊,驱车几个小时只为……
- 环球热消息:直面“烤”验,他们“毅”往无前!
- 每日视点!到城乡基层就业创业!@高校毕业生,这些服务和保障别错过
- 环球热门:全国碳市场启动一周年 | 从关键数据看促企业节能减排、绿色发展成效
- 天天播报:烈日下的劳动者辛苦了!
- 【天天播资讯】停电公告,昭通这些区域请提前做好准备
- 当前短讯!2022年6月中国好书榜单发布
- 世界新动态:本文已开“空调”,昭通市民进来领清凉“福利”→
- 今日热议:重要提醒,致全市中小学生家长的一封信
- 【时快讯】应急科普 | 儿童溺水高发期,这些安全知识家长和孩子都要了解!
- 每日精选:“感谢组织为我卸包袱” 腾冲市澄清正名暖人心
- 环球微速讯:市场监管总局:已处置15批次不合格雪糕产品
- 消息!东湖评论:网红夜市被叫停并不冤
- 每日快播:【大学生评论大赛·漫评】情系留守儿童,以画为媒美育童心
- 今日精选:反诈防骗 | 识破养老诈骗花样套路!10部精彩短片看个够
- 世界快看点丨@高校毕业生,服务乡村振兴,最高补贴3万元!
- 当前速讯:绝对干货!如何预防和应对爆胎
- 世界最新:防溺水!防溺水!防溺水!@所有人,必须牢记!
- 每日速看!通告!“2022石林民族团结进步火把节”期间严禁使用易燃易爆物品
- 【世界新视野】富民警方搭建“四道防线”全力筑牢暑期交通安全网
- 【世界新视野】趣“云野”,探访野生动物们的暑期生活!
- 【全球速看料】热热热!注意,三伏天来了
- 当前消息!省十六运会火炬接力到红塔区啦!
- 微头条丨美媒批白宫对通胀认知与民众脱节:政府似乎与大多数美国人无关
- 短讯!全球连线|“十多年后,我知道我表哥看得对、说得对”——非洲青年在华求学记
- 【全球时快讯】东湖评论:“超级月亮”演绎绝美中国式浪漫
- 每日快讯!【世界说】美媒:美政府行政令成本惊人 让工薪阶层纳税人背上“巨额”税单
- 快看:中国经济半年报 | 上半年我国造船三大指标继续位居世界第一
- 世界焦点!美媒:美国最大的敌人是自己
- 天天观天下!热ྂ热ྂ热ྂ!今日入伏
- 全球播报:男子运动后喝冰饮突发心梗!高温天气,这些事最好别做
- 全球速讯:07月16日17时, 昆明晚高峰路况
- 今日视点:小布丁大布丁雪糕抽检不合格
- 当前热讯:【芳甸】榴花开出流年香
- 【天天速看料】昆明市知识产权质押融资助力企业纾困成长
- 环球报道:丁纯会见海螺集团董事长杨军一行
- 每日热点:清凉云南,欢迎你!
- 每日报道:普利桥种粮记(九):占田这笔账,到底怎么算?
- 天天新资讯:“荷”你有约丨快来获取大观赏荷指南
- 视焦点讯!上合组织发布会:北约觊觎亚太 对世界和平安全没有建设性
- 天天讯息:【世界说】汽油和食品价格飙升将美国通胀率推至40年来新高 拜登和民主党面临重压
- 天天观热点:媒体聚焦 | 腾冲这处摩旅营地,能让你在云海中醒来
- 世界热门:三伏天有多难熬
- 环球微速讯:《铜陵市养犬管理条例(草案修改稿)》立法听证会举行
- 通讯!@普洱人 老年人接种新冠疫苗,必要!有效!
- 每日消息!办理建筑许可专题推进会议召开
- 全球观察:市老年书画研究会换届
- 全球新动态:三伏天来了!一图掌握三伏天健康攻略
- 全球实时:公安部:百日行动以来全国已抓获7.2万人
- 天天速递!“三夏”时节看三色 稻香遍地粮满仓
- 世界热推荐:我国成功发射四维03/04卫星
- 全球新资讯:农业农村部:小麦机收进度快于去年 实现适期收获、颗粒归仓
- 今日讯!多地持续高温 热射病如何预防
- 环球热门:农业农村部:夏粮生产呈现四大亮点 小麦品质好于上年