Qoncept公司和SEP公司已开发出用于现场音乐直播的实时AR图形系统“instrack”。
“instrack”使用AI技术检测和分析各种类型的信息,包括乐器的坐标(目前只能检测到吉他琴头)、人体关节的坐标、人体区域的蒙版图像,这些信息可实时用于相机图像的AR制作效果和分析。
图源:SEP
通过使用所获得的数据,可以在各种CG软件上为现场直播视频添加各种AR表演。由于图像分析能够只用一台笔记本电脑(MacBook)进行操作,因此可以很轻松地引入到现有系统。(当使用带有M2芯片的MacBook Air时,输入分辨率为1920 x 1080px,输入帧率为30 fps,在1 Fr内处理。)
来源:prtimes