“哦?跟直播有关,还是视觉...详细说说?要是美颜就没必要了。”
听到直播这两个字,陈浩顿时来了兴趣。
兰师傅见他来了兴趣,显得更加热情了不少。
“当然,不是什么AI美颜这种。”
“这方面的应用太多了,甚至抖音自己就做得不差,在技术积累和资金上,我们不可能跟字节去对撞。”
“更何况,抖音其实最近也出台了这方面的限制,未来估计对于美颜、拉伸身材比例这方面的特效会越来越严格。”
“这个团队要做的,是完全不同的方向。”
他顿了顿,端起茶杯抿了一口,继续介绍。
“他们的核心理念,其实是虚实结合。”
“想象一下,一个主播在家里最普通的客厅或者卧室开播,但通过他们的AI应用,呈现在直播间观众们眼前的,却是站在珠穆朗玛峰山腰,身后是皑皑白雪和无比澄澈的天空。”
“最关键的是,这样的转换,并不是简单的抠图,或者类似搞个绿幕,抠图上特效。”
说到这里,兰师傅的眼中闪过了一丝兴奋。
“他们的算法能实时识别主播的动作,模拟各种环境的自然光照,甚至是环境互动,是完完全全的身临其境。”
陈浩的眉毛扬了扬,显然也被这样的描述给吸引了。
“听起来是挺不错的,甚至有些理想化,技术上能做到吗?”
“能!”
兰师傅听到陈浩的疑问,发出了一声斩钉截铁的回答。
“我之前亲眼看过他们的演示,就当着我的面开了直播。”
“明明现场是我的饭店包间,直播间的画面里却换成了江南水乡,小桥流水,连水面上的倒影都能随着他的动作做出即时反应和变化。”
他停顿了一下,仔细回忆当初看到这神奇一幕的场景。
“最让我难忘的,还是细节。”
“那个小伙子切换场景,场景内的灯光效果也跟着变了,现实中如果不是特别曝光或者特别黑暗,让AI无法识别,几乎完全可以做到随心所欲。”
“而且,其中一个场景是湖面,他现实在包间里走动,直播画面里却让湖面泛起了各种涟漪,一旦用力踩踏地面,甚至还有水花!”
“同时,播放音乐,湖面也会随着音乐的鼓点产生共振。”
“除了这些,不时还会有飞鸟路过,或者小鱼跃出水面。他一旦挡在了那些AI模拟出来的动物运动路线上,甚至还会把这些虚拟生物给撞到湖水里。”
“那种真实感,除了顶级的电影特效,我几乎没有在任何地方见过。”
“最重要的是,这些都不是预设的动画,完全是AI根据场景自行随机生成的。”
陈浩点了点头,眼中的兴趣越来越浓。
“交互我知道,但要如何保证主播与环境的融合度?”
“我上次看到过,好像现在也有类似的直播软件,不过那种抠图的感觉很严重。”
兰师傅面色一正,语气也郑重了不少。
“这确实正是他们技术的难点,不过也是他们的突破所在。”
“那天我看下来,主播跟环境的融合已经非常逼真了,如果不是特别仔细的情况下,基本是分辨不出来的。”
兰师傅似乎也不太能记得清楚细节,摸出手机,打开了一个备忘录。
“按照他们给我的说法,意思是他们的AI不仅能识别人体轮廓,还能分析光线、阴影、画面透视关系。”
“直接利用AI给直播中的主播补光,基本就能解决大部分‘抠图’感。”
“因为这种环境和人物的不协调感,其实最根本的原因就在于光线折射。”
“再加上环境交互,比如主播站在湖面上的时候,她的鞋底会有一部分陷入水面,不管做什么动作,水花都会根据她的动作轨迹和力度自然溅起。”
“未来,听说他们还打算加入模拟现实服装被虚拟场景当中的水、泥土等物体打湿、附着的状态。”
“一旦这些都能实现,主播就会真的跟场景彻底融为一体了。”
不过此时,陈浩却微微皱眉,沉思了片刻后,他有些认真地问出了自己的问题。
“有卡顿或者延迟吗?这样的即时运算,感觉算力要求很高啊,普通主播的设备恐怕没办法承受吧?”
兰师傅哈哈一笑,赞许地看向陈浩。
“陈先生果然敏锐,不过这也是他们目前最大的困难。”
“延迟大概在10秒~30秒左右,这一点倒是好办。”
“他们的模型还有很大的优化空间,未来只要数据足够,完全有可能压缩到3~5秒,甚至更低。”
“而且本来,网络数据的传输也是需要时间的,又不是玩儿pVp游戏,没有那么追求低延迟。”
“现在最大的问题在于,虽然模型的框架已经搭建好了,但就只是我看到的那1分钟直播,就出现了不少bUG,虚拟的场景甚至在一部分区域出现了马赛克,1分钟后就崩溃了。”
“而这样程度的算力需求,当然更不可能是普通主播能承担得起的。”
“他们需要购买大量的算力GpU,或者最近谷歌新推出来的tpU,组建自己的云上算力中心。”
“同时,他们也能用这样的算力来继续投喂给AI更多的数据,更多的训练量。”
“这样的话,其实电力消耗也是一个需要庞大投入的部分。”
说到这里,兰师傅又笑了笑。
“除了他们团队的创始人是锦城人之外,之所以优先考虑在我们锦城落户,其实也跟锦城这边的电价更便宜,能节省成本有关系。”
陈浩听完了兰师傅的介绍,若有所思。
“这个项目听起来确实挺不错的,一旦能下沉到普通直播间,从视觉效果上对于其他直播间几乎都是碾压的。”
“大体量的公会,也能省下非常多的造景和灯光预算。”
“没错。”
兰师傅立刻附和道。
“不需要昂贵的场地租赁,不需要复杂的设备准备,甚至不需要专业的布景知识,只需要选择自己想要的场景,其他的一切都能交给AI来完成。”
“我看您对团播看得比较多,其实很多团播人气低迷,就跟灯光、场地布景有非常大的关系。”
“那些人气比较高、大公会的团,他们的优势除了流量扶持之外,更重要的是重金聘请了专业的场景灯光师。”
“很多小团的主播其实长相也完全不输给大公会,但就是播不起来,没办法让更多的观众点进来。”
“最核心的原因,就是没人气的那些,跟有人气的团,在画面质感上完全不在一个层面。”
“观众虽然没办法意识到自己在挑选,但下意识的就是更愿意停留在画面质感更好的直播间里。”
“嗯...”
陈浩沉吟了片刻,问出了一个核心问题。
“那他们的商业模式是什么?按月订阅,还是按使用时长收费?”
听到直播这两个字,陈浩顿时来了兴趣。
兰师傅见他来了兴趣,显得更加热情了不少。
“当然,不是什么AI美颜这种。”
“这方面的应用太多了,甚至抖音自己就做得不差,在技术积累和资金上,我们不可能跟字节去对撞。”
“更何况,抖音其实最近也出台了这方面的限制,未来估计对于美颜、拉伸身材比例这方面的特效会越来越严格。”
“这个团队要做的,是完全不同的方向。”
他顿了顿,端起茶杯抿了一口,继续介绍。
“他们的核心理念,其实是虚实结合。”
“想象一下,一个主播在家里最普通的客厅或者卧室开播,但通过他们的AI应用,呈现在直播间观众们眼前的,却是站在珠穆朗玛峰山腰,身后是皑皑白雪和无比澄澈的天空。”
“最关键的是,这样的转换,并不是简单的抠图,或者类似搞个绿幕,抠图上特效。”
说到这里,兰师傅的眼中闪过了一丝兴奋。
“他们的算法能实时识别主播的动作,模拟各种环境的自然光照,甚至是环境互动,是完完全全的身临其境。”
陈浩的眉毛扬了扬,显然也被这样的描述给吸引了。
“听起来是挺不错的,甚至有些理想化,技术上能做到吗?”
“能!”
兰师傅听到陈浩的疑问,发出了一声斩钉截铁的回答。
“我之前亲眼看过他们的演示,就当着我的面开了直播。”
“明明现场是我的饭店包间,直播间的画面里却换成了江南水乡,小桥流水,连水面上的倒影都能随着他的动作做出即时反应和变化。”
他停顿了一下,仔细回忆当初看到这神奇一幕的场景。
“最让我难忘的,还是细节。”
“那个小伙子切换场景,场景内的灯光效果也跟着变了,现实中如果不是特别曝光或者特别黑暗,让AI无法识别,几乎完全可以做到随心所欲。”
“而且,其中一个场景是湖面,他现实在包间里走动,直播画面里却让湖面泛起了各种涟漪,一旦用力踩踏地面,甚至还有水花!”
“同时,播放音乐,湖面也会随着音乐的鼓点产生共振。”
“除了这些,不时还会有飞鸟路过,或者小鱼跃出水面。他一旦挡在了那些AI模拟出来的动物运动路线上,甚至还会把这些虚拟生物给撞到湖水里。”
“那种真实感,除了顶级的电影特效,我几乎没有在任何地方见过。”
“最重要的是,这些都不是预设的动画,完全是AI根据场景自行随机生成的。”
陈浩点了点头,眼中的兴趣越来越浓。
“交互我知道,但要如何保证主播与环境的融合度?”
“我上次看到过,好像现在也有类似的直播软件,不过那种抠图的感觉很严重。”
兰师傅面色一正,语气也郑重了不少。
“这确实正是他们技术的难点,不过也是他们的突破所在。”
“那天我看下来,主播跟环境的融合已经非常逼真了,如果不是特别仔细的情况下,基本是分辨不出来的。”
兰师傅似乎也不太能记得清楚细节,摸出手机,打开了一个备忘录。
“按照他们给我的说法,意思是他们的AI不仅能识别人体轮廓,还能分析光线、阴影、画面透视关系。”
“直接利用AI给直播中的主播补光,基本就能解决大部分‘抠图’感。”
“因为这种环境和人物的不协调感,其实最根本的原因就在于光线折射。”
“再加上环境交互,比如主播站在湖面上的时候,她的鞋底会有一部分陷入水面,不管做什么动作,水花都会根据她的动作轨迹和力度自然溅起。”
“未来,听说他们还打算加入模拟现实服装被虚拟场景当中的水、泥土等物体打湿、附着的状态。”
“一旦这些都能实现,主播就会真的跟场景彻底融为一体了。”
不过此时,陈浩却微微皱眉,沉思了片刻后,他有些认真地问出了自己的问题。
“有卡顿或者延迟吗?这样的即时运算,感觉算力要求很高啊,普通主播的设备恐怕没办法承受吧?”
兰师傅哈哈一笑,赞许地看向陈浩。
“陈先生果然敏锐,不过这也是他们目前最大的困难。”
“延迟大概在10秒~30秒左右,这一点倒是好办。”
“他们的模型还有很大的优化空间,未来只要数据足够,完全有可能压缩到3~5秒,甚至更低。”
“而且本来,网络数据的传输也是需要时间的,又不是玩儿pVp游戏,没有那么追求低延迟。”
“现在最大的问题在于,虽然模型的框架已经搭建好了,但就只是我看到的那1分钟直播,就出现了不少bUG,虚拟的场景甚至在一部分区域出现了马赛克,1分钟后就崩溃了。”
“而这样程度的算力需求,当然更不可能是普通主播能承担得起的。”
“他们需要购买大量的算力GpU,或者最近谷歌新推出来的tpU,组建自己的云上算力中心。”
“同时,他们也能用这样的算力来继续投喂给AI更多的数据,更多的训练量。”
“这样的话,其实电力消耗也是一个需要庞大投入的部分。”
说到这里,兰师傅又笑了笑。
“除了他们团队的创始人是锦城人之外,之所以优先考虑在我们锦城落户,其实也跟锦城这边的电价更便宜,能节省成本有关系。”
陈浩听完了兰师傅的介绍,若有所思。
“这个项目听起来确实挺不错的,一旦能下沉到普通直播间,从视觉效果上对于其他直播间几乎都是碾压的。”
“大体量的公会,也能省下非常多的造景和灯光预算。”
“没错。”
兰师傅立刻附和道。
“不需要昂贵的场地租赁,不需要复杂的设备准备,甚至不需要专业的布景知识,只需要选择自己想要的场景,其他的一切都能交给AI来完成。”
“我看您对团播看得比较多,其实很多团播人气低迷,就跟灯光、场地布景有非常大的关系。”
“那些人气比较高、大公会的团,他们的优势除了流量扶持之外,更重要的是重金聘请了专业的场景灯光师。”
“很多小团的主播其实长相也完全不输给大公会,但就是播不起来,没办法让更多的观众点进来。”
“最核心的原因,就是没人气的那些,跟有人气的团,在画面质感上完全不在一个层面。”
“观众虽然没办法意识到自己在挑选,但下意识的就是更愿意停留在画面质感更好的直播间里。”
“嗯...”
陈浩沉吟了片刻,问出了一个核心问题。
“那他们的商业模式是什么?按月订阅,还是按使用时长收费?”