2024年5月23-24日,由流媒体网主办,湖北长江云新媒体集团、湖北电信、湖北移动、湖北联通共同协办的「长江论道暨27届智能视听与科技创新产业论坛」在湖北武汉隆重举行。
本届论道以“洞见新格局·智变新视听”为主题,聚焦大屏格局之变,寻找视听向新路径。在23日下午的智屏运营主题论坛上,上海视九信息科技有限公司CEO周云龙发表了题为《新质生产力下的大屏新生态》的主题演讲,介绍了JsView核心技术在行业的应用前景。
以下为演讲全文:
各位专家,各位领导,大家下午好,很高兴又相聚在武汉,与大家进行交流与分享。我今天的演讲题目是《新质生产力下的大屏新生态》。
先简单介绍一下公司的基本情况,视九科技公司在上海,成立于2014年,目前为止有50多人,70%是研发人员。
公司的核心团队来自于英特尔、上海交大,有多年的浏览器、播放器行业的技术研发经验,并且公司也一直在服务于大屏产业。
上图是公司获得的一些荣誉——高新企业、专精特新企业以及20项发明专利。
那么到底何为大屏新质生产力?新质生产力,首先是以创新为引导,然后高科技、高质量、高效率生产,并能降本增效,给终端赋予新生命。
另外,我们考验新质生产力的方式还是要以价值为导向,对用户有没有价值,对商业有没有价值,这是最核心的。
实际上目前IPTV、OTT的更新迭代比较慢,周期比较长,那么怎么样能保证在时间较持久的终端上,还能够继续非常流畅的让用户得到该有的服务,让老盒子、老终端拥有新生命,以及怎么让原有的业务在新的终端上快速落地、快速服务?
那么接下来我一一介绍公司核心的技术方案和技术方向。
JsView浏览器引擎和JsvPlayer播放器
从开始成立,公司就做浏览器相关的业务。以前我们叫轻应用,现在为了更方便别人理解这个概念,所以把它叫小程序,也就是基于JsView上的小程序开发和应用。
事实上,在大屏领域,很多终端性能、配置参差不齐,那么怎么样做出又轻、又小、又快的浏览器内核/引擎是非常重要的。
目前公司已经把它做到足够的轻、足够的快。一个浏览器,安装包只有3M,内存只有15M,帧频流畅度50fps。目前给用户带来的体验,跟主流的互联网电视、高配置的电视一模一样,基本上跟原生是保持同样的性能指标。
我们还升级了JsView引擎新特性,支持高级动画特效,包括卷春联、放鞭炮、放烟花、3D翻书式场景切换、水波纹、碎玻璃等等。
例如,3D翻书式场景切换。JsView是用3D引擎,相当于GPU加速方式来实现,其本质上可以做很多更高端的、高级的效果,甚至3D翻书式场景切换这种3D化的效果。我们只要把底层能力制作好,上面的开发就可以随心所欲,你只要想得到,我们就可以帮你做得到。
我们允许独立开发、独立部署,我们给客户提供的都是很大的项目,也因此不可能由一个团队或几个人完成,很多都是分团队,分工合作,各方面都很灵活。我们也引入了模块化的开发方式,允许大项目分工。
最近还做了很大的功能扩展,支持遥控+触控交互融合一体,以往电视大屏还是以摇控器为主,这在电视的场景下是够用的,但随着客户的业务持续往外拓展,会拓展到音响、中屏、车机等,遥控器就很难满足这些业务需求。而用我们的方案,就可以自动支持触控,端到端同时落地。最近公司花了很多精力和时间做触控工作,现在已经支持的很完整了,有不少应用客户已经用起来了。
此外现在应用都讲究云化,广科院领导也再讲云化、云应用,那么怎么才能做到云化?我们都知道,大屏云的终端经不起折腾,折腾着折腾着可能就把终端折腾没了,我们如何尽量的少折腾终端,又能高效运营、高效迭代产品,针对此,公司做了动态加载机制,基本上一个底座进入后,几乎原有的原生能力扩展和引入都不需要升级底座,类似于安卓的插件机制。
播放器更新在视听行业里、大屏领域,要求比较高,而公司的插件化的播放器,就可以让开发者灵活地来动态加载。
同时我们还可以做到单进程、多内核,例如,我们在浏览器上打开百度、新浪,普通浏览器的一个版本只对应着一个内核,而我们可以做到每个网页、小程序,都可以用自己专属的内核。为什么能做到这一点,因为我们的内核足够小,只有1M,相当于三到四张海报图,所以非常灵活,每个小程序应用都可以拥有一个自己的APP。而且开发、维护、迭代只管自己就行了,不用考虑兼容性,可以大大提升产品迭代周期和效率。
JsvPlayer播放器已经应用到很多运营商业务上,协议支持华为、中兴等平台,支持IGMP、RTSP、HLS等协议。播放器从兼容性、适配性上,应该是全行业做的最好的。
目前倍速是非常主流的用户需求,那么怎么能够让这个速度在原有的终端上都能够让用户用到,以前安卓6.0以上才提供支持,而现在在安卓4.0上就可以支持倍速功能,包括绿屏抠图、画中画都可以支持。而且管理成本低,不需要升级系统。
JsvPlayer播放器应用场景,还支持IPTV直播/点播、IPTV软终端。目前软终端最大的问题是怎么样让IPTV视频业务搬到OTT上。原来电视机协议没有那么全,而我们支撑IPTV视频业务搬到OTT时,OTT点播、K歌/音乐都支持,而且K歌还可以分音轨。另外通过抠图等各方面技术,我们还支持比较高端的广告。
行业AI大模型
最近都在讲大模型、AIGC,而我们作为技术公司,也一直在技术层面做积累。现在我们在做行业可定制化AI大模型。
当然大模型不能完全自己做预训练,肯定是要拿开源的模型做,经过对比,最终选择了阿里开源的“千问”模型,作为我们做行业定制模型的基础,目前整套大模型的技术栈都搭建起来了。
服务好整个场景,一是要预训练,可以定制化调整。我们采用了最前沿的Agent框架,往智能体、通用家庭助手方向发展。我们也在推理优化上做了很多调研工作,让反应速度更快、推理成本大幅度降低。
下面介绍下一代AI家庭助手,我们希望它真正能够在家里做一个陪伴式、对话式的家庭助手,交互是全语音交互,融合了影视、娱乐、多媒体等场景需求。它背后是通用的大模型框架,有生成能力,可以陪你聊天,你可以问它天气、日历、百科知识。
目前下一代AI家庭助手,已经在我们自己的终端体系内、产品上应用了,所有的客户、用户对于这一产品都是眼前一亮的。
小程序新生态
有了以上的核心技术为基础,云化的小程序生态就应运而生了。首先做云化的应用生态,需要有底座,这个底座是承载所有小程序的基础。
我们的底座,首先它是基于JsView浏览器上去做;第二,支持插件,原生能力灵活扩展,多内存;第三,按需选用,各个应用之间互不干扰;第四,包体极小,底座只有3M,但这么一个小小的底座,它可以支撑成千上万个应用,极大地解放了终端上的限制。
我们的合作方,有很多行业垂类的头部应用开发商,例如大家比较熟悉的,像唱吧、喜马拉雅等等。
我们的小程序还支持一次开发多端应用,也就是开发了不只在大屏上落地应用,还可以拓展到很多其他屏幕,以唱吧为例,在大屏上开发完了,一模一样的版本可以直接应用到闺蜜机、带屏音箱、车机屏等等。
关于生态方面,我们需要联合行业内的其他合作伙伴一起在做,比如做EPG开发的,或者做应用的,而我们就提供浏览器、播放器这种新型中间件。未来我们希望有更多的合作方加入进来。
欢迎大家使用JsView技术,共建大屏新生态!