雷竞技RAYBET怎样用AI赋能信息无障碍
2023-07-13 16:23:59
雷竞技RAYBET姚登峰是一位听障人士,但他在逆境中不断地创造传奇,获得了北京大学(分数线,专业设置)硕士、清华大学(分数线,专业设置)博士学位,现在是北京联合大学的副教授、硕士生导师。去年12月,他和另外两位清华博士一起创业。
他来自湖北天门,1岁时双耳失聪,却以优异成绩完成各阶段学业。作为全球首位人工智能聋人博士,姚登峰的博士课题是手语认知与计算,致力解决聋人与健全人的信息沟通问题。在李德毅院士的点拨下,姚登峰团队将手语计算研究扩展到行为语言计算研究,即理解全人类的行为语言。为了将成果转化为科技产品,他创业成立行语科技,成为一家行为语言整体解决方案的提供商,公司自主研发的行为语言计算技术,在理解除了语音语言之外的整个人类多样化行为方面,居于世界领先水平。
5月25日,在清华大学校长杯创新挑战赛中,行语科技脱颖而出,获得由众多顶级投资人和专家评出的企业创新奖。
姚登峰从小就以残疾身体奔跑在人生马拉松赛场。他1岁时因为感冒发烧导致听力极重度损失,从此坠入了一片静寂的无声世界。
当时医生的判断是训练没有效果,但他的母亲没有放弃,日复一日对他进行听语康复训练。没有助听器,母亲就在他耳边大声“喊话”,彼此摸着对方的喉咙感觉声音的震动来发音,渐渐登峰学会说话和交流。上学后,他无法听到老师讲课的完整信息,自己就通过大量的阅读和自学来弥补,以顽强的毅力克服了求学中的种种困难和阻碍,他的成绩可以考入重点大学,却因耳聋被拒录,几经周折被录取到一所二本大学。
“生气不如争气!”姚登峰面对挫折激发斗志,更加努力证明自己不比健全人差。2003年他通过全国统考,以专业第一名的成绩考上了北大研究生,并以全优的成绩毕业。也正是在北大读研期间,他第一次接触到信息无障碍。“大部分人认为信息障碍只存在于残障人士之间,其实健全人也会有老的时候,也会有听不到声音、看不到东西的时候,也会有特殊场景下遇到信息障碍的时候。信息无障碍是全人类的事情”。
他在信息无障碍领域做了大量开创性的工作,也发现了手语背后计算领域的一片空白地带,为此他2012年考入清华大学在职攻读博士学位,希望用手语认知和计算技术,让有声世界的口语族与无声世界的手语族能够自由沟通。
在清华读博期间,在数以万计的代码编写和实验论证之后,2016年姚登峰团队在国际上首次提出手语计算的认知架构,一举解决了手语计算困扰多年的底层像素特征与逻辑语义输出的断层,汇合手势分词实验的数据宝库,手语计算的理论、技术与认知支撑首次形成了完整闭环。
担任中国人工智能学会理事长、北京联合大学机器人学院院长的李德毅院士,有一次点拨姚登峰:在自然语言交流效果中,有声语言占7%,语音音调占38%,面部表情、肢体语言及手势等行为语言占55%。过去几十年来AI只关注占比45%的讲话内容的理解,但对于占比55%的表情、手势、肢体等行为语言并未关注。
姚登峰博士毕业后在手语计算的基础上,开始尝试破解行为语言的深层奥秘,由于两者本身在面部、手势、肢体的聚合感知上架构相通,再加上团队伙伴不懈地探索和研究,仅仅两年便在这一领域取得了突破性进展,2017年姚登峰被推荐为北京市卓越青年科学家。
行为语言是从运算智能到达感知智能、认知智能重要的途径,基于动态影像的行为识别是AI的最前沿领域,全球科技巨头都在积极寻找刚需解决方案。
阿布都克力木、哈里旦木两位博士和姚登峰是从事小语种计算研究的清华同学,他们常常在一起讨论前沿科技,在一次次探讨中敏锐地认识到,如果对人类行为语言进行全方位无感识别与计算输出,机器智能便能理解各种行为语义并做出善解人意的反馈。这将是由传统运算智能上升至感知智能和认知智能的重要核心,并可以延伸出更多跨行业有价值的产品和服务。
2018年,姚登峰团队在湖北进行了智能领域的无人驾驶无感识别的实验,通过一周的数据采集,该技术在0~100米范围内可以准确在人群中识别出交警,识别率达到95%;在识别交警准确的8套手势时,识别率达到90%。这证明该技术已达商用标准,他们顺利拿到了国家知识产权证书。
一次,姚登峰与创业伙伴做市场调研,在一所监狱考察时发现其引入了最先进的监控系统,仅一个监控室安装了几十个显示器,对应500个房间外加各类场所通道。但负责这500个房间的状况监控的干警,每天轮班连续看显示器,人极度疲劳,监控效果也很难面面俱到。
如果有了行为语言智慧监控系统,就可以通过人工智能自动发现是否有违规行为,能够及时把违规动作等截图上传到监控室,让就近狱警及时干预,提高管理运行效率和安全防范水平。
团队在市场调查中得知很多场景、场合都需要应用行为语言计算,比如在照顾老人时,识别出老人是否摔倒;在跑步、游泳等体育运动时,识别动作是否标准;在炼油厂等敏感区域,识别出抽烟、没有戴安全帽等不安全行为……各行业的需求对接让团队意识到行为语言计算技术确实可以帮助很多人,使大家增添了开发贴近市场需求产品的紧迫感。
国内团队多在语音识别、图像识别、可穿戴设备识别方面下功夫,但是在行为语言计算方向上,姚登峰认为,未来世界行为语言计算是不需要任何设备的,识别是无感的,希望用超前的无感识别技术改变人类的生活,让技术尽快转化为应用产品。
在接受中国青年报·中青在线专访时,尽管姚登峰能听懂提问,但他还是打开手机语音识别软件,用标准普通话流畅地回答每一个问题。
姚登峰明白,创业是对一个人综合实力的考验,生活节奏“不断在加快加快再加快”,也不断地解决一个又一个难题。
行语科技在创办3个月后,国际某工业巨头主动寻求行语科技投资控股且计划在后续B、C轮融资时引入顶级平台资源。但因随后而来的经济危机搁浅了该计划。
紧接着,行语科技在部署炼油厂监控系统时,发现单体技术跟理想应用还存在着不少距离,很多场景应用不光是行为识别的问题,还需要结合图像识别的技术,比如抽烟动作最好结合识别香烟形状。这涉及底层技术架构的调整,否则就很难通过客户严苛的测试,此时研发主力程序员又因出国被迫退出。困难一个接一个,只能靠创始成员自己顶上,加班加点完成任务。
据了解,目前行语科技的团队有10多人,已与国内一线科创平台签署战略合作,落地智慧监狱和工业场景,同时在南京、杭州等地都有项目落地。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容图片侵权或者其他问题,请联系本站作侵删。侵权投诉
Ansoft Designer仿真PCB呢 希望大家能给些具体操作或者相关资料 在此非常感谢了
型图片 要了解图片是否需要遵循 色彩对比度指南 以及是否需要图片说明,您需要确定它是装饰型的还是
体验 对开发者的意义也愈发重大,在 上一篇文章 中,我们为您介绍了辅助技术,层次结构,颜色和对比度等内容。本文将进一步为您介绍
功能,您可以从用户的角度体验您的应用,并发现原本可能忽略的易用性问题。
功能测试可以挖掘出改进机会,使您的应用变得功能更强大且更多样,造福于所有用户,包括残障用户。 为了获得最佳
体验 对开发者的意义也愈发重大——它不仅意味着更贴心的设计,更意味着实际的增长机遇和发展前景。 但刚接触这个课题的开发者们往往摆脱不了几个关键
OPPO在世界微笑日正式启动“微笑提案”项目,该项目是 OPPO 研究院发起的科创
2021华为开发者大会:手语Sign pal Kit 开放服务 助力沟通
2021华为开发者大会亮相手语Sign pal Kit 开放服务,手语准确率领先行业,助力沟通
。 图片来源:华为直播 这个服务有着开放体系化的手部动作、身体姿态、面部表情,为
领域的发展。科大讯飞输入法业务部总经理程坤受邀参加本次大会,并发表《从人机交互角度看互联网适老化改造——
MCU来生成PWM资料下载的电子资料下载,更有其他相关的电路图、源代码、课件教程、中文资料、英文资料、参考设计、用户指南、解决方案等资料,希望可以帮助到广大的电子工程师们。
改造专项行动”,同时还发布了老年人一键呼入人工客服、电信服务营业厅爱心通道以及主流手机“老人模式”等三项重要适老化措施成果。首批公共服务类网站和手机App的适老化及
化部副部长刘烈宏宣布,工信部将于明年1月起进行为期一年的“互联网应用适老化及
改造专项行动”,着力解决老年人、残疾人等特殊群体在使用互联网等智能技术时遇到的困难,首批将优先推动8大类115家网站、6大类43个APP进行适老化及
的一种全新交互方式,可以有效提升视障用户的操作效率。 小米是首家把触感
化部副部长刘烈宏宣布,工信部将于明年1月起进行为期一年的“互联网应用适老化及
改造专项行动”,着力解决老年人、残疾人等特殊群体在使用互联网等智能技术时遇到的困难,首批将优先推动8大类115家网站、6大类43个App进行适老化及
,实现进阶服务,为生态和应用的发展提供更契合的A.I.源动力。” 胡国平表示。
日前,中国联通携手腾讯和中国聋人协会联合推出了“畅听王卡”,针对听障人士的手机通信困难,提供“
享受美。 比如在一些大型商场中,可以发现同时印有印刷体文字和盲文的名片;在
标识方面,希腊的一家博物馆推出了特殊的参观模式,让盲人通过触摸来欣赏这些杰出的艺术品;赛场交通车的司机主动帮助
表测量可控硅的好处 可控硅分单向可控硅和双向可控硅两种,都是三个电极。单向可控硅有阴极(K)、阳
家装展会一般都人潮汹涌,环境吵闹嘈杂。如何在短短的时间里,与身处营销一线的设计师进行有效的沟通,从而选定一个合适的装饰公司?而在沟通过程