德资入股,上海团队打造新一代科技配镜公司,引入AR和AI技术,将手机变成个人专属眼镜店 2024-08-01 23:44:39 众所周知,微软 HoloLens 这样的比较成熟的 AR 产品仍然在探索应用场景,以致于人们想起 AR,首先联想到的就是娱乐应用,比如手游精灵宝可梦 Go,短视频里的卡通换头特效,iOS 系统里的拟我表情(Emoji)。图 | 微软 AR 设备 HoloLens 2但事实上,AR 这个概念最早诞生于工业制造领域,无论是严肃性,还是应用价值都毫不逊于 AI。两者结合的产物,很可能成为未来传统行业数字化、智能化转型的关键。一家名为 Opteyes 的中国公司,正在尝试结合 AR 和 AI 两项新兴技术,打造一套远程选配眼镜的虚拟试戴服务。这家公司 2019 年成立于上海,由波士顿咨询集团数字风险投资公司(BCG Digital Venture)和一家全球领先的视光学巨头共同打造。前者是知名咨询机构波士顿咨询集团(BCG)全资子公司,专门负责挖掘并发展突破性的数字化产品和平台。所谓突破性,就是在传统行业模式中找到突破口。对于 Opteyes 来说,他们希望借助在眼镜行业,尤其是眼镜挑选和试戴环节,引入 AR 和 AI 技术,推动行业数字化转型。AR 和 AI 强强联合,打造逼真的虚拟试戴在互联网思维普及的今天,眼镜行业仍然依赖于线下零售,配镜流程十分传统。如果你戴眼镜,不妨想想上次配眼镜的经历。面对成百上千副镜架,再雷厉风行的人都可能被逼出选择困难症。而且有的镜架看着好看,但戴起来不一定合适,于是就要不停的摘、戴眼镜,整个过程繁琐且充满随机性。一番周折选好眼镜后,又要面对验光和配镜的漫长等待。不知不觉,一天时间就过去了。对于许多上班族来说,难以在快节奏的现代社会中兼顾视力健康和时间成本。想要在电商上远程选镜,又有许多无法解决的痛点,比如验光不准确,看不到实物镜架,仅凭照片无法判断尺寸和风格是否合适,而且选镜技术不成熟 —— 一些网站直接在顾客照片上贴上镜框,根本不能作为判断依据,无法给予用户信任感。针对这些问题,Opteyes 研发了一套基于移动端应用的虚拟试戴系统,其中用到了三项核心技术:AR 增强现实,3D 拓扑技术和 AI 推荐算法。图 | Opteyes 应用比如说,远程配镜的最大弊端是无法直观感知眼镜大小是否合脸,风格是否合适。从技术的角度来看,想要解决这个问题,需要一套虚拟试戴解决方案。为了最佳用户体验,必须要获得人脸数据和镜架数据。人脸数据因人而异,因此只有 2D 数据的普通照片是远远不够的。Opteyes 利用了 iPhone 系列智能手机上的前置景深摄像头,通过面部扫描来测量鼻宽、鼻高、面宽以及瞳距等相关信息。具体来说,自 iPhone X 以来,所有型号都配有 TrueDepth 原深感摄像头,其性质是基于红外结构光的深度相机系统,除了普通感光元件,还集成了泛光感应元件,红外镜头和点阵投影仪。图 | TrueDepth 摄像头的三个核心组件三个组件构成了 TrueDepth 摄像头的核心,其中最重要的是点阵投影仪。它可以在人脸上投射超过 3 万个不可见的红外光点,再由红外镜头捕获这些光点,计算得出人脸 3D 数据,再结合普通摄像头的 2D 图像数据,就能建立精准的 3D 人脸数字模型。相比 TOF 等景深摄像头,TrueDepth 摄像头所用的结构光技术,在分辨率,材质和颜色还原度,以及深度数据完整性上具有天然优势。由此得到的 3D 人脸模型,被苹果用于 FaceID 生物特征识别功能中,其保真度可见一斑。这也为实现虚拟试戴打下了基础。在没有 TrueDepth 摄像头的安卓手机上,Opteyes 则利用 Unity 3D 追踪技术,ARCore 框架和机器学习算法,实现对人脸的建模和追踪。拿到人脸数据后,Opteyes 构建了基于 ARKit 或 Unity3D 的 AR 算法(取决于 iOS 还是安卓),用于实现虚拟试戴功能,并搭载于同名应用 Opteyes 中。所谓的虚拟试戴,并非简单粗暴地把眼镜贴到人脸上。在 AR 技术支持下,应用里的你其实是一个 3D 模型,而非 2D 贴图。应用会捕捉你的脸部、头部运动,用几秒钟的时间锁定双眼的位置,然后就能给你戴上眼镜。图 | 虚拟试戴展示配图这里就需要用到镜架数据了。为了最大程度还原真实镜架的细节,Opteyes 利用了 3D 拓扑技术对镜架建模。3D 拓扑是一个非常复杂的过程,简单来说就是如何用最少的面还原出实物的真实走形,可以在保证高分辨率的前提下,保证模型不会在实际应用中卡顿和变形。之于镜架来说,其款式不计其数,而每款镜架的材质、纹理、图案、尺寸、配色五花八门,都要用技术手段保证高分辨率和保真度。另外,Opteyes 还为镜架供应商开发了素材预览工具,以便快速核对镜架属性。有了准确的脸部模型和镜架模型之后,才能将虚拟眼镜 “佩戴” 在人脸上。虚拟试戴时,用户可以随意转动头部,从多个角度观察和比较不同镜架上脸的效果,无论是凹出各种造型,还是把手机拿远和靠近,或者是只露出半边脸,都不会出现 “眼镜掉落” 的情况。图 | 换镜架配图为了方便用户观察镜架,Opteyes 还用到了四倍抗锯齿和光线估算技术。前者通常是运用在游戏中的技术,可以保证模型边缘在放大后仍然平滑,用在这里可以保证镜腿和镜框的细节清晰度。后者则是结合苹果 ARKit 或安卓 ARCore 镜片素材,在明亮及昏暗环境下均能显示眼镜反光亮度及颜色,增加真实感。值得一提的是,Opteyes 还在虚拟试戴中提供了拍照和录屏功能,方便回看试戴效果 —— 虚拟试戴时用户可能会摘下眼镜,近视用户可能看不清试戴效果。至于如何挑选镜架,在传统零售店中,导购扮演了推荐镜架的角色,但在数字化模式下,AI 算法其实更能胜任这份工作。比如电商平台上常见的个性化商品推荐,京东还推出了 AI 导购机器人 JOY,背后都是 AI 算法。图 | AI 算法判断脸型类比到 Opteyes 上,在挑选镜架的过程中,如果用户拿不准自己的脸型和风格,不知道哪些哪些镜架适合自己,就可以利用应用中的 AI 推荐功能。该功能使用了基于机器学习的 AI 算法,会从用户脸型、镜架偏好、使用行为、验光及处方结果等多个维度进行评估,最终给出个性化推荐镜架。Opteyes 表示,其 AI 算法是自主研发和训练的,可以利用大数据快速优化和迭代,以适应流行趋势。不仅仅是虚拟试戴和人工智能当然,配眼镜不仅只有挑选镜架一个环节,还涉及到验光、挑选镜片、制作镜片等多个流程。目前来说,像验光这样精细的、需要验光师职业经验的工作还很难远程完成。在 Opteyes 的服务流程中,验光也是在线下完成的。为了提升效率,Opteyes 选择了企业作为线下切入点,工作人员和验光师会携带验光设备前往写字楼或办公区域,为企业客户的员工提供全套验配镜服务。对于有配镜需求的人来说,可以通过 AR 虚拟试戴节省逛眼镜店的时间,只专注于验光即可,一个人平均需要 20-30 分钟。据 Opteyes 介绍,他们的验光设备是来自于德国光学巨头蔡司的 i.Profiler®plus 屈光分析仪,集波前像差、自动验光、角膜地形图和角膜曲率测量功能为一体,大约 60 秒就能完成测量且全程自动化。在保证屈光度误差小于 1% 的前提下,还能捕捉泪膜病变和角膜异常等眼病风险。图 | 蔡司 i.Profiler®plus 屈光分析仪验光完成后,用户会获得个人视力健康档案。这些隐私数据,连同 AR 试戴时捕获的人脸数据,都会经过加密保护。比如人脸数据是不会储存在后端服务器上的,AI 算法完成计算后就会销毁。至于未来的发展方向,Opteyes CEO 王洁玮在接受采访时表示,“我们希望未来能更好地利用 AI 技术,将更多的线下服务转移到线上,比如实现远程验光,利用 AI 推荐镜片等等。在为用户带来更流畅的配镜体验的同时,实现真正的一站式数字化配镜。”其实就像 AI 刚刚进入我们生活的某些领域时一样,在特定应用场景下,我们会觉得没这个必要,因为已经习惯了传统方式。之于目前的眼镜行业也是一样,虽然 Opteyes 也没有解决全部的痛点,比如仍然需要线下验光,以及依赖于验光师的经验。但他们在 AR 和 AI 技术上的突破性尝试,兼顾创意和用户体验的虚拟试戴,都足以让人眼前一亮。或许这就是科技改变生活的价值所在。-End- 赞 (0) 相关推荐 试戴镜 与 眼镜 度数完全相同,为什么会配戴不适? 男,20岁.每天用电脑时间1-2小时,经常开车,会出现眼睛干涩情况.检查结果如下: 原镜光度: 右眼: -3.75DS/-1.00DC*164--1.2 左眼: -5.00DS--1.2 原镜瞳距为: ... 【圆桌】3D视觉,投资的蓝海 | 甲子引力 从左至右依次为李薇.郑昱.赵弘毅.林瓊.葛晨阳 整理 | 周湘豫 杨逍 11月9日至11月10日,科技智库「甲子光年」在北京举行2019「甲子引力」大会.在9日下午的"光电技术专场& ... 已造5万个3D打印眼镜镜片,Luxexcel开始商业化 2020年12月4日,南极熊获悉,3D打印眼镜片专家Luxexcel透露,他们现在已经制造了超过50,000个处方镜片. 这个数字代表了公司的一个重要里程碑,证明了他们专有VisionPlatform ... 测了 9 款墨镜的防晒能力,1500 元的合格了,29 元的居然也还行?! 无论是都市丽人还是村里小芳,买过墨镜的人应该不在少数,但很多人买它只是为了凹个造型,没有太去关注它最最重要的功能: 防 晒! 我们经常在夏天的户外见到的.海滩边必备的墨镜,其实准确来说应该叫太阳镜.你 ... 估值数亿元, KOOYO全博士团队打造新一代严肃保健品 不知从何时开始,网络上兴起一股养生热潮,「朋克养生」「保温杯里泡枸杞」等略带戏谑的词语流行开来,熬夜.减肥等话题也成为当代年轻人新的社交货币,这表面上反映了人们对健康的关注,背后则是保健品市场的暗流涌 ... 高科技!韶关首次引入“无人机群 电子围栏”技术参与春运交通管理 高科技!韶关首次引入“无人机群 电子围栏”技术参与春运交通管理 厚德前海基金:“内容价值+科技创新+产业协同”,三步曲打造文化产业生态的百年品牌 导 读 自成立以来,厚德前海基金对于文化产业的布局主要体现在对影视传媒.文化娱乐.旅游体育.IP衍生等方面. 作者丨张叶 随着物质生活的不断改善,我国文化消费市场空间正在被不断拓宽,但相比发达国家还有 ... 打造新一代高性能机器狗专用执行器,蔚蓝科技与maxon联合研发 执行器是机器人的核心部件之一,是连接并驱动机器人运动或实现某项功能的组件统称.2020年以来,机器狗成为全球瞩目的人工智能机器人新物种. 一只典型的机器狗由12个执行器组成,执行器性能是机器狗运动性能 ... 走罗永浩的老路?吴德周离开坚果团队,担任鲨纹科技CEO 跳脱出手机行业,进入新领域的吴德周,能够停留多久? " 作者 | 肖漫 关于吴德周,在网络看官的眼中,有用"可惜"形容之,也有称其"走下坡路",而无论 ... 330亿!平安人寿收购凯德集团旗下上海来福士广场等资产包 6月28日,据地产资管界获悉,凯德集团与中国平安人寿保险签署合作协议,向后者出售中国来福士资产组合的部分股权.本次合作涉及项目包括上海来福士广场.北京来福士中心.宁波来福士广场.成都来福士广场.长宁来 ... 股市精忠会服务中心:荣耀打造标志性科技品牌 股市精忠会服务中心消息,股市精忠会服务中心指出独立后的荣耀正式对外亮相,以成为全球标志性科技品牌为定位,以创造属于每个人的智慧新世界为愿景,保持"1+8+N 研发人员占比50%+,致力成为全 ... 岐波盛世:专业团队打造硬核后期 随着科技水平的进步,人们对于精神.文化.生活的需求和标准也在逐步提高.以较为直观的视频内容为例,电影从2D到3D的飞跃,后者就以更真实更震撼的画面效果,带给了观众身临其境般的享受,由此就引入了一个重要 ... 1907年德华银行上海伍拾圆样票一枚 1907年德华银行上海伍拾圆样票一枚,加盖"Wertlos"."Specimen"并凿针孔状"DRUCKPROBL"字样,正.背手工加贴50 ...