去年年底召开的IEDM会议上，Meta Reality Labs首席科学家Michael Abrash阐述了该公司对当代计算架构如何发展的分析，以使科幻概念化的AR眼镜成为可能。
虽然今天市场上有一些AR“眼镜”，但它们都不具备一副真正的普通眼镜（即使是一副笨重的眼镜）的外观大小。目前最好的AR头显——比如HoloLens 2和Magic Leap 2——相比眼镜形态更接近于护目镜，而且太重且不能整天佩戴。
Michael Abrash认为，如果我们要制造真正眼镜大小、且具有全天电池寿命及引人注目的AR体验所需功能的AR眼镜，那么将需要进行“一系列根本性的改进”，——在某些情况下，转变“硬件和软件”模式。
也就是说，Meta不确信目前的技术，能够打造真正意义上的AR眼镜。
去年年底，Michael Abrash在IEDM 2021大会上发表了这段讲话，并提出了一种新的计算架构，该架构可以满足真正眼镜大小的AR设备的需求。
Michael Abrash表示，重新考虑如何在这些设备上处理计算的核心原因是需要大幅降低功耗以满足电池寿命和散热设计要求。
“我们如何才能将（移动计算设备）的能效从根本上提高100倍甚至1000倍？”Michael Abrash提问，“这将需要对整个堆栈进行深入的系统级重建，并对硬件和软件端到端的协同设计，而重新设计的起点则是今天计算效能的发展方向。”
为此，Abrash绘制了一张图表，比较了低级运算操作的功耗。
如图表所示，最耗能的计算操作是数据传输，这不仅仅是指无线数据传输，甚至意味着将数据从设备内部的一个芯片传输到另一个芯片，更重要的是，该图表使用了对数刻度；根据图表，将数据传输到RAM使用的功率是基本单元12000倍（在本例中是两个数字相加）。
综上所述，右侧的圆形图显示了AR功能所需的关键技术（SLAM和手动追踪），只需将数据移入和移出RAM即可使用大部分功能。
“显然，对于低功耗应用（例如轻便AR眼镜），尽可能减少数据传输量至关重要。”Abrash说。
为了实现这一目标，将需要一种新的计算架构，而不是在集中式计算中心之间传输大量数据，而是在整个系统中更广泛分布计算操作，以最大限度减少数据传输。”
Abrash说，分布式计算架构的起点可以从AR眼镜感知用户周围世界所需的众多摄像头开始，这将涉及在相机传感器本身进行一些初步计算，然后才通过数据传输通道发送最重要的数据。
Abrash表示，达成这一目标需要硬件和软件共同设计，这使得硬件在设计时就考虑了特定算法，该算法可计算相机传感器本身数据，支持处理任何经过传感器的操作数据。
“将最低功耗、最佳性能和最小外形尺寸的标准整合，则能使XR传感器成为图像传感器行业的前沿产物。”Abrash说。
Abrash还透露，Meta Reality Labs已开始为此而努力，甚至已创建了一个原型相机传感器，专门设计用于AR眼镜的低功耗，高性能需求。
该传感器基于一系列数字像素传感器阵列，可在三个不同的光照水平下同时捕获每个像素上的数字光值，每个像素都有自己的内存来存储数据，并且可以决定报告三个值中的哪一个（而不是将所有数据发送到另一个芯片来完成这项工作）。
Abrash说，这不仅降低了功耗，而且还大大增加了传感器的动态范围（它能在同一图像中捕获昏暗和明亮的光线水平），同时Abrash分享了用Meta原型传感器拍摄的样本图像，与典型传感器进行了比较，以演示宽动态范围。
在左侧的图像中，亮光掩盖了图像，导致相机无法捕捉到大部分场景。另一方面，右边的图像不仅可以清晰看到灯泡灯丝的极高亮度，还可以看到场景的其他部分。
这种宽动态范围对于未来AR眼镜的传感器至关重要，这些眼镜需要在低光室内条件下如同晴天照射条件下工作。
尽管Meta原型传感器具有HDR优势，但它的功耗明显更高，在30帧/秒的情况下达到5mW，不过它的扩展性很好，虽然需要更多的功率，但传感器每秒可以捕获480帧。
但是，Meta想更进一步，在传感器上进行更复杂的计算。
“例如，深度神经网络的浅层部分——XR工作负载的分割和分类，如眼动追踪和手部跟踪——可以在传感器上实现。”
但Abrash说，在更多的硬件创新之前，这是不可能实现的，比如开发超密集、低功耗的内存，这对于“真正的传感器上ML计算”是必要的。
尽管Meta已经在试验全新AR技术，但Abrash表示，整个行业需要团结起来，才能实现规模化量产，并特别指出：“（芯片制造商）开发MRAM技术是开发AR眼镜的关键因素。”
“在端到端系统中，我们提出的分布式架构以及我所描述的相关技术结合在一起，将在功耗、面积和外形尺寸方面有着巨大的改进潜力，”Abrash总结道，“进行必要的改进、使其变得足够舒适和实用，并成为十亿人日常生活的一部分。”
https://t.cn/A6XyQmqn
虽然今天市场上有一些AR“眼镜”，但它们都不具备一副真正的普通眼镜（即使是一副笨重的眼镜）的外观大小。目前最好的AR头显——比如HoloLens 2和Magic Leap 2——相比眼镜形态更接近于护目镜，而且太重且不能整天佩戴。
Michael Abrash认为，如果我们要制造真正眼镜大小、且具有全天电池寿命及引人注目的AR体验所需功能的AR眼镜，那么将需要进行“一系列根本性的改进”，——在某些情况下，转变“硬件和软件”模式。
也就是说，Meta不确信目前的技术，能够打造真正意义上的AR眼镜。
去年年底，Michael Abrash在IEDM 2021大会上发表了这段讲话，并提出了一种新的计算架构，该架构可以满足真正眼镜大小的AR设备的需求。
Michael Abrash表示，重新考虑如何在这些设备上处理计算的核心原因是需要大幅降低功耗以满足电池寿命和散热设计要求。
“我们如何才能将（移动计算设备）的能效从根本上提高100倍甚至1000倍？”Michael Abrash提问，“这将需要对整个堆栈进行深入的系统级重建，并对硬件和软件端到端的协同设计，而重新设计的起点则是今天计算效能的发展方向。”
为此，Abrash绘制了一张图表，比较了低级运算操作的功耗。
如图表所示，最耗能的计算操作是数据传输，这不仅仅是指无线数据传输，甚至意味着将数据从设备内部的一个芯片传输到另一个芯片，更重要的是，该图表使用了对数刻度；根据图表，将数据传输到RAM使用的功率是基本单元12000倍（在本例中是两个数字相加）。
综上所述，右侧的圆形图显示了AR功能所需的关键技术（SLAM和手动追踪），只需将数据移入和移出RAM即可使用大部分功能。
“显然，对于低功耗应用（例如轻便AR眼镜），尽可能减少数据传输量至关重要。”Abrash说。
为了实现这一目标，将需要一种新的计算架构，而不是在集中式计算中心之间传输大量数据，而是在整个系统中更广泛分布计算操作，以最大限度减少数据传输。”
Abrash说，分布式计算架构的起点可以从AR眼镜感知用户周围世界所需的众多摄像头开始，这将涉及在相机传感器本身进行一些初步计算，然后才通过数据传输通道发送最重要的数据。
Abrash表示，达成这一目标需要硬件和软件共同设计，这使得硬件在设计时就考虑了特定算法，该算法可计算相机传感器本身数据，支持处理任何经过传感器的操作数据。
“将最低功耗、最佳性能和最小外形尺寸的标准整合，则能使XR传感器成为图像传感器行业的前沿产物。”Abrash说。
Abrash还透露，Meta Reality Labs已开始为此而努力，甚至已创建了一个原型相机传感器，专门设计用于AR眼镜的低功耗，高性能需求。
该传感器基于一系列数字像素传感器阵列，可在三个不同的光照水平下同时捕获每个像素上的数字光值，每个像素都有自己的内存来存储数据，并且可以决定报告三个值中的哪一个（而不是将所有数据发送到另一个芯片来完成这项工作）。
Abrash说，这不仅降低了功耗，而且还大大增加了传感器的动态范围（它能在同一图像中捕获昏暗和明亮的光线水平），同时Abrash分享了用Meta原型传感器拍摄的样本图像，与典型传感器进行了比较，以演示宽动态范围。
在左侧的图像中，亮光掩盖了图像，导致相机无法捕捉到大部分场景。另一方面，右边的图像不仅可以清晰看到灯泡灯丝的极高亮度，还可以看到场景的其他部分。
这种宽动态范围对于未来AR眼镜的传感器至关重要，这些眼镜需要在低光室内条件下如同晴天照射条件下工作。
尽管Meta原型传感器具有HDR优势，但它的功耗明显更高，在30帧/秒的情况下达到5mW，不过它的扩展性很好，虽然需要更多的功率，但传感器每秒可以捕获480帧。
但是，Meta想更进一步，在传感器上进行更复杂的计算。
“例如，深度神经网络的浅层部分——XR工作负载的分割和分类，如眼动追踪和手部跟踪——可以在传感器上实现。”
但Abrash说，在更多的硬件创新之前，这是不可能实现的，比如开发超密集、低功耗的内存，这对于“真正的传感器上ML计算”是必要的。
尽管Meta已经在试验全新AR技术，但Abrash表示，整个行业需要团结起来，才能实现规模化量产，并特别指出：“（芯片制造商）开发MRAM技术是开发AR眼镜的关键因素。”
“在端到端系统中，我们提出的分布式架构以及我所描述的相关技术结合在一起，将在功耗、面积和外形尺寸方面有着巨大的改进潜力，”Abrash总结道，“进行必要的改进、使其变得足够舒适和实用，并成为十亿人日常生活的一部分。”
https://t.cn/A6XyQmqn
【寅虎年的普通】
昨日的奔波，是为了一种仪式，
昨日的盛宴，是为了画上最后的句号，
昨日的一切，永远定格在了昨日，
新的开始在过凌晨十二点的时候已经开始，
没有人能够阻止这个时间的仪式，
只是过去的繁琐到现在，
已经越来越简单，
以至于让人有时候怀疑它并不存在，
或是说它的存在已经没有太多的意义。
夜里该睡觉睡觉，本来的不眠，
因为少了太多的欢乐与乐趣，
渐渐失去了原来的味道，
或是我们的成长，
已经体会不到过年的快乐，
没了过年的兴奋劲，
只是看着越来越多的地方没了烟花，
没了鞭炮声的轰响，
自然也不能归结于成长的代价。
那些过去可以说得上口的快乐，
现在是不会再有人能够体会。
----------------创作2022.02.01 https://t.cn/RI7nYAL
昨日的奔波，是为了一种仪式，
昨日的盛宴，是为了画上最后的句号，
昨日的一切，永远定格在了昨日，
新的开始在过凌晨十二点的时候已经开始，
没有人能够阻止这个时间的仪式，
只是过去的繁琐到现在，
已经越来越简单，
以至于让人有时候怀疑它并不存在，
或是说它的存在已经没有太多的意义。
夜里该睡觉睡觉，本来的不眠，
因为少了太多的欢乐与乐趣，
渐渐失去了原来的味道，
或是我们的成长，
已经体会不到过年的快乐，
没了过年的兴奋劲，
只是看着越来越多的地方没了烟花，
没了鞭炮声的轰响，
自然也不能归结于成长的代价。
那些过去可以说得上口的快乐，
现在是不会再有人能够体会。
----------------创作2022.02.01 https://t.cn/RI7nYAL
-
刘福贵是一个外乡人，普通得不能再普通了。他终日在我的视野里，却被我忽略到可以视而不见的程度。他蓬头垢面，衣衫不整，穿一双永远落满灰尘的鞋子。我认识他时，他不过二十岁，蹬一辆哗哗做响的平板车，到处收废纸破烂儿。在那个雪后寒冷的冬天，他搓着冻红的手，提着一杆老秤和一只沾满污垢的旧麻袋，问我有没有废报纸卖？他的样子，给了我极深的印象。他的脸上挂着谦和与卑微的笑，是小人物身上常见到的那种表情。风吹雨打中，我常见他奋力地蹬着装满小山似的废品的平板车，冬夏汗流浃背地奔波在大街小巷里。像大多数的乡下人，刘福贵不懂抱怨，也没有工夫理会自己如此不堪的命运。我曾在心里自问过，假如有一天，我到了这个份上，能不能忍受如此的苦累？真是不得而知。
光阴如梭，四五年过去，刘福贵不再收废纸破烂儿了，而是在路边支一凉棚，修起了自行车。大概是他修车的价钱合理，手艺也说得过去，或许是他固有的卑微与谦和，他的生意一直都不错。我以为他会永远地修下去。
谁想几年以后，他竟突突地开着一辆农运车，出现在了早市上，开始了贩菜倒菜的生意。这离我认识他已有了八九年的光景。那时我和他都奔了三十岁。
也是那一年，我发现他身边多了一个女人，原来他把乡下的媳妇接到了北京，一同在早市上倒菜。后来我又看到他的女儿，才几岁，光着脚在菜市上和一帮子乡下小男孩跑，满脸的鼻涕。
在我四十多岁的时候，刘福贵已经不在菜市上了，而是在离我家不远的街上开了一间水果店，十来平米的小店，生意却红火。
前年，我装修房子去买玻璃，在玻璃店里，竟意外地见到了刘福贵。我很惊讶，问他媳妇、孩子呢？他说媳妇还在开水果店，他又包下了这间玻璃店。女儿已经上了大学。我心里轰的一下，这离我认识刘福贵已有30年的长短。
这个刘福贵，30年间，一步步竟混得这般的整齐。乡下的一些穷亲戚、穷朋友，也因了他来到这个城市落脚安生，在他的店里打工挣钱。
我和刘福贵从没有深入地交谈过，但作为城市人对乡下人的一种好奇，刘福贵成了我心中的一个参考，常常不能不让我暗自比较。
在我心里，刘福贵是一个十分完美的人。在这个偌大的城市里，不知有多少个这样的刘福贵。他们从农村来到城市，提老携小、风吹雨打中，一天天挨着，几十年过来，从一无所有中开始，一点点地忍耐、积攒、改变，置办着自己的家业。亲戚朋友们也因为他而沾光、脱贫。这该是多大的气力。
细想起来就会发现，刘福贵才是出类拔萃的社会栋梁。无论在乡村，还是在城市，这个社会其实就是由千千万万个刘福贵支撑起来的。
天下诸多英雄，其实莫过于普通的刘福贵。天下诸多豪杰，也未必能比得过他刘福贵去。他活得扎实、勤奋、勇往直前。在我们这个城市，在每一个角落，都有刘福贵这样的人存在。他们优秀而又普通，简单而有智慧。在奋力把自己的日子过好的同时，也在为这个社会和他人贡献着。只是不管怎样，在大多数人的眼里，刘福贵依然是个小人物，一个地地道道的、脸上永远挂着那种卑微表情的小人物！
（赵菲摘自2006年1月3日《北京晚报》）
刘福贵是一个外乡人，普通得不能再普通了。他终日在我的视野里，却被我忽略到可以视而不见的程度。他蓬头垢面，衣衫不整，穿一双永远落满灰尘的鞋子。我认识他时，他不过二十岁，蹬一辆哗哗做响的平板车，到处收废纸破烂儿。在那个雪后寒冷的冬天，他搓着冻红的手，提着一杆老秤和一只沾满污垢的旧麻袋，问我有没有废报纸卖？他的样子，给了我极深的印象。他的脸上挂着谦和与卑微的笑，是小人物身上常见到的那种表情。风吹雨打中，我常见他奋力地蹬着装满小山似的废品的平板车，冬夏汗流浃背地奔波在大街小巷里。像大多数的乡下人，刘福贵不懂抱怨，也没有工夫理会自己如此不堪的命运。我曾在心里自问过，假如有一天，我到了这个份上，能不能忍受如此的苦累？真是不得而知。
光阴如梭，四五年过去，刘福贵不再收废纸破烂儿了，而是在路边支一凉棚，修起了自行车。大概是他修车的价钱合理，手艺也说得过去，或许是他固有的卑微与谦和，他的生意一直都不错。我以为他会永远地修下去。
谁想几年以后，他竟突突地开着一辆农运车，出现在了早市上，开始了贩菜倒菜的生意。这离我认识他已有了八九年的光景。那时我和他都奔了三十岁。
也是那一年，我发现他身边多了一个女人，原来他把乡下的媳妇接到了北京，一同在早市上倒菜。后来我又看到他的女儿，才几岁，光着脚在菜市上和一帮子乡下小男孩跑，满脸的鼻涕。
在我四十多岁的时候，刘福贵已经不在菜市上了，而是在离我家不远的街上开了一间水果店，十来平米的小店，生意却红火。
前年，我装修房子去买玻璃，在玻璃店里，竟意外地见到了刘福贵。我很惊讶，问他媳妇、孩子呢？他说媳妇还在开水果店，他又包下了这间玻璃店。女儿已经上了大学。我心里轰的一下，这离我认识刘福贵已有30年的长短。
这个刘福贵，30年间，一步步竟混得这般的整齐。乡下的一些穷亲戚、穷朋友，也因了他来到这个城市落脚安生，在他的店里打工挣钱。
我和刘福贵从没有深入地交谈过，但作为城市人对乡下人的一种好奇，刘福贵成了我心中的一个参考，常常不能不让我暗自比较。
在我心里，刘福贵是一个十分完美的人。在这个偌大的城市里，不知有多少个这样的刘福贵。他们从农村来到城市，提老携小、风吹雨打中，一天天挨着，几十年过来，从一无所有中开始，一点点地忍耐、积攒、改变，置办着自己的家业。亲戚朋友们也因为他而沾光、脱贫。这该是多大的气力。
细想起来就会发现，刘福贵才是出类拔萃的社会栋梁。无论在乡村，还是在城市，这个社会其实就是由千千万万个刘福贵支撑起来的。
天下诸多英雄，其实莫过于普通的刘福贵。天下诸多豪杰，也未必能比得过他刘福贵去。他活得扎实、勤奋、勇往直前。在我们这个城市，在每一个角落，都有刘福贵这样的人存在。他们优秀而又普通，简单而有智慧。在奋力把自己的日子过好的同时，也在为这个社会和他人贡献着。只是不管怎样，在大多数人的眼里，刘福贵依然是个小人物，一个地地道道的、脸上永远挂着那种卑微表情的小人物！
（赵菲摘自2006年1月3日《北京晚报》）
✋热门推荐