汽车博主因眼睛小被辅助驾驶误判睡觉，如何解决人工智能在类似情况下的短板？

现在的汽车，可以说是越来越智能了，这得益于汽车厂商们对于相关技术的不断钻研。但是总的来说，目前汽车的很多智能功能，还处于一个相对早期的阶段，所以在使用中难免会碰到一些问题。近日，一位汽车博主就因为小鹏汽车的辅助驾驶功能而感到非常郁闷。
根据这位博主的表示，他在驾驶小鹏汽车，使用小鹏辅助驾驶功能的时候，因为自己的眼睛比较小，所以被系统判定为“开车睡觉”，从而被扣除了智驾分。该博主也是相当无语，表示：“这个问题你们再不优化优化，那眼睛小的都不配用NGP呗？”
* x2 d; b$ D6 {+ D9 E" e目前，小鹏汽车官方也转发了该博主的消息，表示小鹏汽车的自动驾驶同学已经连夜收到了优化需求，感谢鹏友们的积极反溃而小鹏汽车创始人何小鹏也@了相关高管，表示：“看看这个情况怎么处理？”


博主因为眼睛小被小鹏辅助驾驶误判

其实不难解决啊这个问题，汽车启动的时候，打方向盘的时候等时间段司机肯定没有睡着，这些时间段相机疯狂捕捉司机的眼神，捕捉到足够的样本之后做一个calibration即可。
如果calibration之后发现眼睛实在太小，在系统能够正常运行的阈值之下，直接显示：“您的眼睛太小，系统无法正常运作，本功能禁用”就可以啦。

我觉得这次真的不能怪人工智能：
这个是当事人：
' {( h! h/ m% Q) W0 _6 i0 q

! g/ ^2 b$ a9 O9 i" L图片来自当事人微博，侵删。他这个照片已经是自然状态下的眼睛。他自述睁不开。外人一看这不就是闭眼嘛。所以评论也纷纷在说不能怪小鹏。很多网友献计献策，有让他去做手术开眼角的。有让他贴眼贴拉开眼皮的。
3 h9 X. Q) ~1 K( R

眼皮贴：
4 R5 _! J6 b8 W# w

7 q1 E+ o5 a+ q% w这是他之前的微博：


( m/ C4 J: \& e7 [9 a* x- X0 N小鹏官方的回应：

让我想起了我的高中岁月
7 D/ E, t( d0 B/ ]2 c7 q# d“xxx，睡着了是吧”
; i9 G: e0 \9 L! L  D6 h“xxx，别睡了”
xxx的头动了一下
. @/ i& g% e/ A% X9 |“xxx，我说你呢，你这姿势怎么睡得着的？”
“xxx，睁开眼”
“老师我特么睁开了啊”
顿时全班一阵雷霆般的笑声。
AI不冤，我只能说。
/ Q1 J  P- f9 i/ F哈哈哈哈哈哈哈
+ F+ H! Q7 b, A+ O) d已经很像人类了，起码有高中老师的水准了。

出品：子弹财观
% p; j  R+ K9 A7月27日，最近两位小鹏汽车车主遇到了同一个烦恼，因为他们的眼睛长得比较小，结果在开启小鹏汽车辅助驾驶功能时，多次被系统判定为开车睡觉，或者叫“频繁分神”，进而导致自己的“智驾分”被扣分。

) s  {3 v0 [( F' N
5 G. {+ U5 V) Q  E* E8 m- c5 g

+ X# @) K# P% q5 Q$ m. T智驾分是小鹏汽车在2021年11月份推出的一套评分系统，他们会对汽车驾驶员在辅助驾驶时的一些行为进行判定，如果驾驶员行为不正确，就会被警告或扣分，如果分数扣完，就需要参加小鹏汽车的安全考试，才能重新获得100分的智驾分。而对于智驾分90分以上的车主，小鹏汽车也给出了未来可以优先获得小鹏OTA公测的权益作为激励。
这两位车主还都是媒体人，一位是汽车博主常岩，另外一位是数码博主“DerekTLM”。
常岩根据自己的亲身经历，透露只要是检测眼睛的自动辅助驾驶系统，目前所有的汽车品牌“无一通过我这一关”，他还举例：

我们买的小鹏P7，会提示我睡觉。
+ w) |, }( ?0 R; I我们买的岚图FREE，会在冬天为了让我“别困”而打开冷风。
! M# |/ Y# X- D) ~3 `, ?7 a# p6 [% x我现在买的ET7，因为我一开车就认为我疲劳和走神。

包括通用汽车的辅助驾驶系统，也一样会误判常岩的眼睛。
常岩透露只有特斯拉的Autopilot与他“相安无事”，因为这套系统检测驾驶员的方法是靠方向盘，而非用摄像头扫描眼部判定。
常岩最后还打趣地说“希望最终的结果，不是何小鹏总亲自出钱给我开个眼角”。
8 W8 k' C/ ^, @9 e7月26日下午，小鹏汽车的创始人何小鹏也注意到了车主的反馈，他还在网上公开艾特了公司相关的高管，让他们看看类似的情况该如何处理。而小鹏汽车互联网中心副总经理刘毅林在被何小鹏追问后回应说：“在优化了，在优化了”，他还附上了一个流泪的表情。

- s5 J1 M( \: {2 V
8 `. l( }3 I9 Q. r
# Z+ L" C9 d" K6 r5 |( C/ P/ `
到目前为止，小鹏汽车方面也无法马上解决这个因为眼睛小而误判的问题。还在继续寻找解决方案吧？
另外据悉蔚来汽车也在7月26日连夜成立了研究小组，希望能帮助常岩一起解决类似的问题。据公开资料显示，截至今年6月底，蔚来和小鹏汽车已经分别交付20万辆汽车，合计超过40万辆。
* {' x3 ?+ F3 @8 t4 R因为眼睛小而导致系统误判，这应该是个别车主遭遇的个案，但如果放到40万车主群体中，也可能会有一定比例的车主遭遇误判的困扰。另外这件事也让我们重新思考辅助驾驶系统的智能化，显然，这套系统做得还不够完善。
' y' p) W& d9 [4 {9 t! f$ w; w在技术层面的挑战是，系统如何判定用户真的是眼睛小，还是在睡觉，这可能需要不止一种识别方法，综合运用方向盘监测和人眼监测综合去判定，甚至不排除采用更多的监测技术，这也有可能增加电动汽车在软硬件方面的研发成本。
何小鹏曾称小鹏汽车的自动辅助驾驶系统是“中国最好的自动辅助驾驶NGP”，如今他们却遭遇如何识别小眼睛的问题，且暂时无解。对于后续小鹏汽车或蔚来汽车可能给出的解决方案，我们也会持续追踪的。

最近一次OTA更新，我的主观感觉确实是P7的DMS判定阈值更严格了，这导致了我本就不富裕的智驾分数，更加雪上加霜……现在我的智驾分只有45分了。


这是人工智能AI的短板吗？ 恰恰相反，这不是AI的短板，而是没有充分利用AI的短板。
一、DMS是什么？
" N7 h9 ^0 f" s( g# p0 N
/ a& N# L  E7 Z当你连续开车3小时睡意袭来时，坐在副驾的美女对你吼了一句：「注意点，别睡着了啊！你活腻了，我可不想死！」

3 ~# y% g$ E; }
# o1 L* }+ n. p6 u0 j. s; x$ q此时，她扮演的角色就是DMS(Driver Monitor System)驾驶员监测系统。功能很简单，就是在判断你走神的时候提醒你，让你专心开车。
以前大家都不太留意DMS功能，但在智能辅助驾驶功能普及之后，DMS就变得非常重要了！
以前是人自己开车，现在是人和机器「人机共驾」。
8 p% I' F" j& Y/ V骑过公园里的这种车吗？ 两人都可以控制方向（有的车是据断了其中一个，只能一人控制）。
0 i/ T  R/ Z" p% \这种「人人共驾」的情况下，一旦遇到道路狭窄、公园小河时，你就需要先观察对方的状态，再做出自己的转向决策。

; d" b- b6 Q) W+ Q
否则，你以为她会打方向盘，她以为你会打方向盘。结果你俩都不打，那不就掉进河里了？？？

7 {9 q) G1 q/ g/ {, j
不好意思放错图了，应该是这张：
3 B7 ]) f4 L/ T* B

! |4 z# l; r% G% {2 |* C% ^) X「人机共驾」也是一样，你通过仪表、语音来判断车的状态，车也需要通过摄像头判断你的状态 —— 这就是DMS的作用。
7 m$ p! w3 z+ J* ]3 j- j8 B! o3 `DMS的基本结构很简单：感知 → 决策 → 执行。听起来甚至与自动驾驶系统相似。其中最复杂的就是感知，把小眼睛的人判断为走神也属于感知环节的问题，咱们就重点聊聊感知吧！
/ \( }2 a6 t0 K8 @" l7 P# o二、多模态的感知需要AI融合
6 P+ f9 @/ ~& _. a' `8 I8 ^. y5 u/ k
为什么会把小眼睛识别成走神？ 大概率是视觉识别的比重太高了！如果能将脑电波、肌电、皮肤电、心电、呼吸等全面的数据都获得，然后再融合判断，就不会错了吧？
毕竟，人家只是眼睛小，大脑、心脏、呼吸都没问题啊！
这样的权威设备，其实就是医院里的睡眠监测仪：
3 I* p+ K" ?  q0 v7 T; q% m( T
8 A1 Y! `4 Q+ y$ l) s
2 E7 }4 ]4 @9 [用脚后跟想想也知道，这套系统虽然专业，但不可能用于量产车上。退而求其次，有人提出用智能穿戴设备与车载系统通讯，获取人的心电、血压、体温数据：

( @" a1 a) L( d
: C! C* \  A5 {$ s' I  G这个思路确实不错，但智能穿戴设备与车机系统之间的沟通不太通畅，难以落实。要想实现这一点，等华为、苹果造出量产车来再说吧！
如今，再退一步吧！ 给方向盘上安装一个摄像头，监测面部、肢体、眼球动作；再装一个转矩传感器，监测手部动作 —— 这也是目前的主流方案。
下图可以看到，小鹏P7方向盘上有一个DMS摄像头，还有一串紫色的小灯用于红外补光、照亮人脸（这些小灯人眼是看不到的，手机可以拍出来）。
$ b1 f; ~7 R$ U( ^; [" w" F# ~

此时，你开始思考一个问题：美女在吼你的时候，既没有正眼看你（摄像头未工作），也没有偷偷摸你的手（方向盘传感器未工作），那她怎么知道你走神的呢？
$ L* p/ E; b6 c  z摄像头看到了面部与眼球，怎么判断驾驶员的状态呢？
# z& M+ B, ]3 w而且，判断结果不能是行或不行，而是要区分出：走神（distraction）、疲劳（fatigue）、打瞌睡（drowsiness）[1]甚至昏迷（突发事故、突发疾病）……
; H9 f! I- e- h' e& L& v传统方法是人为地总结出一套判断规则，例如一篇综述作了总结[2]：

• 根据微小点头动作发生的频率[3]1998年：当过大时判断为瞌睡。
  
• 根据眼睛闭合70%的时间比例[4]1994年：当闭合多的时候就判断为瞌睡。但这套方法对小眼睛司机、带墨镜的司机无效。
  . v/ }* {' ~, h4 m4 o

0 L! i. p1 C1 K* d. V0 y

$ ~; Q9 `7 A9 B
• 综合PERCLOS指标[5]，1998年：眨眼持续时间、眨眼频率、明显的头部或体动。
  ' u( j; E$ d) V  |
• 监测瞳孔变化[6]：瞌睡时瞳孔会缩小，醒时瞳孔大小保持相对稳定。如果副驾坐着你爱的人，瞳孔也会忽大忽小，从而干扰算法。
  * d' [5 B. B& \
• 监测嘴部变化[7]：频繁说话、认真开车、偶尔打哈欠，嘴的动作是显著不同的。
  8 h- D+ i1 q: v1 F! V. n5 t

5 d# @& t' z, t7 l  |& n
这些算法还有很多，我猜你也不想再听了，其实也没必要听了。因为……
3 B' B" i% W. C6 e" H这是因为深度学习算法出来之后，它说：在坐的都是垃圾！
. w' x4 _$ U; l2 G7 B6 _9 `/ m
/ _( r2 \" K" n- o) |
所谓深度学习算法之类的AI算法，根本不去总结这些规则，而是直接给结论。它就像Alpha Go的围棋完虐人类棋手之后，柯洁委屈地对Alpha Go说：你根本不懂围棋！
+ D- j3 M4 a6 v. L
2 ~: Y& {% B% R$ r( g0 l) }7 x
1 _0 [/ O$ {2 q) W+ BAlpha Go对柯法说：你根本不懂AI。懂不懂围棋重要吗？反正我能赢。

; ~3 l( o& v6 J5 f9 i' ?2 O
总之，深度学习算法就是下面这么一通分层、一通运算，就可以判断驾驶员状态了，比之前人类总结的所有规则都要好使。


7 V3 S) u, b; v5 T2 \# s0 QAI眼中的美女，她长这个样子[8]。
你可以对AI说：你不懂美女。 一位好好的美女，不应该按照三庭五眼的标准来看吗？
AI告诉你：你不懂AI。我管我怎么看美女呢？ 她打瞌睡时我能知道就好了！

: X' O1 z2 w& U% ?  B

2 C8 p+ I& X& R. r图片来源[9]
1 K; Q5 a! ?- c6 y8 f: I6 \0 G
8 y9 q! W$ c/ \+ l# c主要判断依据为摄像头，实际上是融合了车辆状态、方向盘传感器、麦克风等各种状态的。将来，随着汽车与智能穿戴设备的融合，DMS也会越来越精准、越来越安全。
: h9 z) O% i+ H/ n) s, g- \. ^比如，当年测个心电数据，还要在座椅上贴传感器[9]。如今，华为watch和iwatch都具有ECG功能了。万事具备，就差他俩造 车了！

" B- Y$ a7 k0 L9 |6 D) h
也就是说，真正高级的算法不会只根据眼睛大小来判断走神，而会根据眼睛大小变化的幅度与频率、眨眼频率、明显的头部或体动、嘴的动作来综合判断。
* }- d4 j0 Z  k( s  c退一步想，如果只是根据眼睛大小来判断的话，那我戴个墨镜怎么办呢？
小结
( `2 D9 S; t1 M5 N
考虑到我最近开车都戴墨镜，扣分也很多，所以合理推断此汽车博主并不是因为眼睛小而误判睡觉，而是因为算法阈值过于严格了，导致大家扣分都很多。
' r1 {4 g1 W9 |( G& N: p! }这不是人工智能的短板，而是人工智能潜力未充足开发带的短板。关于小鹏智驾分，除了阈值问题之外我还有一个建议：像我这样NGP里程特别多的人，就算比较守规矩，被扣分还是很多！所以不能只扣分不加分啊，如果安全使用NGP驾驶100公里就应该加1分，这样才比较合理对吗？