利用深度学习开发老板探测器，再也不担心一回头突然看到老板了
jopen 7年前
<p style="text-align: center;"><a href="/misc/goto?guid=4958190462259388048" title="程序员"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/a08e318ff2ebc4ad30d5e6ff0cd93701.jpg" /></a></p> <p>本文转载自 51CTO（ID：weixin51CTO），作者：熊小妹。</p> <p>如果上班的时候想放松一下，或者直说想偷偷懒，看点和工作无关的网页，这时候万一老板突然出现在背后，会不会感到很难堪呢？</p> <p>有的浏览器设置了 boss 按键，手快的人还可以切换屏幕，不过总会显得不自然，而且经常搞的手忙脚乱的。</p> <p>一个日本程序员决定自己动手，编写一个一劳永逸的办法，我们来看看他是怎么实现的吧~</p> <p>思路很直接：用网络摄像头自动识别在工位通道走过的人脸，如果确认是老板的话，就用一张写满了代码的截图覆盖到整个屏幕上。</p> <p>整个工程中应用了 Keras 深度学习框架来建立识别人脸的神经网络，和一个网络摄像头用来捕捉老板的人脸。</p> <p><strong>任务是这样的：</strong></p> <p>当老板接近我的工位时，电脑就会自动切换屏幕。</p> <p><strong>办公室的情况如下：</strong></p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/011c40f7e8680979fbea80ca0a4d0e17.jpg" /></p> <p>从老板的座位到我的座位大约6~7 米，他会在离开座位后 4 到 5 秒钟到达我的座位，因此，需要在这之前隐藏屏幕，所以时间比较紧迫。</p> <p><strong><strong>策略：</strong></strong></p> <p>首先需要让电脑完成对老板面部的深度学习。然后在我的办公桌上摆上一个网络摄像头，让摄像头对着通道，当网络摄像头捕捉到老板的脸时就切换屏幕。</p> <p>嗯，这是一个完美的项目。先取一个好名字，就叫 Boss Sensor（老板探测器）好了。</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/efc31056477640fe2d627b4ce48c385a.jpg" /></p> <p><strong>Boss Sensor 的简单结构图如下：</strong></p> <p>处理过程分为三步：</p> <ul> <li> <p>网络摄像头实时拍摄图像</p> </li> <li> <p>学习模型检测和识别所拍摄图像的人脸</p> </li> <li> <p>如果识别结果是老板则切换屏幕</p> </li> </ul> <p>所需要的技术实现只有三项：</p> <ul> <li> <p>拍摄人脸图像</p> </li> <li> <p>识别人脸图像</p> </li> <li> <p>切换屏幕</p> </li> </ul> <p>一步步完成之后整合就可以了。</p> <p><strong><strong>拍摄人脸图像</strong></strong></p> <p>首先找一个网络摄像头，我用的是 BUFFALO BSW20KM11BK 摄像头，大家随便找个清晰度够的就可以了。</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/4f55ebc924bf2421e30cc4b9cda27746.jpg" /></p> <p>最好不要用相机自带的识别软件裁剪人脸，因为后面的深度学习过程还需要处理。所以，我用 Python 和 OpenCV 编写了一段裁剪人脸图像的脚本，代码在<a href="/misc/goto?guid=4958998190508592553" rel="nofollow">这里</a>下载。</p> <p>偷拍到的人脸图像比我之前设想的更清楚▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/ca6f68455aec5de9078c84f32e0cf325.jpg" /></p> <p><strong>识别人脸图像</strong></p> <p>接下来，要用机器学习教会电脑识别老板的脸。</p> <p>我们需要以下三个步骤：</p> <ul> <li> <p>采集图像</p> </li> <li> <p>图像预处理</p> </li> <li> <p>建立机器学习模型</p> </li> </ul> <p>让我们一个接一个看一下。</p> <p><strong>采集图像</strong></p> <p>首先，需要收集大量的图片供电脑学习。一般来说有三种大量收集图片的方法：</p> <p>谷歌图片搜索</p> <p>非死book 的图像采集</p> <p><strong>从视频里截图</strong></p> <p>一开始，我像电影里的特工一样收集了各种搜索引擎上的老板照片，还有 非死book 上老板自己上传的照片，但说实话，没有收集到足够的图像。所以，反正老板就在身边，我就简单粗暴的拍摄了一段他的视频，然后把视频分解成大量的图像。</p> <p><strong>图像预处理</strong></p> <p>现在我有很多人脸图像了，但还不能拿它们来建立学习模型，必须要裁剪掉与脸部不相关的部分。</p> <p>我使用 ImageMagick 来提取人脸，你可以用别的图像软件来做。</p> <p>总之，最后我收集了大量的人脸图像，就像这样: ▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/899132ad4ebaead139899e0f392c6442.jpg" /></p> <p>估计我是全世界拥有最多老板头像的人了，肯定比他爸爸妈妈要多的多。</p> <p>现在可以准备机器学习了。</p> <p><strong>建立机器学习模型</strong></p> <p>Keras 框架用来建立卷积神经网络和神经网络培训。Tensorflow 用来写 Keras 的后端。如果只识别脸部的话，可以调用一些 Web API 比如微软的 Computer Vision API，但这次我决定自己来实现，因为这个项目需要确保实时性。</p> <p>网络体系结构大体如下，Keras 非常方便，它可以很轻松的输出这样的结构: ▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/80f94bd05ff2949afc87aa6679b441d8.jpg" /></p> <p>代码在<a href="/misc/goto?guid=4958998190613674048" rel="nofollow">这里</a>下载。</p> <p>至此，只要老板出现在摄像头中，我就可以识别出他来了。</p> <p><strong>切换屏幕</strong></p> <p>最后一步，很简单，学习模型识别出老板的脸之后，把电脑屏幕换掉就好了。</p> <p>我是程序员，所以我准备了这样一张图：▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/ff7c924d488d719acc2896cd3fd37868.jpg" /></p> <p>电脑上只显示这张图片，这样就可以假装我在认真工作了。</p> <p>这张图需要全屏显示，所以我调用了 PyQt 库，代码在<a href="/misc/goto?guid=4958998190701849526" rel="nofollow">这里</a>下载。</p> <p>一切工作都完成了。</p> <p><strong>成品</strong></p> <p>最后把分别实现的技术整合起来并验证，真的成功了！</p> <p>“现在老板离开了座位，正走向我的工位。”▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/da5280dfd3d9a26ef3d80ea91de35834.jpg" /></p> <p>“OpenCV 已经检测出人脸，将人脸图像发送给学习模型。”▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/87d5380528ea40d3bb09236f9f40d27e.jpg" /></p> <p>“学习模型认出了他，屏幕自动切换。ヽ(‘ ∇‘ )ノ”▼</p> <p style="text-align:center"><img alt="利用深度学习开发老板探测器，再也不担心一回头突然看到老板了" src="https://simg.open-open.com/show/ee3d0fc5fbfd1901a110f62d2306d37c.jpg" /></p> <p>这就是我的 Boss Sensor，全部的源码都放在 github 上了，可以在<a href="/misc/goto?guid=4958998190793346629" rel="nofollow">这里</a>下载。</p> <p><strong>总结</strong></p> <p>结合网络摄像头的实时图像采集和 Keras 深度学习框架，确实可以完成人脸识别。</p> <p>在实践过程中，我发现 OpenCV 的图像精度不够高，虽然不影响识别，但我准备改用 Dlib 来提高精度，另外我想自己编写人脸检测训练模型。</p> <p>网络摄像头获取的图像不够清晰，我准备换个摄像头。</p> <p>唉，坑还是越挖越深啊~</p> <p>本文转载自公众号：51CTO （ID：weixin51CTO ） 作者@熊小妹。</p> <p>来自: 51CTO</p>