好久没有更新。最近又学到不少知识，记录一下。8月份，试用了 end-to-end 的 DCNN 来学习人类驾驶。但最终的比赛中，仍是 rule-based 结合 深度神经网络效果是最快的。

CNN

为了识别路牌，学习了CNN。使用这个网络可以很好的对图片进行分类。

1. 数据的准备

2. 训练和验证

3. 性能测量

4. 用于目标检测

Faster R-CNN

这个是为了目标检测。从知道这个技术到跑通，只用了大约两天的时间。身后有狗，就是跑的快。

跑通这个网络的主要要解决的问题是：如何使用自己的数据，建立 Fster R-CNN模型。网上有不少人写出来自己的过程，我写出我的过程。

1. 找到合适的开源代码

https://github.com/dBeker/Faster-RCNN-TensorFlow-Python3.5

需要在Windows下运行，并使用的是TensorFlow。支持这个要求的只有这个项目。

2. 建立环境

这个开源项目必须要使用Python 3.5.0。手工安装后，在安装相关的 pip 包时，遇到问题。一个包没有合适的源。所以，转而使用 Anaconda。

Anaconda 最新的版本里，建立 Python 3.5 环境时，安装的已经是 Python 3.5.X，而不是 3.5.0。 所以又向前找 Anaconda 的旧的版本。它的 2.4.0 和 2.5.0 里安装的是 Python 3.5.0。

3. 明确需要准备哪些数据

为了降低工作量，也就是说，不要修改代码，我们最好顺从项目本身对数据规格的要求。包括，文件名，XML文件的格式，目录结构等。对于 Faster R-CNN来说，有两套数据集，也就对应了两套数据格式： MS Coco 和 VOC2007。

这个项目支持的是后者。那我们就按后者要求的数据格式来。

Faster R-CNN，需要下面的数据：

预训练的 VGG16模型 或是 Res101，或是基它的特征抽取模式。（这个项目支持的是 VGG16）

训练用的图片

每个图片对应的区域标注数据（以文件形式。VOC2007是XML文件，还有一种是TXT）

4. 准备数据的过程

预训练模型在开源项目Faster-RCNN-TensorFlow-Python3.5的网页上有下载地址，可以直接下载。5xxMB

训练用的图片就需要自己收集 或是 采集。大约180张左右。

标注数据，可以使用这个开源软件 labelImg 来制作。软件会为每个图片单独生成一个xml文件。

图片数据按上面的目录结构安放。

Annotations 放 XML 文件。

ImageSets 放 索引文件（文本），指明那些文件是用于训练，那些是用来评估。

JPEGImages目录下放 jpg文件。文件名最好是000001.jpg ~ 999999.jpg。

另外一个注意点是，数据的完全绝对路径中不要用中文。

上图中有一个 gen_main.py 程序，这个是用来生成 ImageSets 中的索引文件的。这些索引文件格式很简单，就是一个纯文本的列表文件。

文件内容就是一行一行的文件名（不带扩展名）。训练程序根据这些文件的指引，加载图片。

5. 训练和验证

在开始前，注意要修改代码中的 class 数量。比如，我这里只有一个类，就需要把代码中的设置为1。

执行 项目 Faster-RCNN-TensorFlow-Python3.5-master 中的 train.py 就可以开始训练了。

执行项目中的 demo.py 就是验证。

生成的模型会在下面的目录中：    

6. 解决性能问题

在 Faster-RCNN-TensorFlow-Python3.5-master\lib\config 里的 config.py 文件中，是有很多参数可以修改的。通常我们不需要修改。

为了性能的需求，我修改了下面的几个参数：

rpn_top_n  ，这个是 用来评估的 proposals 的数量。越大，就意味着越多的计算。设置小了，可能会不准确。

最初，这个值是300，分析一个图片，需要1.9秒。把这个参数设置为1，需要0.9秒。但仍不满足要求。

DQN 与 Deepmind

以上两个，都是为了图像识别。这个则是为了解决打牌的问题。让AI自己学习如何打红心，并自行训练，提高自己的战力。类似与 Alphamaster，就是 AlphaGo的升级版，可以自我对战，学习，提高。

目前比赛中，水平最高的，已知其使用的是MCTS算法。算是轻度AI了。我使用DQN写的，战力很弱，也许需要训练1亿轮才行？目前一天只能练150万轮。当然，这是我的猜测。

总结

以上，都是知其然，而不知其所以然，不过，DL 或者说 深度神经网络 最终一定是演变成 engine or SDK。软件工程师只需要使用它们就好。可以解决问题就OK。

参考

https://www.corelan.be/index.php/2011/07/14/mona-py-the-manual/

optiva-framework  -  scan tools

https://blog.csdn.net/hongxingabc/article/details/79039537

https://blog.csdn.net/gvfdbdf/article/details/52214008

https://blog.csdn.net/sinat_30071459/article/details/50723212

https://blog.csdn.net/j497205974/article/details/80074494

https://blog.csdn.net/weixin_40920228/article/details/79561524

https://cloud.tencent.com/developer/article/1010754

http://blog.leanote.com/post/braveapple/%E5%A6%82%E4%BD%95%E4%BD%BF%E7%94%A8%E8%87%AA%E5%B7%B1%E6%95%B0%E6%8D%AE%E9%9B%86%E8%AE%AD%E7%BB%83Faster-RCNN%E6%A8%A1%E5%9E%8B

https://www.jiqizhixin.com/articles/2018-02-23-3

https://zhuanlan.zhihu.com/p/31772360

https://blog.csdn.net/weixin_31200719/article/details/81220924

https://medium.com/@jonathan_hui/object-detection-speed-and-accuracy-comparison-faster-r-cnn-r-fcn-ssd-and-yolo-5425656ae359

https://zhuanlan.zhihu.com/p/32230004

https://zhuanlan.zhihu.com/p/32404424