强化学习(Reinforcement Learning)相对于监督式学习(Supervised Learning)属于机器学习的另一个分支,指的是通过交互环境以尝试错误法学习完成某个具体目标,获得到特殊分数或奖励。为了让更多人可以实体动手做,同时熟悉机器学习的相关开发应用工具,AWS在年度开发者大会re:Invent 2018宣布推出深度学习遥控车AWS DeepRacer,要通过遥控竞速乐趣带动更多人钻研深度学习领域的软硬集成应用。
AWS DeepRacer是一个1 :18缩小版本的无线控制四轮传动车。车上搭载400万像素/分辨率高达1080p的镜头、双频高速Wifi(802.11ac)、每次电池充满电可以续航超过2小时。DeepRacer拥有Intel Atom处理器,其上跑了Ubuntu为IoT与机器设备特化的机器人操作系统(ROS,Robot Operating System),并配备Intel专为计算机视觉开发的OpenVino工具集。
Amazon既然来自AWS,DeepRacer毫不意外地支持完整混合云开发环境,让你可以自在训练你的强化学习模型。可以通过AWS为机器学习模型设计的开发环境SageMaker与3D仿真环境RoboMaker来训练机器学习模型,通过虚拟环境训练完的驾车规则模型,可以直接下载到AWS DeepRacer这个实体汽车,以真实环境的遥控车竞速,验证机器学习模型的性能。
目前主流的自动驾驶汽车驾驶精灵主要就是依赖强化学习,DeepRacer正是让一般人也可以轻松上手学习强化学习模型,并用在自驾开发环境的好工具。AWS也为DeepRacer准备了联盟赛事,预计在2019年通过一连串全球直播的年度对战,最终在2019年的AWS年度开发者大会re:invent选出AWS DeepRacer 2019冠军杯。定价399美元的DeepRacer目前正在Amazon美国官网进行预购,预购价格仅需249元美元,官方预计将在2019年3月出货。配合DeepRacer需要的SageMaker、RoboMaker、数据存储用的、串流用平台KVS与监控平台CloudWatch另需云计算费用,每小时约3.04美元。