多模态具身智能机器人开发电子书

内容简介

前言

第1章　概述

1.1　智能机器人简介

1.2　在Web环境下控制实体机器人的优势

1.3　在Web环境下控制虚拟机器人的优势

1.4　人工智能关键技术

1.5　机器人视觉技术

1.6　智能机器人的语音交互技术

1.7　手语翻译机器人

1.8　人工智能与机器人

第2章　智能机器人手语翻译系统设计

2.1　系统功能

2.2　系统设计

2.3　手语翻译控制模块设计

2.3.1　虚拟机器人制作模块

2.3.2　实体机器人搭建模块

2.3.3　人工智能识别模块

2.4　系统开发环境介绍

第3章　虚拟机器人制作技术

3.1　Maya介绍

3.2　虚拟机器人动画制作流程

3.3　HumanIK骨骼绑定

3.4　蒙皮

3.5　关键帧动画制作

3.5.1　关键帧

3.5.2　插入关键帧

3.5.3　使用Babylon.js插件导出glb文件

3.6　虚拟机器人动画制作

3.6.1　添加骨骼

3.6.2　绘制蒙皮权重

3.6.3　动画制作与导出

3.7　常用手语动作库

第4章　实体机器人控制技术

4.1　舵机

4.2　STM32开发板

4.3　实体机器人手臂舵机控制

4.3.1　5自由度机械臂

4.3.2　机械臂动作编码

4.4　实体机器人手指舵机控制

4.4.1　5自由度机械手

4.4.2　机械手动作编码

4.5　实体机器人头部舵机控制

4.6　实体机器人移动体舵机控制

4.7　ZigBee无线通信控制

4.7.1　ZigBee无线通信模块

4.7.2　基于ZigBee无线通信控制实体机器人手臂

4.7.3　基于ZigBee无线通信控制实体机器人手指

4.8　HC-12无线通信控制

4.8.1　HC-12无线通信模块

4.8.2　基于HC-12无线通信控制实体机器人手臂

4.8.3　基于HC-12无线通信控制实体机器人手指

4.9　一对四无线通信控制

4.9.1　一对四无线通信设计

4.9.2　实体机器人手语动作库

4.9.3　基于STM32的机械臂动作编码提取

4.9.4　基于STM32的机械手动作编码提取

4.9.5　基于ZigBee的一对四无线通信

4.9.6　基于HC-12的一对四无线通信

第5章　基于深度学习模型CNN的汉字识别

5.1　深度学习技术概述

5.2　CNN基本概念

5.3　汉字识别系统设计

5.4　汉字图像预处理

5.5　投影与分割

5.6　构建汉字识别模型

5.6.1　构建CNN

5.6.2　模型训练

5.7　汉字识别模型检验

第6章　基于深度学习模型CNN的语音识别

6.1　语音识别系统设计

6.2　语音信号预处理及特征提取

6.2.1　语音信号预处理

6.2.2　MFCC特征提取

6.3　构建语音识别模型

6.3.1　构建CNN

6.3.2　模型训练

6.4　语音识别模型检验

第7章　基于深度学习模型Faster R-CNN的手势识别

7.1　R-CNN目标检测与识别模型

7.2　边框回归原理

7.3　Faster R-CNN目标检测与识别模型

7.3.1　Faster R-CNN的框架结构

7.3.2　基于RPN的目标检测

7.3.3　基于RoI池化和分类技术的目标识别

7.4　手势识别系统设计

7.5　构建手势识别模型

7.5.1　构建Faster R-CNN

7.5.2　模型训练

7.6　手势识别模型检验

第8章　基于Web的虚拟机器人控制技术

8.1　Web开发关键技术

8.2　前后端信息交互编程基础

8.2.1　前端页面设计

8.2.2　基于AJAX的前后端交互基础

8.2.3　前后端发送字符串

8.2.4　前后端发送JSON数据

8.2.5　前后端收发JSON字符串

8.3　图片上传技术

8.4　视频上传技术

8.5　语音上传技术

8.6　Web环境下的虚拟机器人动画演示技术

8.7　基于Flask的视觉感知控制虚拟机器人

8.8　基于Flask的听觉感知控制虚拟机器人

第9章　机器人智能应答关键技术

9.1　智能应答技术概述

9.2　构建问答数据集

9.3　jieba分词

9.3.1　jieba分词简介

9.3.2　jieba分词实现方法

9.3.3　虚拟机器人分词动作演示

9.4　基于余弦相似度的短文本计算

9.4.1　余弦相似度算法的基本原理

9.4.2　余弦相似度计算

9.4.3　Word2Vec+余弦相似度计算

9.4.4　TF-IDF+余弦相似度计算

9.5　基于SimHash算法的长文本相似度计算

9.5.1　SimHash算法原理

9.5.2　SimHash相似度计算

9.6　基于Levenshtein距离的文本相似度计算

9.7　相似度算法比较

第10章　基于Web的汉字控制机器人

10.1　Web交互功能设计

10.2　前端用户选择汉字图像

10.3　将汉字图像传递到后端

10.4　后端通过CNN实现汉字识别

10.5　将识别结果返回前端展示

10.6　通过数据库查询手语动作编码

10.7　Web串口通信技术

10.8　虚实结合智能控制机器人

第11章　基于Web的语音控制机器人

11.1　Web交互功能设计

11.2　音频文件的前后端交互

11.3　语音特征的前后端交互

11.4　语音识别的前后端交互

11.4.1　后端语音识别

11.4.2　前端展示识别结果

11.5　虚实结合语音控制机器人

11.5.1　文本分词的前后端交互

11.5.2　通过数据库查询手语动作编码

11.5.3　Web串口通信

11.5.4　语音控制虚拟与实体机器人

参考文献