飞桨教师风采｜钱彬、朱会杰：计算机视觉从小白到大师之路

科技 2024-10-31 19:21 北京

钱彬

钱彬，南京理工大学博士，CSDN博客专家，飞桨开发者技术专家，发表论文20余篇，主持多项省部级科研项目，获得发明专利授权10余项，2019年荣获滨湖之光创新领军人才称号，著有《Python Web开发从入门到实战（Django+Bootstrap）》等书籍，广受好评。

朱会杰

朱会杰，上海交通大学博士后，飞桨开发者技术专家，主要研究方向为深度学习、计算机视觉、稀疏编码、大模型等，在国内外重要学术刊物上发表论文30余篇，谷歌总引用次数400余次，先后负责全国博后基金、江苏省自然科学基金等多项国家级、省部级科研项目，具有丰富的技术开发经验，荣获省部级科技进步二等奖1项。

随着人工智能技术的飞速发展，各行各业对深度学习、图像处理相关领域的人才需求日益迫切。由钱彬、朱会杰、晋军伟撰写的《深度学习与图像处理（PaddlePaddle版）》旨在通过系统的理论讲解与丰富的实战案例，使读者不仅掌握深度学习与图像处理的基本概念和理论，还能将这些知识应用于解决实际问题，如自动驾驶、工业质检和医疗识别等领域。书中特别强调了理论与实践的结合，通过多个真实项目案例，帮助读者提升解决实际问题的能力。

百度飞桨星河社区AI Studio作为飞桨PaddlePaddle的在线实训平台，为该书的学习提供了强有力的支持。该平台包含真实场景的大规模开放数据集，可以为学习者提供丰富的数据资源。同时，百度飞桨星河社区AI Studio支持云端GPU训练，新注册用户无需安装环境即可获得免费的GPU资源进行模型训练，极大的降低了学习门槛，使得人人学习AI成为可能。此外，百度飞桨星河社区AI Studio还提供了丰富的深度学习算法套件和工具，如PaddleDetection、PaddleSe、FastDeploy等，可快速实现模型切换和产品研发部署，进一步降低了研发成本。

在人工智能教学政策方面，随着技术的不断进步和创新，各国纷纷出台相关政策，推动人工智能教育的发展。我国也不例外，近年来在高等教育和职业教育中，深度学习技术得到了广泛应用，以提高教学质量和效率。然而，当前教育仍存在一些问题，如理论与实践脱节、教学资源不足等。针对这些问题，《深度学习与图像处理（PaddlePaddle版）》的编写动机显得尤为迫切。该书旨在填补这一空白，通过提供系统的理论知识和丰富的实战案例，帮助读者更好地理解和掌握深度学习与图像处理技术。在教材的编写目标上，该书力求做到理论与实践并重，既涵盖基础知识，又注重实战应用。书中通过多个真实项目案例，如智能垃圾分拣器、二维码扫码枪、医学影像分析仪等，详细讲解了图像分类、目标检测、语义分割等热门算法的原理与应用。同时，该书还提供了详细的算法解读和丰富的资源下载，包括数据集和源代码，极大地方便了读者的复现工作。通过这样系统化的学习，读者可以深入掌握深度学习与图像处理的核心技术，为未来的职业发展打下坚实的基础。

综上所述，《深度学习与图像处理（PaddlePaddle版）》的出版，不仅是对当前人工智能教育领域的一次有力补充，更是对未来人才培养的一次重要推动。

人工智能与计算机视觉教育

‌人工智能（Artificial Intelligence，简称AI）是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学，近期诺贝尔物理学奖和化学奖依次颁发给人工智能领域的专家更显示出全球技术领域对人工智能技术的认可。

计算机视觉作为人工智能领域火热的分支之一，深度学习与图像处理技术落地开花、熠熠生辉。图像处理研究工作在学术界和工业界取得的巨大成功，每年吸引着数以万计的研究人员蜂拥而至，甚至生物医学、机械制造、自动化、土木建筑等诸多跨专业的从业人员也开始涉猎研究。

然而要学会、掌握并用好深度学习与图像处理并非易事，在实际项目的开发中主要存在以下几个问题：

(1) 研究方向多

传统的图像处理算法中有读取、可视化、格式转换、缩放、剪裁、色调变化、滤波等很多算子，计算机视觉主要有目标分类、目标检测、语义分割、关键点检测、图像生成等方向，而每个研究方向又有很多种算法，在实际项目中需要对许多种算法进行对比选择最优算法，改进算法数据增强、网络骨干、损失函数等模块，学习内容太多、学习成本很高。

(2) 全流程指导缺

开发一个深度学习项目，需要数据标注、数据集制作、网络训练、网络评估、可视化调优、动态网络转静态图、模型推理、前端界面开发等阶段，现有的教材或者技术指导书籍鲜有覆盖全过程的，需要搭配多个教材使用，且不同的开源库使用方法不同，使用起来很不方便。

(3) 部署差异很大

部署端包括云、边、端三个层级，云计算一般为算力较大的服务器端，边计算一般为用户主机，可以理解为工控机，端计算一般为嵌入式开发板等小型便携设备，由于计算资源不同，部署方式差异很大，部署需要掌握Windows、Linux等多个操作系统，需要使用C++、C#、Python、Java、Html等语言，一般需要使用VSCode、Pycharm、QT、Visual Studio等IDE，部署工作量大、难度高。

(4) 算法调试困难

算法调试需要安装好合适的环境、全部可复现的代码和数据集、详细的训练超参数说明，现有教材往往对环境部署所需的驱动、开源数据集和部署界面代码以及超参数的详细解释不够重视，导致初学者快手上手道阻且长。

(5) 计算资源昂贵

动辄上万甚至数十万的深度工作站对于初学者或者经费不足的项目开发者来说是一个拦路虎，每次训练所需的开源库不同，都需要花费大量的时间进行配置，带来昂贵的学习和开发成本。

百度飞桨星河社区平台助力

全场景、全流程、全覆盖的著作配套课程

为解决深度学习与图像处理在教育教学中的实际问题，结合团队的项目开发经验，《深度学习与图像处理（PaddlePaddle版）》重点关注技术应用和产品落地，从内容上实现计算机视觉领域的热门方向全覆盖，从案例设计上关注从原理到实践的全流程，包含了云边端部署教程，并计划在百度飞桨星河社区平台开设配套课程，借由平台配齐教学资源和计算资源。本书特色如下。

（1）内容丰富全面

包含了传统的图像数据技术基础以及计算机视觉热门的目标分类、目标检测、语义分割、关键点检测、图像生成等研究内容，满足工业、教育、医疗、游戏等大部分场景需求。每个研究方向提供多种算法，只需要简单设置就能随意切换算法，更改网络结构，内容丰富多样。

（2）全流程覆盖

每个案例都覆盖原理讲解、数据标注、数据集制作、网络配置与训练、网络评估与可视化、静态网络导出、前端界面开发、推理库开发等内容，注重理论学习与上机实操相结合，循序渐进掌握深度学习开发，实现从小白到大师的晋级之路，无论是理论学习还是工程开发，都能从中收获颇多。

（3）云边端部署全覆盖

部署案例包括了云边端三种类型教程，云侧通过网页端访问服务器端部署，边侧计算通过工控机的方式分别提供了C#和QT部署案例，端侧提供了树莓派、Jetson系列和安卓的部署案例，部署场景代表性强、环境丰富。不需要从零开始学习C++、C#、HTML等语言，只需了解部署相关内容即可上手，大幅降低工程开发的难度和成本。

（4）超全配套资源

全书每个章节都分别提供了微课视频、源代码、公开课资源、教学课件、教学大纲、教学进度表、教案、期末考试试卷及答案等配套资源，多维度满足学习、教学以及工程开发需求。

（5）免费计算资源

本课程在飞桨星河社区开设有公开课，提供免费GPU资源进行学习和开发，只需要简单的网页端操作即可完成，每个章节还提供了已经配置好的开发环境，大幅降低了学习成本。

理论与实践相结合的人工智能教学

《深度学习与图像处理（PaddlePaddle版）》重点关注技术实践，面向自动驾驶、图像分类、目标检测、语义分割、示例分割、关键点检测、风格迁移等热门研究方向，与医学、工业等学科交叉融合，设计实践学习任务，真正实现理论与实践相结合AI人才培育目标，有益于人工智能学科及计算机视觉领域的发展。

1. 基于OpenCV的自动驾驶

主要讲解图像处理基础知识，并且运用传统图像处理方法以及OpenCV库，在模拟器中完成小车自动驾驶。

2. 基于深度学习的自动驾驶

采用深度学习回归模型，实现端到端的小车自动驾驶控制，提升小车自动驾驶平滑性。

3. 图像分类（智能垃圾分拣器）

以垃圾分类任务为主线，使用图像分类套件PaddleClas实现高精度垃圾分类，并最终脱离训练环境，通过FastDeploy部署工具，在Jetson Nano智能边缘设备上实现算法集成。

4. 目标检测（二维码扫码枪）

从深度学习方法切入，使用目标检测方法实现非规范场景下的二维码高精度识别，具体的，将使用飞桨PaddleDetection套件中的PicoDet单阶段检测算法来完成研发任务，最终部署到树莓派上。

5. 语义分割（证件照制作工具）

基于语义分割技术开发一款用于PC桌面应用的证件照制作工具，可以让用户方便的制作出不同颜色背景的标准证件照片。最终使用QT完成集成部署。

6. 实例分割（肾小球影像分析仪）

病理切片中肾小球的精确识别是诊断肾脏病变程度的关键。这里的精确识别不止是要定位出每个肾小球的位置，还需要对肾小球区域进行精细化分割，从而可以最大程度的为病理科医师提供病变类型依据。使用PaddleDetection套件中的实例分割算法Mask RCNN来完成肾小球影像分析任务。最终使用C#程序完成部署。

7. 关键点检测（身份证识读APP）

以手机端身份证识读项目为主线，从图像矫正角度切入，利用深度学习关键点检测算法，在安卓手机上实现身份证图像的姿态矫正。最终研发一款安卓APP，实现任意角度的身份证信息识读，提升移动端场景下的识读性能。

8. 风格迁移（照片动漫化在线转换网站）

使用飞桨的PaddleGAN套件，学习一种图像风格化的AnimeGAN算法，最终研发一款能够将风景照片实现动漫化的在线转换网站，并且通过微服务架构设计，支持多GPU高并发访问。

行业专家推荐

本书内容全面、编写精良、理论与实践相融合、教辅资源丰富、可读性强，受到了学术界和工业界大佬的强力推荐：

（1）杨明（上海交通大学智能网联电动汽车创新中心主任、国家级科技创新领军人才）：本书精心布局，囊括了图像处理、深度学习及其在众多前沿AI技术中的应用。全书分为两大核心部分：基础理论与实战案例。在基础知识篇，作者为读者构建了扎实的理论框架，为后续的实践奠定了坚实的基础。而在案例实战篇，书中通过一系列精心挑选的实例，将理论知识与实际应用紧密结合，使读者能够迅速将所学应用于实际。每个案例均从任务背景、算法原理、研发过程到实际部署进行了详尽的阐述，为读者提供了一条从理论到实践的清晰路径。

本书对于全国高校本科生、研究生乃至科研工作者来说，都是一本极具价值的参考书籍。它不仅能帮助读者快速上手实践，还能引导读者开展深入的科学研究，对于推动深度学习领域的发展具有重要意义。

（2）胡小波（镭神智能创始人、CEO）：本书深度结合了国产开源深度学习框架飞桨PaddlePaddle的实战案例，旨在帮助读者在巩固理论知识的同时，显著提升实战能力，以更好地满足现代产业界对AI技术的需求。书中案例丰富多样且极具实用性，涵盖了从智能垃圾分拣器到照片动漫化在线转换网站等前沿应用场景，为广大工程开发人员提供了极具价值的实践指南和宝贵经验。无论是深度学习的新手还是资深开发者，都能从本书中汲取到丰富的营养，为自身的技术成长和职业发展添砖加瓦。

本书的心路历程

在某个缺陷项目开发时，可以使用多种机器视觉框架完成，比如目标检测、语义分割和实例分割都可以实现缺陷的检测，但到底哪种方案检测准确、计算效率高呢？一般为了加快进程，首先会从github等网站搜索开源框架算法进行测试对比，然后每种思路都有很多种算法，比如目标检测由Faster-RCNN、YOLOv3/v5/v7/v8/v10/e+、SSD、DERT等多种算法。

首先需要找出最好的算法，然后进行改进才能实现项目的最优化，然而项目开发对时间和成本由诸多限制的，逐一对每个开源库跑通训练和部署是成本很大的，怎么能够快速切换不同的算法呢？飞桨PaddlePaddle的诸多开源库为项目的开发解决了燃眉之急，不仅提供了最新的各类检测、语义分割、分类等算法，而且通过yaml文件的设置还能对网络进行改造和优化，大大提高了开发的效率，提高了开发的质量。但在实际的使用中发现，用好这些苦需要具备一定的深度学习理论基础，需要对开源库接口和数据标注掌握全面，否则难以选好网络、改好算法，由于开源库缺乏系统化、保姆级的教程，指导工程师开发时仍需要不小的学习成本，甚至有些库有些bug，需要在使用时进行更改。

在实际的部署阶段，由于不同客户的需求不同，需要在不同的平台以不同的方式部署，有些需要在边缘端比如树莓派、Jetson开发板、瑞芯微开发板或者手机安卓端部署；有些需要在工控机上，应客户需要需要使用Visual Studio、QT等IDE开发，要求的语言也不同，有C++、C#、Python等不同需求；有些需要在服务器端，又需要解决多并发、网页端访问的问题。但部署阶段其实并不需要完全学会一门语言，只需要对与深度学习相关的相关语法和理论掌握即可，但市面上的教程都是从语言的基础学起，要学会任何一门语言都要付出很大的代价。

在与其他开发者交流的过程中，发现越来越多的开发者都存在这样的问题或者困惑，这时我们萌发了为何不写一本针对项目开发的教材呢，不仅能够推广人工智能在产业中的应用，也能培养更多的人工智能人才，促进国家的产业升级。

于是，结合开发实例，作者团队撰写了本书，摒弃了复杂的理论基础，而是直接瞄准项目开发需求，以最小的学习成本、最大化的开发效率系统化完成深度学习的学习和主要开源库的开发应用，并针对各类典型的部署平台，提供了开发教程，帮助大家快速掌握深度学习，用好深度学习，做好相关的项目。

希望本书能够为您的理论学习、工程开发、项目应用提供指导，提高效率和开发效果。同时本书资源将随着飞桨PaddlePaddle版本的更新同步更新优化，确保可用。由于水平有限，书中难免有错误或疏漏之处，请各位读者批评指正。

AI教学赋能计划由百度飞桨发起，面向高校提供产教融合人才培养方案，一站式助力高校复合型人才培养，欢迎各高校教师加入百度AI教学赋能计划！

关注【飞桨PaddlePaddle】公众号

获取更多技术内容~

飞桨PaddlePaddle

源于产业实践的开源深度学习平台

最新文章

飞桨PP系列模型上新！PP-DocBee文档图像理解的新‘蜂’向标！

盘点2024：这一年，我们这样走过

效率提升300%！文心一言与辞海强强结合，推出智能知识审校系统“辞文”

正在报名！文心中国行走进武汉，共探大模型时代产业新机遇

“智惠万企—文心赋能中小企业专项行动计划”正式发布并启动招募

百度AICA第八期正式收官 79名首席“AI架构师”毕业执桨起航

百度与南京市鼓楼区共建江苏首个飞桨人工智能产业赋能中心

文心中国行再聚鹭岛！厦门飞桨赋能中心启航

大模型助力教师提效创新：百名教师齐聚百度飞桨（厦门）人工智能产业赋能中心！

飞桨扬帆智海，大湾区杯AI For Science科技竞赛圆满完赛

大模型区域落地再加速！“文心中国行”走进广州

大模型技术沙龙：行业深度融合与创新路径探索

大学生做得好不好小学生来pick，2024 C4-AI总决赛在中华世纪坛圆满落幕

飞桨大模型Unified Checkpoint技术加速模型存储95%，节省空间78.5%

一亿中流加入飞桨技术伙伴计划，“AI+营销”实现智能化精准拓客

飞桨AI for Science课程表｜前沿讲座系列课程预告（三）

PaddleX上线小目标检测模型产线，支持遥感分析、智能监控、智慧交通等领域高效应用

飞桨教师风采｜李彝利：基于飞桨的校企协同AI创新人才培养模式探索

下一站，广州！12月19日文心中国行与您共建大模型产业应用生态圈

飞桨星河社区六周年｜学练进阶·技术畅谈，一起并肩前行

第六届CECC大会圆满落幕，大模型技术引领教育改革与创新

学校新来了一位AI作文老师：能看、会评、还教改写

飞桨出海助力智利企业Simon9精准解决包装行业质检难题，生产损失降低90%

第六届CECC中国计算机教育大会百度“大模型技术创新与教育实践”论坛来啦

飞桨AI for Science课程表｜前沿讲座系列课程预告（二）

PaddleX 上线多标签分类模型产线，高效支持图像识别、智能监控、工业质检等领域应用

FlashRAG-Paddle | 基于PaddleNLP的高效开发与评测RAG框架

重磅！飞桨开源社区携手百度开源办公室，为开源贡献者送福利！

“未来之后”AI4S第三届国际高峰论坛报名｜诺贝尔奖得主、五位院士、顶尖专家学者与企业领袖齐聚，分享前沿趋势及领域成果

飞桨PaddleScience与北大研究会开展科学计算训练营

百度飞桨联动香港教育大学AIREA，共话AI+教育发展新趋势

PaddleX 上线人脸定位与识别端到端模型产线，为安全监控、身份认证、智能家居等领域保驾护航

大模型时代下的高等教育转型——百度领航AI通识课程建设

「体验官招募」多模态大模型开发套件PaddleMIX开发项目挑战

基于PP-ShiTuv2新增PaddleX图像识别模型产线，显著提升商品识别等细粒度开放域产业场景检索性能

一束电力智能之光，点亮“星河”应用创新未来

百度文心智能体技术获2024世界互联网大会领先科技奖

2024大湾区科学论坛举行，百度吴甜解读大模型如何重塑产业智能引擎

官方带队实测，阶梯式解锁飞桨框架3.0能力新特性，轻松上手！

飞桨AI for Science课程表｜前沿讲座系列课程预告

PaddleClas 2.6 发布，新增细粒度商品识别、特色多标签分类等前沿算法和检索能力！

AI少年科创营：学而思与百度飞桨携手开启青少年AI科普之旅

百度王海峰：文心一言用户规模达4.3亿

打造没有围墙的学校，百度世界2024发布科技馆智能体

文心iRAG和无代码“秒哒”发布！李彦宏：即将迎来AI应用的群星闪耀时刻

太好了支持多比例出图！新媒体人有救了！

飞桨PaddleScience亮相DACOMA-24，助力科学计算新探索

PaddleSeg发布图像异常检测高精度模型STFPM，无监督异常检测算法赋能产业升级

百度联合学界打造国内最新AI for Science系列课程

百度升级AI for Science共创计划，携手学者共研顶尖学术成果

分类

时事

民生

政务

教育

文化

科技

财富

体娱

健康

情感

旅行

百科

职场

楼市

企业

乐活

学术

汽车

时尚

创业

美食

幽默

美体

文摘

原创标签

时事社会财经军事教育体育科技汽车科学房产搞笑综艺明星音乐动漫游戏时尚健康旅游美食生活摄影宠物职场育儿情感小说曲艺文化历史三农文学娱乐电影视频图片新闻宗教电视剧纪录片广告创意壁纸头像心灵鸡汤星座命理教育培训艺术文化金融财经健康医疗美妆时尚餐饮美食母婴育儿社会新闻工业农业时事政治星座占卜幽默笑话独立短篇连载作品文化历史科技互联网

发布位置

广东北京山东江苏河南浙江山西福建河北上海四川陕西湖南安徽湖北内蒙古江西云南广西甘肃辽宁黑龙江贵州新疆重庆吉林天津海南青海宁夏西藏香港澳门台湾美国加拿大澳大利亚日本新加坡英国西班牙新西兰韩国泰国法国德国意大利缅甸菲律宾马来西亚越南荷兰柬埔寨俄罗斯巴西智利卢森堡芬兰瑞典比利时瑞士土耳其斐济挪威朝鲜尼日利亚阿根廷匈牙利爱尔兰印度老挝葡萄牙乌克兰印度尼西亚哈萨克斯坦塔吉克斯坦希腊南非蒙古奥地利肯尼亚加纳丹麦津巴布韦埃及坦桑尼亚捷克阿联酋安哥拉