社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  机器学习算法

Nature重磅,深度学习赋能光学领域,引爆光学新风口,迎来黄金时代!

逐光光学 • 1 月前 • 68 次点击  


深度学习光学成像结合了深度学习与光学成像技术,旨在通过数据驱动的方法提升成像质量、速度和自动化水平。传统光学成像面临分辨率限制、噪声干扰、复杂环境下的信号衰减以及数据处理效率低等挑战。深度学习凭借其自动特征提取、强大的非线性建模能力和高效数据处理优势,为这些挑战提供了解决方案。该技术在生物医学成像、计算成像、遥感与天文成像以及工业检测等领域展现出广泛应用前景。

深度学习光学成像的应用

显微成像

具体应用

生物医学成像:用于细胞、组织、器官的高分辨率成像,如荧光显微镜、共聚焦显微镜等。

活体成像:实时观察活体样本的动态过程,如细胞分裂、神经活动等。

病理学分析:自动识别和分类病理切片中的病变区域。

优势

提升分辨率:通过超分辨率技术突破光学衍射极限。

去噪与增强:在低光条件下获得高质量图像。

自动化分析:自动识别细胞、组织等目标,减少人工干预。

三维重建:从二维图像重建三维结构,提供更全面的样本信息。

2. 单像素成像

具体应用

低光成像:在极低光条件下(如天文观测)获取高质量图像。

压缩感知成像:减少数据采集量,适用于资源受限的场景。

非可见光成像:用于太赫兹成像、红外成像等非可见光波段。

优势

降低硬件成本:仅需单个探测器,简化硬件设计。

高效数据采集:通过压缩感知减少数据量,加快成像速度。

适应复杂环境:在散射介质或低光条件下仍能获得清晰图像。

3. 散射成像

具体应用

生物组织成像:用于穿透皮肤、肌肉等散射介质,观察深层组织。

水下成像:用于海洋探测、水下目标识别。

雾霾穿透:在雾、烟等散射环境中实现清晰成像。

优势

穿透散射介质:在强散射条件下恢复被散射的光信号。

非侵入式检测:减少对样本的干扰和损伤。

适应复杂环境:在雾、烟、生物组织等散射介质中仍能获得高质量图像。

4. 高光谱成像

具体应用

农业监测:用于作物健康监测、病虫害检测、土壤分析。

环境监测:用于大气、水体、土壤的污染物检测。

医学诊断:用于组织分析和疾病诊断,如癌症早期检测。

遥感:用于地球观测、资源勘探、灾害监测。

优势

高维数据处理:有效处理和分析高光谱数据的高维度特性。

物质识别:精确识别不同物质的化学成分和物理特性。

多光谱融合:结合不同光谱波段信息,提供更丰富的光谱特征。

5. 超分辨成像

具体应用

生物医学成像:用于观察亚细胞结构,如蛋白质、DNA等。

材料科学:用于纳米材料的结构分析和表征。

天文观测:提升天文图像的分辨率,观察遥远星体的细节。

优势

突破衍射极限:通过算法提升分辨率,超越传统光学系统的物理限制。

提升图像细节:恢复微小结构和细节,提供更清晰的图像。

减少硬件依赖:通过算法实现超分辨率,降低对昂贵硬件的需求。

深度学习光学成像通过结合深度学习与光学成像技术,解决了传统成像中的诸多难题,并在科学研究、医学诊断、工业检测、环境监测等领域的广泛应用,为相关领域带来了革命性的进步。未来,随着算法优化、硬件加速、多模态融合和实时应用的推进,深度学习光学成像有望进一步推动成像科学的发展。


图片


深度学习光学成像



图片

第一天   光学成像基础

主讲老师 来自华中科技大学,已发表人工智能领域顶会顶刊多篇,主要擅长,深度学习显微成像,大语言模型等相关研究,团队在ICML,NeurIPS等人工智能顶会发表多篇论文

图片
NEXT

第一节:绪论

1.什么是光学成像?

2.光学成像进展

第二节:光学成像重要属性

1.物距、焦距、空间带宽乘积

2.分辨率、视场、景深

3.球差、慧差、场曲、畸变、色差、像差

4.点扩散函数、调制传递函数

第三节:成像质量评价指标

1.全参考评价

2.半参考评价

3.无参考评价

第四节:光学成像发展趋势

1.功能拓展 (相位、三维、非视距、穿云透雾、遥感)

2.性能改善(视场大小、分辨率、成像速度)

3.系统优化(小型化、廉价化、高效制造


第二天  深度学习基础

主讲老师来自哈尔滨工业大学,一年内个人发表SCI论文多篇,主要擅长计算光学成像,深度学习单像素成像,团队在Light: science & applications, Laser & photonics reviews, Photonics research等发表过多篇文章

图片
NEXT

第一节:深度学习相关基础知识,

1.了解python和pytorch的关系和联系

2.两大主流框架tensorflow和pytorch的介绍

3.了解深度学习工具,cuda和cudnn等

image.png

第二节:学习深度学习的代码环境

1.学习编译器pycharm的使用

2.了解python环境知识

3.使用anaconda配置虚拟环境并在pycharm中导入。

image.png

第三节:自己通过anaconda搭建环境

1.学习pip库的使用,使用pip下载库、卸载库以及更新库

2.搭建独立的环境,通过anaconda对每个环境进行管理,养成良好的编程习惯

第四节:理论知识部分

1.了解监督神经网络的基本原理

2.学习梯度下降算法和反向传播的思路。

image.png

第五节:卷积神经网络的基础讲解

1.让学员通过实例了解卷积的基础原理

2.如何通过卷积提取图片的特征(介绍minst手写数字的经典案例)


第三天  深度学习在显微成像中的应用与实践

主讲老师 来自华中科技大学,已发表人工智能领域顶会顶刊多篇,主要擅长,深度学习显微成像,大语言模型等相关研究,团队在ICML,NeurIPS等人工智能顶会发表多篇文章。

图片
NEXT

第一节  卷积神经网络在显微成像中的应用(理论奠基)

1.卷积神经网络(CNN)架构重温

2.傅立叶频域知识介绍

3.超分辨率重建技术: 傅立叶域注意力卷积神经网络 (DFCAN, Deep Fourier Channel Attention Network)

第二节 对抗生成网络显微成像AI应用(方法进阶)

1. 生成对抗网络(GAN)原理剖析

2. 图像去噪与增强:傅立叶域注意力生成对抗网络(DFGAN, Deep Fourier Generative Adversarial Network)

3. 前沿论文讨论(Nature Methods最新成果)

第三节 论文复现准备(工具准备)

1.论文实验结果分析讨论

2.实验数据集获取与开源代码预处理

3.安装论文相关深度学习训练依赖环境

第四节 论文复现实战(综合实践)

1. 代码整体框架介绍 

2. DFCAN/DFGAN模块代码精读

3. 模型训练技巧

image.png


第四天    深度学习单像素成像

主讲老师来自哈尔滨工业大学,一年内个人发表SCI论文多篇,主要擅长计算光学成像,深度学习单像素成像,团队在Light: science & applications, Laser & photonics reviews, Photonics research等发表过多篇文章

图片
NEXT

第一节:单像素成像基础

1.何为单像素成像

2.解析单像素成像模型

3.典型投影掩膜调制方式

image.png

第二节:单像素成像重建算法

1.理解关联重建算法

2.了解压缩感知理论及其应用

image.png

第三节:深度学习重建方法

1.了解数据驱动单像素成像

2.了解物理驱动单像素成像

3.了解混合驱动单像素成像

image.png

深度学习单像素成像实战

1.准备和制作数据集

2.搭建与训练网络模型

3.数据可视化与结果评价

4.如何保存模型

不同参数会对网络测试和训练影响

image.png


第五天基于深度学习的散射成像与高光谱成像

主讲老师毕业于香港理工大学,近五年发表 JCR SCI 1区论文15篇,主要擅长计算散射成像,光学波前整形技术,主要论文在Nature communications, Advanced Science、Innovation、Advanced Photonics、Photonics Research等刊登。

图片
NEXT

第一章 基于深度学习的散射成像理论与实践

第一节:散射成像的技术概况

1.散射成像的应用场景

2.传输矩阵模型以及光学散斑的仿真

第二节:基于深度学习的散射成像

1.了解典型模型

第三节:利用仿真数据实现散射成像

1.自制数据集

2.复数神经网络

3.损失函数、优化约束以及调参

第二章 基于深度学习的高光谱成像理论与实践

第一节:高光谱成像基础概况

1.高光谱成像的原理与发展历程

2.高光谱图像的光谱维度与空间维度

第二节:基于深度学习的高光谱成像方法

1.深度学习如何处理高光谱成像中的空间与光谱信息

2.深度学习方法在高光谱图像分类与目标检测中的应用

第三节:高光谱成像模型的实践与实现

1.常用的高光谱数据集:Pavia, Salinas, Indian Pines等

2.从零开始实现一个高光谱图像分类模型

3.调整超参数:学习率、批大小等对模型性能的影响

image.png

image.png

第六天:基于深度学习的超分辨率成像

主讲老师来自美国亚利桑那大学,一年内个人发表JCR SCI 1区论文多篇,主要擅长计算光学成像,深度学习图像处理,团队在Nature, Science, Nature photonics, Nature communications, light 等发表过多篇文章

图片
NEXT

第1章 超分网络实战

第一节:讲解超分辨率神经网络

1.何为对偶监督网络

2.网络的结构是怎样的

第二节:引入DRN超分网络

3.了解drn对偶超分网络的论文大概

4.准备和制作数据集,参数的介绍

5.了解对偶监督网络的核心创新点

第三节:如何从零开开始复现一个网络

4.学习阅读代码中的readme文档

5.了解代码执行的核心思想

6.介绍如何通过终端执行命令

第2章:完整复现超分网络

第一节:环境准备

1.使用anaconda搭建drn网络的专属环境

2.激活环境,在pycharm中导入环境

3.如何根据报错解决环境问题

第二节:代码测试实战

1.介绍DRN网络中各文件夹的作用

2.如何通过DRN自带的pt文件进行测试

3.介绍option中不同参数会对网络测试和训练影响

第三节:代码训练实战

1.了解DF2K数据集的基本内容

2.如何训练一个网络

3.制作属于自己的数据集进行训练

image.png

image.png
image.png

传统光学设计依赖经验公式和数值优化算法,过程复杂且耗时,而深度学习的兴起为解决这些问题提供了新的途径。深度学习是机器学习的一个子领域,它通过模拟人脑的工作方式来处理和分析大量未标记的数据。深度学习模型通常由多层非线性处理单元组成,每一层都负责提取数据的特征,深度学习凭借其强大的非线性拟合能力、自动特征提取和高效优化等特点,在光学元件设计、光学系统优化、光学成像与图像处理以及光学材料设计等领域展现出巨大潜力。

深度学习在光学设计中的具体应用

 光子领域

应用:

设计光子晶体、波导和光子集成电路。

优化光子器件的性能,如光子晶体滤波器和激光器。

预测光在复杂介质中的传播特性。

优势:

高效优化光子器件的几何参数和材料特性。

快速预测光场分布和传输特性,减少仿真时间。

加速光子器件的设计和性能优化。

2. 光学结构设计

应用:

设计复杂光学元件,如透镜、反射镜和衍射光学元件。

优化光学系统的像差、分辨率和光通量。

自动化设计多层级光学系统。

优势:

自动调整光学结构参数,减少人工干预。

实现多目标优化(如同时优化分辨率、畸变和光通量)。

大幅缩短设计周期,提高设计效率。

3. 超表面设计

应用:

设计超表面的纳米结构,实现光束偏转、聚焦和偏振控制。

开发超薄透镜、全息成像器件和光学隐身装置。

优化超表面的光学性能,如透射率和反射率。

优势:

快速优化超表面的复杂纳米结构,缩短设计时间。

实现复杂光学功能(如多波长调控、宽带响应)。

通过数据驱动方法发现新型超表面设计。

4. 超材料设计

应用:

设计具有特殊电磁特性的超材料,如负折射率材料和超透光材料。

开发隐身斗篷、超透镜和高效太阳能吸收器。

优化超材料的频率响应和带宽。

优势:

高效预测超材料的电磁特性,加速新材料发现。

实现复杂超材料结构的多目标优化。

通过深度学习模型减少传统仿真计算量。

5. 共振现象

应用:

设计高灵敏度传感器,如等离子体共振传感器和光子共振传感器。

优化共振器件的性能,如窄带滤波器和能量捕获器件。

研究复杂共振现象,如Fano共振和耦合共振。

优势:

精确建模和优化共振特性,提高器件性能。

快速预测共振频率和品质因子。

通过数据驱动方法优化共振器件的几何参数。

6. 大模型与复杂系统

应用:

设计多尺度光学系统和复杂光学网络。

优化大规模光子集成电路和光学通信系统。

处理高维度光学设计问题,如多参数优化和多物理场耦合。

优势:

处理大规模、高维度的设计问题,提升计算效率。

通过并行计算和分布式训练加速复杂系统的优化。

实现全局优化,避免传统方法陷入局部最优解。

未来通过数据增强、迁移学习和多学科融合等方向的研究,深度学习有望进一步推动光学设计的发展,提升设计效率和性能,为复杂光学系统的创新提供强大支持。

图片


深度学习光学设计



图片

第一章 基于多层感知机的光子结构逆向设计与光学属性预测

1.介绍多层感知机

数学原理,

loss function的类型

backpropagation等

如何优化多层感知机最后的结果

2.多层感知机实例说明与实践

关于多层感知机网络架构的搭建

激活函数的设置,

参数设置等

3.案例分析与实践:

使用人工神经网络的纳米光子粒子模拟和逆向设计, Science Advances (2018)

论文详解 (讲解如何利用多层感知机去预测结构的光学属性以及如何使用相同的网络进行逆向设计)

训练深度神经网络进行纳米光子结构的逆向设计,ACS Photonics(2018).

论文详解(讲解传统逆向设计存在的一对多问题,如何提升多层感知机去解决逆向设计中的一对多问题。)

实践操作(论文算法的实现,参数调优等)

集成光子功率分配器的深度神经网络逆设计,Scientific Reports(2019)

论文详解(讲解如何打破传统多层感知机的层数限制,如何对于光子功率分配器进行逆向设计)

实践操作(论文中算法的实现)

image.png
image.png

第二章 光学衍射神经网络

1,介绍光学衍射神经网络的基础知识以及人工神经网络的对比以及关联

2,如何引入光学知识来设计神经网络

3,如何设计光学层来替代神经网络

4,介绍光学衍射神经网络的案例以及以metasurface为基础的光学衍射神经网络, 自由空间光神经网络的基本原理和最新发展, Journal of Applied Physics(2024)

5,介绍metasurface以及其相关的功能

6,如何引入metasurface相关的功能来调控光学神经网络

7,光学衍射神经网络实操

如何设置波的空间传播函数

如何设置光学衍射层

介绍光学参数已经神经网络参数的不同

image.png
image.png

第三章 基于卷积神经网络的结构设计

1.介绍卷积神经网络

卷积的介绍

与多层感知机相比卷积神经网络的优点

介绍多种类型的卷积神经网络

2.卷积神经网络实例说明与实操

如何设计卷积神经网络

参数设置

3.案例分析与实操:

基于矩阵理论的少层超表面反设计多层光, PHYSICAL REVIEW APPLIED, (2022)

论文详细讲解(如何利用卷积神经网络去预测光学结构的光学响应等)

基于深度神经网络的多功能波前整形通用超表面逆向设计,Optics & Laser Technology, (2023)

论文详细讲解 (如何将多层感知机与卷积神经网络结合,为什么这样设计)

实践操作(论文算法的实现,参数调优)

image.png
image.png

第四章基于循环神经网络的光学研究

1.介绍循环神经网络 

数学原理

与卷积神经网络和多层感知机相比的优点

各种循环神经网络的变体

2.循环神经网络实例说明与实操

如何搭建循环神经网络

如何调整参数

3.案例分析与实操:

利用卷积神经网络和递归神经网络相结合的图像处理方法发现等离子体结构的光学特性, Microsystems & Nanoengineering (2019)

论文详解( 将卷积神经网络和循环神经网络结合去预测光学结构的光学响应,各自模块所做的功能等)

光学共振中时间动力学的物理信息递归神经网络, nature computation science (2022)

论文详解 (如何利用循环神经网络预测时域电磁,其中将会面对的问题以及如何解决这些问题)

实践操作(论文算法的实现,参数调优等)

image.png
image.png

第五章基于生成式网络的光学设计

1.介绍生成式网络

生成式网络与传统神经网络的区别

讲解GAN与VAE的原理以及各自的优缺点

2.案例分析与实操:基于半监督学习深度生成模型的超材料概率表示与逆设计, Advanced Material (2019)

论文详解(如何利用VAE逆向设计光学结构等)

实践操作(VAE生成光学设计的实现,参数调优等)

image.png

第六章大模型在光学中的应用

1.GPT(ChatGPT的基本模型)

a.基本原理

b.如何设计输入输出

2论文讲解

OptoGPT:光学多层薄膜结构反设计的基础模型, OE (2024)(讲解如何将大模型应用到光学中的逆向设计,与之前所介绍的模型的不同,优势与缺点)


图片


课程特色及授课方式



图片

课程特色--全面的课程技术应用、原理流程、实例联系全贯穿

学习模式--理论知识与上机操作相结合,让零基础学员快速熟练掌握

课程服务答疑--主讲老师将为您实际工作中遇到的问题提供专业解答

授课方式:

通过腾讯会议线上直播,理论+实操的授课模式,老师手把手带着操作,从零基础开始讲解,电子PPT和教程开课前一周提前发送给学员,所有培训使用软件都会发送给学员,有什么疑问采取开麦共享屏幕和微信群解疑,学员和老师交流、学员与学员交流,培训完毕后老师长期解疑,培训群不解散,往期培训学员对于培训质量和授课方式一致评价极高

腾讯会议问题实时解答及学员反馈

图片


授课时间



光学设计

2025.4.4——2025.4.6(上午9:00--12:00)

2025.4.11——2025.4.13(上午9:00--12:00)

2025.4.19——2025.4.20(上午9:00--12:00)

光学成像

2025.4.5——2025.4.6(下午1:30--4:30  晚上6:00--9:00)

2025.4.8——2025.4.9(晚上7:00--10:00)

2025.4.12——2025.4.13(下午1:30--4:30  晚上6:00--9:00)

2025.4.19——2025.4.20(下午1:30--4:30


图片


课程费用



深度学习光学成像、深度学习光学设计

每人每班¥4980元 (含报名费、培训费、资料费、提供课后全程回放资料)

优惠1:提前报名缴费可享受300元优惠(仅限十五名)

优惠2:同时报名两个课程9080元

课后学习完毕提供全程录像视频回放,针对与培训课程内容进行长期答疑,微信解疑群永不解散,参加本次课程的学员可免费再参加一次本单位后期组织的相同的专题培训班(任意一期都可以)

报名咨询方式(请二维码扫描下方微信)







图片
联系人:何老师
联系电话:17698066380
引用本次参会学员的一句话:

发现真的是脚踏实地的同时 需要偶尔仰望星空

非常感谢各位对我们培训的认可!祝愿各位心想事成



Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/179544
 
68 次点击