深度学习 第3页
图像分类:计算机视觉的第一课-子比笔记

图像分类:计算机视觉的第一课

图像分类回答最基本的问题:这张图属于哪一类?猫还是狗、正常还是病变。它看似简单,却是整个计算机视觉的起点,无数更复杂的任务都建立在分类能力之上。 图像分类的历史是一部“从认不出猫狗...
人脸识别:从检测到比对的完整链条-子比笔记

人脸识别:从检测到比对的完整链条

人脸识别包含一整套流程:先检测人脸位置,再提取特征向量,最后与数据库比对身份。它已广泛用于解锁、支付、门禁,也引发了严重的隐私讨论。 人脸识别是技术双刃剑的典型案例:一边是秒级完成...
OCR:让机器看懂文字-子比笔记

OCR:让机器看懂文字

OCR(光学字符识别)把图片中的文字转成可编辑的文本——从扫描件到街景路牌,从发票到身份证。它是 AI 最实用、普及最广的能力之一。 OCR 的价值在于它是“数字世界与纸质世界的翻译官”。数以...
语音识别:让机器听懂人话-子比笔记

语音识别:让机器听懂人话

语音识别(ASR)把声音转成文字。从最初的几十个词到现在的自由交谈,深度学习让它从实验室走进了每一部手机、每一个智能音箱。 语音识别最有温度的一面是它的无障碍价值:对视障人士、对老年人...
语音合成:AI 的“嗓音”-子比笔记

语音合成:AI 的“嗓音”

语音合成(TTS)把文字转成自然的人声。从最早的机械味机器人腔,到现在几乎以假乱真的自然语音,TTS 让 AI 第一次“开口说话”。 声音克隆技术的成熟让人既兴奋又不安:兴奋的是每个人都能拥有...
生成对抗网络(GAN):左右互搏的艺术-子比笔记

生成对抗网络(GAN):左右互搏的艺术

GAN 让生成器与判别器互相对抗:生成器努力造假,判别器努力识破,在博弈中双方共同进步。这种“左右互搏”的思路,让 AI 第一次能生成逼真的图像。 GAN 的哲学意味很浓:造假者与鉴定者的军备...
多头注意力:从多个角度同时看-子比笔记

多头注意力:从多个角度同时看

多头注意力并行运行多组注意力,每组关注不同维度的信息——有的头看语法关系,有的头看语义相似,有的看长距离依赖。多个视角综合起来,理解就更完整。 多头注意力很像一个优秀的团队:每个人...
位置编码:给注意力补上时间感-子比笔记

位置编码:给注意力补上时间感

注意力机制本身对顺序不敏感——打乱句子顺序可能得到同样的结果。位置编码把每个位置的位置信息编码成向量加进去,让模型知道谁在谁前面。 位置编码的存在提醒我们一件容易忽略的事:信息不只...
残差连接:深层网络能训动的秘密-子比笔记

残差连接:深层网络能训动的秘密

残差连接把每层的输入直接加到输出上,让网络学习“变化量”而非完整结果。这个看似简单的改动解决了深层网络无法训练的问题,把网络深度从几十层推向了上百层。 残差连接的智慧令人拍案:既然...
层归一化:稳定训练的幕后功臣-子比笔记

层归一化:稳定训练的幕后功臣

层归一化对每一层的激活值做标准化,防止数值在深层传递中爆炸或消失。它配合残差连接,让深层 Transformer 能够稳定训练。 层归一化的作用可以类比为社会治理中的“调控”:任由各种信号自由放...
Batch Normalization:深度学习训练的里程碑-子比笔记

Batch Normalization:深度学习训练的里程碑

Batch Normalization 对每个小批量的数据做归一化,有效缓解了内部协变量偏移问题,让训练更快、更稳定,允许使用更大的学习率。它曾把 CNN 的训练效率提升了一个档次。 BN 的灵感来自一个观察...
Dropout:训练时随机“摸鱼”-子比笔记

Dropout:训练时随机“摸鱼”

Dropout 在训练时随机让一部分神经元“失活”,强迫网络不要过度依赖任何单个神经元。这种“制造不可靠”的训练方式,反而提升了模型的鲁棒性,是最巧妙的正则化手段之一。 Dropout 的思路极其...