标签：NLP

文章

• Agent 学习第 8 周：文本匹配，双塔与交互式的分工

  双塔负责召回、交互式负责精排；先用 Jaccard 字面基线校准，再看 BiEncoder 与 CrossEncoder 的真实差距。

• Agent 学习第 7 周：序列标注，CRF 到底带来了什么

  用 BERT + CRF 做中文 NER：为什么必须用实体级 F1，以及 CRF 的 +0.58pp 到底算不算赢。

• Agent 学习第 6 周：文本分类，以及 LoRA 为什么赢了全参微调

  在 TNEWS 15 分类上做了七组对照实验，最反直觉的结果是只训 0.22% 参数的 LoRA 赢了全参微调。

• Agent 学习第 4 周：语言模型与 Transformer

  从 N-gram 到 BERT，再手写一个 Transformer 层，把 L×L 注意力矩阵里的每个数字算明白。