Dify知识库构建RAG、搭建Agent

物理、化学、生物基准测试，全面超过了人类博士专家

一组经过精心设计的测试任务、问题和数据集

One-Hot Encoding、Word2Vec（CBOW、Skip-gram）、GloVe、FastText、ELMo

Skip-Gram“由点及面”，中心词推上下文；CBOW“由面定点”，上下文填中心词

对各种类型的数据（如文本、图像、音频、视频等）进行高质量的标注

隐藏状态包含了之前所有时间步的信息

基于词典的匹配法、基于统计的模型法

利用神经网络架构来预测文本序列中下一个词

9月15日开启第九课（9月主题NLP的第二课时）：神经网络语言模型（什么是NLP，NNLM如何进行NLP任务处理、RNN如何进行NLP任务处理）

计算单词、句子在文本中出现的概率P(W)

一本全面介绍AIGC（Artificial Intelligence Generated Content）大语言模型的书籍

Sigmoid、ReLU及其变体Leaky ReLU、Tanh和Softmax

通过观察新的数据来不断更新先验概率，使之逼近客观事实。

统计语言模型、神经网络语言模型以及基于Transformer的大语言模型

闭源GPT，开源LlaMA

衡量模型预测输出与真实标签之间差异

9月8日开启第八课：大模型实战-LangChain（一）

9月8日开启第八课：大模型实战-夯实基础（马尔可夫链 + 朴素贝叶斯）

人工神经网络起源于20世纪40年代