Commit 1b484785 by xiaotong

bug fixes

parent ce425042
This source diff could not be displayed because it is too large. You can view the blob instead.
...@@ -1650,7 +1650,7 @@ cycle} ...@@ -1650,7 +1650,7 @@ cycle}
\end{frame} \end{frame}
%%%------------------------------------------------------------------------------------------------------------ %%%------------------------------------------------------------------------------------------------------------
\subsection{神经网络的简单实现张量计算} \subsection{神经网络的简单实现 - 张量计算}
%%%------------------------------------------------------------------------------------------------------------ %%%------------------------------------------------------------------------------------------------------------
%%% outline: problem 2 %%% outline: problem 2
...@@ -3026,7 +3026,7 @@ J(\textbf{w}_t) = \frac{1}{m} \sum_{i=j}^{j+m} L(\textbf{x}_i,\hat{\textbf{y}}_i ...@@ -3026,7 +3026,7 @@ J(\textbf{w}_t) = \frac{1}{m} \sum_{i=j}^{j+m} L(\textbf{x}_i,\hat{\textbf{y}}_i
\end{itemize} \end{itemize}
\item<3-> \textbf{其它} \item<3-> \textbf{其它}
\begin{itemize} \begin{itemize}
\item 深度网络梯度消失和爆炸的问题,使用梯度裁剪、残差接等 \item 深度网络梯度消失和爆炸的问题,使用梯度裁剪、残差接等
\item 引入正则化因子,可以对外部知识建模,比如引入噪声让训练更稳定 \item 引入正则化因子,可以对外部知识建模,比如引入噪声让训练更稳定
\end{itemize} \end{itemize}
\end{itemize} \end{itemize}
...@@ -3809,7 +3809,7 @@ NLP问题的\alert{隐含结构}假设 & 无隐含结构假设,\alert{端到 ...@@ -3809,7 +3809,7 @@ NLP问题的\alert{隐含结构}假设 & 无隐含结构假设,\alert{端到
\visible<3->{ \visible<3->{
\begin{tcolorbox}[enhanced,size=normal,left=2mm,right=1mm,colback=blue!5!white,colframe=blue!75!black,drop fuzzy shadow] \begin{tcolorbox}[enhanced,size=normal,left=2mm,right=1mm,colback=blue!5!white,colframe=blue!75!black,drop fuzzy shadow]
{\Large {\Large
\textbf{如何词串的生成概率进行建模?} \textbf{如何词串的生成概率进行建模?}
} }
\end{tcolorbox} \end{tcolorbox}
} }
...@@ -5342,7 +5342,7 @@ GPT-2 (Transformer) & Radford et al. & 2019 & 35.7 ...@@ -5342,7 +5342,7 @@ GPT-2 (Transformer) & Radford et al. & 2019 & 35.7
\begin{itemize} \begin{itemize}
\item 讲了很多,累呀累,再整理一下主要观点 \item 讲了很多,累呀累,再整理一下主要观点
\begin{itemize} \begin{itemize}
\item 神经网络没有那么复杂,入门不能 \item 神经网络没有那么复杂,入门并不难
\item 简单的网络结构可以组合成强大的模型 \item 简单的网络结构可以组合成强大的模型
\item 语言模型可以用神经网络实现,效果很好,最近出现的预训练等范式证明了神经语言模型的潜力 \item 语言模型可以用神经网络实现,效果很好,最近出现的预训练等范式证明了神经语言模型的潜力
\end{itemize} \end{itemize}
......
Markdown 格式
0%
您添加了 0 到此讨论。请谨慎行事。
请先完成此评论的编辑!
注册 或者 后发表评论