Skip to content
项目
群组
代码片段
帮助
当前项目
正在载入...
登录 / 注册
切换导航面板
M
mtbookv2
概览
Overview
Details
Activity
Cycle Analytics
版本库
Repository
Files
Commits
Branches
Tags
Contributors
Graph
Compare
Charts
问题
0
Issues
0
列表
Board
标记
里程碑
合并请求
0
Merge Requests
0
CI / CD
CI / CD
流水线
作业
日程表
图表
维基
Wiki
代码片段
Snippets
成员
Collapse sidebar
Close sidebar
活动
图像
聊天
创建新问题
作业
提交
Issue Boards
Open sidebar
NiuTrans
mtbookv2
Commits
0422b141
Commit
0422b141
authored
Feb 02, 2021
by
单韦乔
Browse files
Options
Browse Files
Download
Email Patches
Plain Diff
编辑反馈后修改
parent
2f9ca45e
全部展开
隐藏空白字符变更
内嵌
并排
正在显示
4 个修改的文件
包含
6 行增加
和
6 行删除
+6
-6
Chapter13/Figures/figure-bpe.tex
+3
-3
Chapter13/Figures/figure-computation-of-dropout.tex
+2
-2
Chapter13/chapter13.tex
+0
-0
Chapter15/chapter15.tex
+1
-1
没有找到文件。
Chapter13/Figures/figure-bpe.tex
查看文件 @
0422b141
...
...
@@ -43,7 +43,7 @@
\node
[anchor=west,mnode] (n8) at ([xshift=5em,yshift=0em]n7.east)
{}
;
\node
[anchor=north,align=center,font=
\footnotesize
] (n81) at ([xshift=0em,yshift=-0.2em]n8.north)
{{
\small
符号合并表
}
\\
(e,s)
}
;
\node
[anchor=west,align=left,font=
\footnotesize
] (nt3) at ([xshift=0.1em,yshift=0em]n6.east)
{
统计二元组
\\
[0.5ex]
的频次
}
;
\node
[anchor=west,align=left,font=
\footnotesize
] (nt3) at ([xshift=0.1em,yshift=0em]n6.east)
{
统计二元组
\\
[0.5ex]
出现
的频次
}
;
\node
[anchor=west,align=left,font=
\footnotesize
] (nt4) at ([xshift=0em,yshift=-0.4em]n7.east)
{
频次最高的
\\
[0.5ex]
(e,s)加入表
\\
中
}
;
\draw
[->,thick,ublue] ([xshift=0em,yshift=0em]n6.east)--([xshift=0em,yshift=0em]n7.west);
\draw
[->,thick,ublue] ([xshift=0em,yshift=0em]n7.east)--([xshift=0em,yshift=0em]n8.west);
...
...
@@ -63,7 +63,7 @@
\node
[anchor=west,mnode] (n11) at ([xshift=5em,yshift=0em]n10.east)
{}
;
\node
[anchor=north,align=center,font=
\footnotesize
] (n111) at ([xshift=0em,yshift=-0.2em]n11.north)
{{
\small
符号合并表
}
\\
(e,s)
\\
(es,t)
}
;
\node
[anchor=west,align=left,font=
\footnotesize
] (nt5) at ([xshift=0.1em,yshift=0em]n9.east)
{
统计二元组
\\
[0.5ex]
的频次
}
;
\node
[anchor=west,align=left,font=
\footnotesize
] (nt5) at ([xshift=0.1em,yshift=0em]n9.east)
{
统计二元组
\\
[0.5ex]
出现
的频次
}
;
\node
[anchor=west,align=left,font=
\footnotesize
] (nt6) at ([xshift=0em,yshift=-0.4em]n10.east)
{
频次最高的
\\
[0.5ex]
(es,t)加入表
\\
中
}
;
\draw
[->,thick,ublue] ([xshift=0em,yshift=0em]n9.east)--([xshift=0em,yshift=0em]n10.west);
\draw
[->,thick,ublue] ([xshift=0em,yshift=0em]n10.east)--([xshift=0em,yshift=0em]n11.west);
...
...
@@ -72,7 +72,7 @@
\node
[anchor=north,ublue] (cd) at ([xshift=0em,yshift=-2.0em]n10.south)
{$
\cdots
$}
;
\draw
[->,thick,ublue] ([xshift=-0em,yshift=-0em]n11.south) .. controls +(south:2em) and +(north:2em) .. ([xshift=-0em,yshift=-0em]cd.north);
\node
[anchor=north west,ublue,font=
\footnotesize
,align=left] (l2) at ([xshift=1em,yshift=-1.0em]n10.south east)
{
在词表中
\\
[0.8ex]
合并(es,t)
}
;
\node
[anchor=east,ublue,align=left,font=
\footnotesize
] (l3) at ([xshift=-0.5em,yshift=0em]cd.west)
{
直至达到
设定的符号合
\\
并表大小或无法
合并
}
;
\node
[anchor=east,ublue,align=left,font=
\footnotesize
] (l3) at ([xshift=-0.5em,yshift=0em]cd.west)
{
直至达到
预设的符号合并表
\\
大小,或没有二元组可以被
\\
合并
}
;
\begin{pgfonlayer}
{
background
}
\node
[rectangle,inner sep=0.7em,draw,orange!40,dashed,thick,rounded corners=7pt] [fit = (n5) (n8) (l3) (cd)] (box2)
{}
;
...
...
Chapter13/Figures/figure-computation-of-dropout.tex
查看文件 @
0422b141
...
...
@@ -14,7 +14,7 @@
\node
[neuronnode] (neuron
_
z) at (1.2 *
\nodespace
,-1.5 *
\neuronsep
)
{
\scriptsize
{$
z
_{
i
}^{
l
+
1
}$}}
;
\node
[neuronnode] (neuron
_
y') at (2.4 *
\nodespace
,-1.5 *
\neuronsep
)
{
\scriptsize
{$
x
_{
i
}^{
l
+
1
}$}}
;
\node
[anchor=north
] (standard) at ([yshift=-4em]neuron
_
z.south)
{
\scriptsize
{
标准网络
}
}
;
\node
[anchor=north
,align=left,font=
\scriptsize
] (standard) at ([xshift=2em,yshift=-3em]neuron
_
z.south)
{
使用Dropout前的
\\
一层神经网络
}
;
\node
[] (standard) at ([xshift=-1em]neuron
_
z.west)
{
\scriptsize
{$
\mathbi
{
w
}_{
i
}^{
l
}$}}
;
\node
[] (standard) at ([xshift=0.6em,yshift=0.3em]neuron
_
z.east)
{
\scriptsize
{$
f
$}}
;
...
...
@@ -40,7 +40,7 @@
\node
[neuronnode] (drop
_
neuron
_
r2) at (4.4*
\nodespace
,-1.5*
\neuronsep
)
{
\scriptsize
{$
r
_{
2
}^{
l
}$}}
;
\node
[neuronnode] (drop
_
neuron
_
r1) at (4.4*
\nodespace
,-2.5*
\neuronsep
)
{
\scriptsize
{$
r
_{
1
}^{
l
}$}}
;
\node
[anchor=north
] (standard) at ([xshift=2em,yshift=-4em]drop
_
neuron
_
z.south)
{
\scriptsize
{
应用Dropout后的网络
}
}
;
\node
[anchor=north
,align=left,font=
\scriptsize
] (standard) at ([xshift=2em,yshift=-3em]drop
_
neuron
_
z.south)
{
使用Dropout后的
\\
一层神经网络
}
;
\node
[] (standard) at ([xshift=-1em]drop
_
neuron
_
z.west)
{
\scriptsize
{$
\mathbi
{
w
}_{
i
}^{
l
}$}}
;
\node
[] (standard) at ([xshift=0.6em,yshift=0.3em]drop
_
neuron
_
z.east)
{
\scriptsize
{$
f
$}}
;
%structure
...
...
Chapter13/chapter13.tex
查看文件 @
0422b141
差异被折叠。
点击展开。
Chapter15/chapter15.tex
查看文件 @
0422b141
...
...
@@ -25,7 +25,7 @@
\parinterval
模型结构的设计是机器翻译系统研发中最重要的工作之一。在神经机器翻译时代,虽然系统研发人员脱离了繁琐的特征工程,但是神经网络结构的设计仍然耗时耗力。无论是像循环神经网络、Transformer 这样的整体架构的设计,还是注意力机制等局部结构的设计,都对机器翻译性能有着很大的影响。
\parinterval
本章主要讨论神经机器翻译中结构优化的若干研究方向,包括:注意力机制的改进、
网络连接优化及深层网络建模、基于树结构的模型、神经网络结构自动搜索等。
这些内容可以指导神经机器翻译系统的深入优化,其中涉及的一些模型和方法也可以应用于其他自然语言处理任务。
\parinterval
本章主要讨论神经机器翻译中结构优化的若干研究方向,包括:注意力机制的改进、
{
\red
网络连接优化及深层网络建模、基于树结构的模型、神经网络结构自动搜索等。
}
这些内容可以指导神经机器翻译系统的深入优化,其中涉及的一些模型和方法也可以应用于其他自然语言处理任务。
%----------------------------------------------------------------------------------------
% NEW SECTION
...
...
编写
预览
Markdown
格式
0%
重试
或
添加新文件
添加附件
取消
您添加了
0
人
到此讨论。请谨慎行事。
请先完成此评论的编辑!
取消
请
注册
或者
登录
后发表评论