Recent Progress in Machine Translation between Japanese and Others, by Mick Etoh, NTT DoCoMo

© 2016 Mirai Translate, Inc. All rights reserved.
Recent Progress in Machine Translation
to and from Japanese
1
Impossible only means
that you have screwed up the solution.
- Mick Etoh

2
2
Introduction

3

4

5
Pre-Ordering

6
!" #$% $ &$' $ ()*+ '$,( #$%&$'%,'-()*+ '$,(
'-,#.,#./",0).1$*$0$.2......................................................'-,#.34$5./",0).1$*$0$.,#.2
田中恵子と申します
,.6#"7.').8)+."4"9:.;)9*,*+.2.. . . ...................,.34$5."4"9:.;)9*,*+.8)+.').6#"7.2
#-".%$#.%"$9,*+.$.#%"$'"9.$*7.-,+-.-"$(#.2. ......#-".34$5.#%"$'"9.$*7.-,+-.-"$(#.34$<.%"$9,*+.%$#.2.
!"%,'-
NTT Technology for JA <-> EN

7
High
EN->FR・FR->EN
JA->KO・KO->JA
ZH->EN,EN->ZH
DE->E,N EN->DE
EN->JA JA>EN
Pre-Ordering Diﬃculty
• Language pair dependent
• [Kudo+ 2014; Na and Lee 2014]
Low

How it works.
8
検出されたセキュリティ脅威の一部は削除できませんでした。
一部のた検出されセキュリティ脅威ませんでしたでき削除。
Could not remove some of the security threats found?
Some of the security threats found could not be removed.

How it works.
9
これらのプロパティーは、あとで sun-resources.xml ファイルを編集し
て変更できます。
These properties can be changed by editing the sun-
resources.xml file at a later time.
These properties edit sun-resources.xml file can be changed later.
のこれらプロパティー、ますでき変更てし編集 sun - resources .
xml ファイルであと。

How it works.
10
新規または既存のループファイルに対して、テンポやキーなどのループの
プロパティを設定できます。
You can set properties of the loop, such as the tempo and key on a
new or existing loop files.
You can set properties for a new or existing file such as loop tempo
and key on a loop.
ますでき設定プロパティのループのなどテンポやキーに対して新規
またはの既存ループファイル、。

How it works.
Windowsの設定が一元的に管理され、システム、セキュリティ、ユーザーア
カウントに関する設定の安全性と統一性が確保されます。
設定の Windows に一元的管理され、と安全性の設定に関するシ
ステム、セキュリティ、ユーザーアカウント統一性ます確保され。
Windows settings and provides security and control over system
security and user account settings ensures consistency of Kazumoto.
Set Windows to centrally managed, secure your preferences for
the system, security, and user account.

機械
人間
12

機械
人間
13

14
250 Million EN-JA Corpora
BLEU score: 40

!"!#$%&'()*+,-'./0,/1
RBMT+SMT
=6("#>?$#"7.
@,*+6,#',&.A9)&"##,*+
Linguistic Benefits
Accuracy
Predictability
Consistency
Statistical Benefits
Translation fluency
Ambiguity resolution
Solve complex rules
B)9A6#>?$#"7.
C'$',#',&$(.A9)&"##,*+
19$*#($',)*.
D";)9,"#
D)*)(,*+6$(.
@$*+6$+".D)7"(#
E,(,*+6$(.
19$*#($',)*.
D)7"(#
E,(,*+6$(..F#"9.
G,&',)*$9,"#
D)*)(,*+6$(.
H)9;$(,I$',)*.
G,&',)*$9,"#
2 ' #) 3 1 4 ' 5 6 ' 7 8 4 9 5 : ' $ 1 4 5 8 + ; 1 4
19$*#($',)*.J9)K,("#
15

Hybrid Technology: Improving Fluency
16
Statistical
Engine
Rule-Based
Engine
Source
Language
Target
Language
다 데워지면 알려 드리겠습니다.
すべて暖められればお知らせいたします
(It will inform if it will be all heated)
Language
温め終わったらお呼びします。
(We will call you once it’s heated)
Translate to target
language using RBMT
Translate within target language
(improve fluency)

General Conversation (1-5 Scale, 2015 FY)
17
Language Pair
Mirai Translate
SMT
Mirai Translate
RBMT+SPE
Competitor A
RBMT
Competitor B
RBMT
JA > KO 3.8 4.01 3.9 3.9
KO > JA 4.1 4.3 3.9 4.0
!"#
$"%&
!"' !"'
()*+),-*+./0+12
3(-
()*+),-*+./0+12
45(-6378
9:;<21)1:*,=
45(-
9:;<21)1:*,5
45(-
!"!"＞＞#$
!"#
!"$
$"%
!"&
'()*(+,)*-./*01
2',
'()*(+,)*-./*01
34',5267
89:;10(09)+<
34',
89:;10(09)+4
34',
!"!"＞＞＞#$

18
Shopping Conversation (1-5 Scale, 2015 FY)
Language Pair
Mirai Translate
SMT
Mirai Translate
RBMT+SPE
Competitor B
RBMT
JA > KO 3.68 3.91 3.65
KO > JA 4.02 4.23 4.11
!"#$
!"%&
!"#'
()*+),-*+./0+12
3(-
()*+),-*+./0+12
45(-6378
9:;<21)1:*,5
45(-
!"!"＞＞＞#$
!"#$
!"$%
!"&&
'()*(+,)*-./*01
2',
'()*(+,)*-./*01
34',5267
89:;10(09)+4
34',
!"!"＞＞＞#$

TOEIC TEST
19

Estimating MT Quality with a TOEIC Score
20
!Example: Regression Analysis (in a case of 25 participants with TOEIC score 300-700)
!"#$%&%'"($)
*+,-.)/&0#1
2%()3"$%0)04)5"&6%(1)*#"(78"$%0(
Reference：菅谷史昭、竹澤寿幸、横尾昭男、山本誠一 (2001) 「音声翻訳性ステムと人間の比較による音声翻訳能力評価手法の提案と比較実験」
安田圭志、菊井玄一郎 (2006) 「人間の能力との比較による音声翻訳システム性能評価法の効率化に関する検討」

Mirai Translate’s TOEIC SCORE
21
* 300 samples from TOEIC problems
!"!#
$!"!#
%!"!#
&!"!#
'!"!#
(!"!#
)!"!#
*!"!#
'!! (!! )!! *!! +!! ,!!
655 !Using Robust Regression
* Mirai Hybrid Engine (Trained on 1.5 M Corpus)

Human (TOEIC 600-699 vs. Machine
22
船が港に停泊している。
この通りは交通量が多い。
費用はあまり高くありませんでした。
いつ新聞の購読を止めたの？
昨日南部地方を襲ったハリケーンは多
大な損害と停電をもたらした。
氏が海外へ行く計画を断念した
ことはとても残念だった。

FYI: Over TOEIC 900 Possible for Speciﬁc Domain
23
* 300 samples from Email Corpus
957 !Using Robust Regression
* Mirai Hybrid Engine (Trained on 1.5 M Corpus)
!"!#
$!"!#
%!"!#
&!"!#
'!"!#
(!"!#
)!"!#
*!"!#
+!"!#
,!"!#
'!! (!! )!! *!! +!! ,!!

24

E,(,*+6$(.F#"9.
G,&',)*$9,"#
!"!/,9,5/#$%&'<'("=$>?'.&@>&.
25
C)69&"
19$*#(
$',)*
D$,*.G,&',)*$9,"#
@,*+6,#',&.=6("#
F#"9.L*',',"#
=6("#>E$#"7.
D1
!9A9,49,;AB'
C549D
.-,9,5/
CEC EC
1$9+"'.
D)*)(,*+6$(.
B)9A6#
!58+;1'
%-A39A9,5/
EC
D)*)(,*+6$(.
C)69&".B)9A6#
E,(,*+6$(.B)9A6#.)9.
19$*#($',)*.D";)9,"#
E,(,*+6$(.
19$*#($',)*.
D)7"(#
1$9+"'.
@$*+6$+".
D)7"(#
C)69&".
@$*+6$+".
D)7"(#
!1B6D9+A,/,/0
C)69&".
H)9;$(,I$',)*.
G,&',)*$9,"#
!1B6D#+A,/,/0
!1B6D#+A,/,/0
CEC
C'$',#',&$(.D1
19$*#($',)*.
D";)9,"#
=,B,/08AB'
#1+:,/5B50)'
.E9+A;9,5/
'!31BB'7F1;G
(5:50+A3F4
1$9+"'.
H)9;$(,I$',)*.
G,&',)*$9,"#
19$*#($',)*..
D";)9,"#
Pre-Filter Formating
Normalization
Segmentation
Entity
Recognition
Translation Memory
User Dictionary Match
Post-Processing
Formatting
Normalization
Post-Filter

SES Translation Server 8 J
26

JA→ EN→ AR
29

JA → EN → Hindi
30

JA → EN → Urdo
31

Arabic → EN→ JA
32

Hindi→ EN→ JA
33

Urdoo → En → JA
34

What we dream
35

36
Mirai Translate, Inc.

Recent Progress in Machine Translation between Japanese and Others, by Mick Etoh, NTT DoCoMo

Recommended

Recommended

More Related Content

Similar to Recent Progress in Machine Translation between Japanese and Others, by Mick Etoh, NTT DoCoMo

Similar to Recent Progress in Machine Translation between Japanese and Others, by Mick Etoh, NTT DoCoMo (20)

More from TAUS - The Language Data Network

More from TAUS - The Language Data Network (20)

Recently uploaded

Recently uploaded (10)

Recent Progress in Machine Translation between Japanese and Others, by Mick Etoh, NTT DoCoMo