SlideShare a Scribd company logo
英語学習者の
発話自動採点
近藤悠介と石井雄隆
1
発話自動採点とは
2
y=ax+b…
Nice to see you!
.wav
.wav
.wav
y=ax+b…
y=ax+b…
How Can I get to
the station?I was so exited!
Score & feedback
なぜ自動採点したいか 1/2
一般論
◦ 発話能力育成を重要視
◦ 発話能力のテストがあることのwashback
植野・荘島(2010)
◦ 教育評価は筆記試験からパフォーマンス評価に変化してきている。
◦ 教育評価の研究対象もパフォーマンス評価に移行している。
Higgins, Xi, Zechner, and Williamson (2011)
◦ Constructed Response がTOEFL、SAT、GRE、ACT、TOEICで採用されている。
なぜ自動採点したいか 2/2
人的、時間的コストの削減
◦ スピーキングテストを実施するには時間がかかる。
◦ 実施から評価を送出するまでにも時間がかかる。
◦ 評定者を訓練するのにも時間がかかる。
◦ 信頼性の高い複数の評定者が必要。
コンピュータの方が評価が安定している
◦ 訓練をしても人間なので評価にぶれが生じる。
◦ 経年的に行う場合の人材の確保が難しい。
評価と特徴量の関係が知りたい
◦ 学習者の発話の変化(発達?)が客観的に見れる。
◦ タスクと発話の関係を客観的に見れる。
4
Clauser, Margolis, Clyman, and Ross (1997)や
Higgins, Xi, Zechner, and Williamson (2011)
などでの指摘と一般論
Page, E.B. (1966)
(おそらく)世界初の作文自動採点(中学生(英語母語話者)の作文の採点目的)
◦ Page, E.B. (1966). The imminence of grading essays by computer, The Phi Delta Kappa international, Vol..
47, No. 5., 238-243.
◦ Page is widely acknowledged as the father of automated essay scoring, a multi-disciplinary field
exploring computer evaluation and scoring of student writing, particularly essays (Wikipedia).
単語の長さ、段落の数、キーワードの有無などから評定者による評価を予測する。
基本的な考え方は現在と同じ。
「表層的なものしか見ていない」、「コンピュータは内容を理解していない」などの批判は現在の
研究でも当てはまる。
5
Bernstein, et. al. (1989)
(おそらく)世界初の発話(発音)自動採点
◦ Bernstein, J., Weintraub, M., Cohen, M., & Murveit, H. (1989). Automatic evaluation of English spoken
by Japanese students. In Paper FF10, 118th Acoustic Society of America Meeting, November (Abstract in
Journal of the Acoustic Society of America (Suppl. 1), S77).
母語話者の発話から構築した音響モデルとの差(尤度)をもとに判定している。
(解決できない問題であるが)、音響モデルとの差は音響モデル構築に使用した発話に大きく
依存している。
母語話者に似ていることが重要ではなくなってきた。
6
実装されているシステム
SpeechRater
◦ Educational Testing Serviceが開発し、TOEFL Practice Onlineのspeaking sectionで実装されている。
◦ 特定の話題に関する自由な発話を自動採点。
◦ 評定者との相関は.57-.70。
◦ 単語認識率は約50%。
Versant
◦ Pearson Learningが開発し、大学、企業で発話能力の評価として採用されている。
◦ 読み上げ、反対語を言うなど発話が限定されたタスクを使用。
7
音素アライメントの例
sorry but i’m busy now
採点(予測)のイメージ
9
発話の特徴量と評定者による評価の関係から予測式を得る。
Y = X1+X2+…+Xn
評定者による評価 特徴量
話す速さ
語彙の豊富さ
Kondo (2010): 読み上げ文の自動採点
The North Wind and the Sun were disputing which was the stronger when a
traveler came along wrapped in a warm cloak. They agreed that the one who first
succeeded in making the traveler take his cloak off should be considered stronger
than the other.
Then the North Wind blew as hard as he could, but the more he blew the more
closely did the traveler fold his cloak around him; and at last the North Wind gave
up the attempt.
Then the Sun shone out warmly, and immediately the traveler took off his cloak.
And so the North Wind was obliged to confess that the Sun was the stronger of
the two.
10
フィードバックの例
11
Category A: 微妙な意味もイントネーションなどで表現でき、明瞭で自然な発音である。
単語の発音について
コミュニケーションを阻害するものではありませんが、いくつかの発音が正確ではない可能性があります。
例えば、テキストに出てきたlast、sun、atの母音を日本語では同じ「あ」と認識しますが、英語では、これら
の母音はすべて異なります。ひとつの母音が異なるだけで意味が異なる場合があります。例えば、butと
batは日本語風に発音すると「バット」になってしまいますが、実際には異なる発音です。また、日本語にな
い子音についても同様のことが言える可能性があります。個々の発音に注意を払えば、より伝わりやすい
英語になるでしょう。
文の読み方について
ほぼ完璧だと思われますが、いくつかの文の強勢が正確ではない可能性があります。単語にアクセント
(強勢)があるように、文にも最も強く発音される単語があります。これは前後関係や話者の意図によって
ことなりますが、例えば、テキストに出てきた"and at last the North Wind gave up the attempt"という文の場
合、一般的に最後の単語attemptが最も強く発音されます。
評価基準: CEFR
12
PHONOLOGICAL CONTROL
C2 As C1
C1
Can vary intonation and place sentence stress correctly in order to express finer shades of
meaning.
B2 Has acquired a clear, natural, pronunciation and intonation.
B1
Pronunciation is clearly intelligible even if a foreign accent is sometimes evident and
occasional mispronunciations occur.
A2
Pronunciation is generally clear enough to be understood despite a noticeable foreign accent,
but conversational partners will need to ask for repetition from time to time
A1
Pronunciation of a very limited repertoire of learnt words and phrases can be understood with
some effort by native speakers used to dealing with speakers of his/her language group
(Council of Europe, 2003:117)
評価基準に基づき評定者を訓練し、一般化可能性理
論、多相ラッシュ・モデルを用いて評定者を選んだ
Kondo (2010)。
相関を検証した特長量(抜粋)
13
特徴量 定義
フィラーの数 mm, ehhなどに代表される非語彙の挿入数
無音ポーズの長さ 100ms以上の無音の時間的長さ
Mean length of run 2つのフィラーあるいは無音ポーズの間の音節の数の平均値
言い直し 言い直しで挿入された音節の数
Pruned syllable per second 言い直し、フィラーを除いた音節の数を総発話時間で割ったもの
強勢音節と非強勢音節の比 非強勢音節の長さの平均値を強勢音節の長さの平均で割ったもの
文間のポーズの数 文の境界で置かれたフィラーおよび無音ポーズの数
フレーズ間のポーズの数 フレーズの境界で置かれたフィラーおよび無音ポーズの数
/i/と/ɪ/の識別率 F1およびF2による/i/と/ɪ/の識別率(判別分析による)
/uː/と/ʊ/の識別率 F1およびF2による/uː/と/ʊ/の識別率(判別分析による)
/ӕ/と/ʌ/の識別率 F1およびF2による/ӕ/と/ʌ/の識別率(判別分析による)
予測方法の検討
前提:既存データ(受検者)には評価値が付与され、音読における2つの特徴量が計測されている。
目的:既存データをもとに新たな受験者の2つの特徴量からランクを決定する。
評価値: 2.6
話す速さ: 4.2
リズム: 0.46
001
評価値: 0.9
話す速さ: 2.2
リズム: 0.61
002
評価値: - 0.2
話す速さ: 2.2
リズム: 0.66
003
評価値: 2.5
話す速さ: 3.5
リズム: 0.51
004
評価値: 1.2
話す速さ: 2.5
リズム: 0.62
005
評価値: -0.9
話す速さ: 1.7
リズム: 0.79
006
Rank A
Rank B
Rank C
話す速さ: 1.0
リズム: 0.79
?
採点方法: 近傍法
15
1.5
2
2.5
3
3.5
4
4.5
0.1 0.2 0.3 0.4 0.5 0.6 0.7
Rank C
Rank B
Rank A
Proto C
Proto B
Proto A
0.30.40.50.60.70.80.9
The ratio of weak syllable to the strong one
Syllablepersecond
システムと評定者の一致度
16
評定者と近傍法の組み合わせ kappa
評定者1、2と近傍法 .70
評定者1、3と近傍法 .60
評定者2、3と近傍法 .60
評定者1、2、3 .75
すべて .66
近傍法と3人の評定者とのフレイスのカッパ
システム 評定者1 評定者2 評定者3
システム 1 .81 .69 .58
評定者1 1 .83 .80
評定者2 1 .89
評定者3 1
システムと評定者の相関係数
発話自動採点の問題点(Xi, 2009)
タスク・タイプ、パフォーマンスの評価の視点が自然言語処理、音声言語処理の技術に制限さ
れる。
発話を制限することにより認識率の問題を解決する (Bernstein et al., 2010)。
◦ 読み上げ文
◦ 反対語を言わせる
実際に測定したい自然発話と関連しているであろう発話能力の側面を評価しているのであって、
直接評価をしていない。
自然発話を評価する(Xi, et al., 2008; Cuchiarini et al., 2002)。
この方法の場合、単語認識率が低い(約50%)。
認識率の向上が解決すべき問題のひとつである。
17
新たなシステムの開発動機
テストとして考えた場合、発話能力の採点を1項目で行っていた。
本研究の目的は一問一答で発話能力を自動採点するシステムを作ることである。
◦ 従来のテストと同じテスト理論を用いて項目を分析することができる。
◦ コンピュータ適応型テストにできる。
◦ タスクの困難度を考慮して受検者の能力を推定できる。
◦ 一問一答方式を用いることである程度発話を制限できる。
この方法の問題点
◦ 開発の段階で(従来以上の)大量の採点されたデータが必要。
◦ (従来以上の)大量の項目数が必要。
18
発話の自由度と予測可能性
19
繰り返し
読み上げ
談話完成タスク(DCT)
準備されたスピーチ
自然発話
発話の自由度
発話の予測可能性
高い
高い低い
低い
DCTの例
17-2: When you ask John to help you with your homework frankly, how would you say in the
conversation below
A: ( )
B: Sure
3-1: You walk around the park in the morning. How would you respond in the conversation below.
A: What do you do before you leave home in the morning?
B: ( )
20
作成したDCT
21
Tutorial Englishで使用されている教科書、
Reach OutはCEFRに準拠している。
各Unitで使用される表現が要求されるDCTを
作成
各Unitごとに8~20個のDCTを作成
Tutorial English: 概要
日常的に使用する英語表現を中心に、スピーキング能力を高めることを主眼とする。
◦ 受講者4人に対しチューター1人のグループ・レッスン
◦ 事前テストによる初級から上級までの5つのレベル分け
◦ 個別のフィードバック
◦ ヨーロッパ言語共通参照枠に基づいた独自教科書
すべての課がCEFRに基づいて作成されたCan-do statementに基づいている。
◦ Can-do statementは受講者がそれぞれの課で習得すべきlanguage skillを記述している。
ひとつのコースを修了することによりACPAから認定証が発行される。
早稲田大学オープン教育センター
http://www.w-int.jp/gogaku/course/general.html
22
Tutorial English: 授業内容
準備
◦ ガイドラインに従って授業の準備をする: “Write down six words about you and your life in the circles
below”
授業
◦ Pair work: Look at the words that your partner wrote down in Preparation. Ask questions to find out
more information about the words and your partner.
◦ Language
◦ Practice: Take turns reading and listening activity to the statements below.
A: I woke up late and missed class again.
B: .
◦ Speaking: Take turns asking questions about topics below.
food, clubs, TV, and friends
◦ Wrap-up
23
Nakano, M. (2012). Ed. Reach Out Pre-Intermediate Second Edition. Unit 3, Waseda University International.
Tutorial Englishにおける発話評価
クラス分けテストにはWeTECが使用されている(クラス分けにおいて発話能力を直接評価する
機会はない)。
発話評価は、授業中のパフォーマンス評価として各課ごとに授業中およびTutorial Siteを通して
Tutorから与えられる。
Lesson Review TaskはWeTECと同じ形式で行われる(発話能力の直接評価はない)。
到達度テストにはWeTECが使用されている(クラス分けにおいて発話能力を直接評価する機会
はない)。
語彙や文法、聴解能力に比べ発話能力が直接評価される機会は少ない。
24
発話自動採点システムの開発過程
25
The North Wind
and the Sun
were
disputing…
発話誘出タスクの作成
&評価基準の選択
評定者の訓練 発話データの収集
採点と発話の特徴量の関係を調べる
システムの開発
システムの評価
音響モデルの構築
言語モデルの構築
採点(予測)方法
26
1
0
01
Item x
Item x
音声認識機と分析対象
27
Hidden Markov Model Toolkitを用いた隠れマルコフモデルに基づいた音声認識機を作成
◦ 種モデル: 101人のアジア人英語学習者の読み上げ音声(『北風と太陽』)
◦ 訓練データ: Tutorial EnglishのBasic向けDCT(144項目)に回答した10606発話
◦ それぞれの項目に対して本研究で収集したデータから2-gramの言語モデルを作成
男女混合非母語話者による種モデルの作成。
話者適応なし
分析対象
◦ Tutorial EnglishのBasic向けDCT(144項目)に回答した8284発話。
Tutorial EnglishのBasic level
挨拶、別れ、紹介、感謝などの社会的関係を確立することができる。
簡単な言葉で自分の感情を表現することができるし、感謝も表現できる。
非常に短い社交的なやり取りには対応できるが、自分から会話を進ませられるほどには理解
できてない場合が多い。それでも、相手の方が面倒がらねば、分かるようにしてもらえる。
挨拶をするのに簡単な日常の丁寧な形式を使うことができる。
招待、提案、謝罪をすることができ、またそれらに応じることができる。
好き嫌いを言うことができる。
覚えたいくつかの言い回しや数少ない語句、あるいは定式表現、基本的な構文を使って、日常
の単純な状況の中でなら、限られてはいるが情報を伝えることができる。
Council of Europe (2001)より抜粋
フィルター・モデリング
書き起こしができない(人間が聞き取れない)発話を採点から除外するためのフィルター。
以下の特徴量を用いて対象となる発話がscorableかunsorableかをSVMを用いて判定した
(Higgins, Xi, Zechner, Williamson, 2011)。
◦ 音力(0番目のケプストラム係数): 発話内平均、最大値、最小値、範囲
◦ ピッチ:発話内平均、最大値、最小値、範囲
◦ 音響モデル・スコアの発話内平均
◦ 単語数
◦ 話す速さ(Word per minute)
対象とした発話
◦ 書き起こしができない(人間が聞き取れない)発話ランダムに100発話を抽出
◦ 書き起こしができた発話からランダムに100発話を抽出
正解率は84%
29
項目ごとの認識率
高い項目
Item H D S I
13-17 .95 .01 .03 .02
13-19 .95 .01 .03 .02
9-14 .94 .01 .04 .04
13-18 .93 .03 .03 .01
1-02 .93 .03 .03 .02
低い項目
Item H D S I
6-06 .24 .41 .34 .01
9-16 .26 .44 .29 .06
16-08 .26 .41 .32 .02
11-07 .28 .38 .33 .03
9-05 .32 .27 .41 .05
実装できそうな項目: 13-17、18、19
括弧の中に適切な英語表現を入れて、文ごとに読みあげなさい。
A: I ( 1 ) to experience traditional culture and buy souvenirs. Where ( 2 ) visit?
B: You ( 3 ) visit Nara. Nara is very traditional.
A: That ( 4 ) good. OK, I'll ( 5 ) that.
実装できそうな項目: 9-14と1-02
9-14
次の形容詞のうちから合うものを選んで、言いなさい。
Lemons are ( ).
[sweet, oily, sour, creamy, spicy, salty, bland, bitter, hot]
1-02
Greeting people you know
A: ( ), Li?
B: I'm fine. How about you?
A: Not bad.
認識率の低い項目
6-06
Describe your hometown
9-16
Describe Miso soup to your host family in USA, referring to its ingredient, cooking method, and
taste.
16-08
Describe your own personality and explain why you think so.
11-07
Choose someone you know well and describe his or her appearance and personality.
中間的な項目(認識率50-70%)
17-03
You cannot help her because you're busy now.
A: Could you help me with my homework?
B: ( ).
18-05
あなたは中国語を勉強することが重要であると考えている。
A: I believe that studying English is very important. What do you think?
B: ( ).
今後の課題
認識率の向上
未知語への対応
騒音下での認識精度
特徴量(変数)の選択と処理
◦測定できる発話の特徴量で何を採点(予測)に使用するか
◦採点(予測)に使用する特徴量をどう処理するか
◦弁別力の高いキラー・タスクとは何か
35

More Related Content

What's hot

役所からの公的文書に対する「やさしい日本語」への変換システムへの構築
役所からの公的文書に対する「やさしい日本語」への変換システムへの構築役所からの公的文書に対する「やさしい日本語」への変換システムへの構築
役所からの公的文書に対する「やさしい日本語」への変換システムへの構築
長岡技術科学大学 自然言語処理研究室
 
日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)
日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)
日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)
Atsushi Nakanishi
 
目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える
目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える
目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える
Ken Urano
 
NLP2018
NLP2018NLP2018
NLP2018
Roy Ray
 
日本語の語彙平易化システムの構築
日本語の語彙平易化システムの構築日本語の語彙平易化システムの構築
日本語の語彙平易化システムの構築
Tomoyuki Kajiwara
 
目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善
目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善
目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善
sekizawayuuki
 
All-but-the-Top: Simple and Effective Postprocessing for Word Representations
All-but-the-Top: Simple and Effective Postprocessing for Word RepresentationsAll-but-the-Top: Simple and Effective Postprocessing for Word Representations
All-but-the-Top: Simple and Effective Postprocessing for Word Representations
Makoto Takenaka
 
タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—
タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—
タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—
Ken Urano
 
日本語の語彙的換言知識の質的評価
日本語の語彙的換言知識の質的評価日本語の語彙的換言知識の質的評価
日本語の語彙的換言知識の質的評価
Tomoyuki Kajiwara
 
文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて
文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて
文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて
Yu Tamura
 
[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding
[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding
[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding
Makoto Takenaka
 
Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...
Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...
Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...
Naoaki Okazaki
 
クラークAELC英語学校パンフレット 2016.11
クラークAELC英語学校パンフレット 2016.11クラークAELC英語学校パンフレット 2016.11
クラークAELC英語学校パンフレット 2016.11
WEB制作仲間
 
Nl220 Pitman-Yor Hidden Semi Markov Model
Nl220 Pitman-Yor Hidden Semi Markov ModelNl220 Pitman-Yor Hidden Semi Markov Model
Nl220 Pitman-Yor Hidden Semi Markov Model
Kei Uchiumi
 

What's hot (18)

役所からの公的文書に対する「やさしい日本語」への変換システムへの構築
役所からの公的文書に対する「やさしい日本語」への変換システムへの構築役所からの公的文書に対する「やさしい日本語」への変換システムへの構築
役所からの公的文書に対する「やさしい日本語」への変換システムへの構築
 
Signl213
Signl213 Signl213
Signl213
 
「やさしい日本語」変換システムの試作
「やさしい日本語」変換システムの試作「やさしい日本語」変換システムの試作
「やさしい日本語」変換システムの試作
 
日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)
日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)
日本人大学生の英文エッセイに見られる多義語の誤用分析―空間前置詞の意味ネットワークに注目して―(中西淳)
 
小学生の読解支援に向けた複数の換言知識を併用した語彙平易化と評価
小学生の読解支援に向けた複数の換言知識を併用した語彙平易化と評価小学生の読解支援に向けた複数の換言知識を併用した語彙平易化と評価
小学生の読解支援に向けた複数の換言知識を併用した語彙平易化と評価
 
目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える
目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える
目的に応じたLMSプラットフォームの選択と利用: 何ができるかではなく何をすべきかを考える
 
NLP2018
NLP2018NLP2018
NLP2018
 
日本語の語彙平易化システムの構築
日本語の語彙平易化システムの構築日本語の語彙平易化システムの構築
日本語の語彙平易化システムの構築
 
目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善
目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善
目的言語の低頻度語の高頻度語への言い換えによるニューラル機械翻訳の改善
 
小学生の読解支援に向けた語釈文から語彙的換言を選択する手法
小学生の読解支援に向けた語釈文から語彙的換言を選択する手法小学生の読解支援に向けた語釈文から語彙的換言を選択する手法
小学生の読解支援に向けた語釈文から語彙的換言を選択する手法
 
All-but-the-Top: Simple and Effective Postprocessing for Word Representations
All-but-the-Top: Simple and Effective Postprocessing for Word RepresentationsAll-but-the-Top: Simple and Effective Postprocessing for Word Representations
All-but-the-Top: Simple and Effective Postprocessing for Word Representations
 
タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—
タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—
タスクを中心にした英語教育は日本で実現可能か—大学におけるライティング授業の事例—
 
日本語の語彙的換言知識の質的評価
日本語の語彙的換言知識の質的評価日本語の語彙的換言知識の質的評価
日本語の語彙的換言知識の質的評価
 
文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて
文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて
文法性判断課題における反応時間と主観的測度は正答率を予測するか:文法項目の違いに焦点をあてて
 
[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding
[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding
[NeurIPS2018読み会@PFN] On the Dimensionality of Word Embedding
 
Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...
Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...
Pennington, Socher, and Manning. (2014) GloVe: Global vectors for word repres...
 
クラークAELC英語学校パンフレット 2016.11
クラークAELC英語学校パンフレット 2016.11クラークAELC英語学校パンフレット 2016.11
クラークAELC英語学校パンフレット 2016.11
 
Nl220 Pitman-Yor Hidden Semi Markov Model
Nl220 Pitman-Yor Hidden Semi Markov ModelNl220 Pitman-Yor Hidden Semi Markov Model
Nl220 Pitman-Yor Hidden Semi Markov Model
 

Viewers also liked

20170114 lod challenge
20170114 lod challenge20170114 lod challenge
20170114 lod challenge
zuhitoslide
 
Weighting of acoustic cues shifts to frication duration in identification of ...
Weighting of acoustic cues shifts to frication duration in identification of ...Weighting of acoustic cues shifts to frication duration in identification of ...
Weighting of acoustic cues shifts to frication duration in identification of ...
Keiichi Yasu
 
ナイーブベイズによる言語判定
ナイーブベイズによる言語判定ナイーブベイズによる言語判定
ナイーブベイズによる言語判定
Shuyo Nakatani
 
第15回機械学習勉強会・説明用ノート
第15回機械学習勉強会・説明用ノート第15回機械学習勉強会・説明用ノート
第15回機械学習勉強会・説明用ノート
Etsuji Nakai
 
破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜
破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜
破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜
Keiichi Yasu
 
音声生成の基礎と音声学
音声生成の基礎と音声学音声生成の基礎と音声学
音声生成の基礎と音声学
Akinori Ito
 
言語と知識の深層学習@認知科学会サマースクール
言語と知識の深層学習@認知科学会サマースクール言語と知識の深層学習@認知科学会サマースクール
言語と知識の深層学習@認知科学会サマースクール
Yuya Unno
 

Viewers also liked (7)

20170114 lod challenge
20170114 lod challenge20170114 lod challenge
20170114 lod challenge
 
Weighting of acoustic cues shifts to frication duration in identification of ...
Weighting of acoustic cues shifts to frication duration in identification of ...Weighting of acoustic cues shifts to frication duration in identification of ...
Weighting of acoustic cues shifts to frication duration in identification of ...
 
ナイーブベイズによる言語判定
ナイーブベイズによる言語判定ナイーブベイズによる言語判定
ナイーブベイズによる言語判定
 
第15回機械学習勉強会・説明用ノート
第15回機械学習勉強会・説明用ノート第15回機械学習勉強会・説明用ノート
第15回機械学習勉強会・説明用ノート
 
破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜
破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜
破擦音生成時の解放に伴う破裂が摩擦音・破擦音識別に与える影響〜若年者と高齢者の比較〜
 
音声生成の基礎と音声学
音声生成の基礎と音声学音声生成の基礎と音声学
音声生成の基礎と音声学
 
言語と知識の深層学習@認知科学会サマースクール
言語と知識の深層学習@認知科学会サマースクール言語と知識の深層学習@認知科学会サマースクール
言語と知識の深層学習@認知科学会サマースクール
 

Similar to 英語学習者のための発話自動採点システムの開発.

さくさくテキストマイニング入門セッション
さくさくテキストマイニング入門セッションさくさくテキストマイニング入門セッション
さくさくテキストマイニング入門セッション
antibayesian 俺がS式だ
 
iYES オンラインプログラム
iYES オンラインプログラムiYES オンラインプログラム
iYES オンラインプログラム
iYES Corporation
 
プロソディの捉え方とその指導_06.03.2015
プロソディの捉え方とその指導_06.03.2015プロソディの捉え方とその指導_06.03.2015
プロソディの捉え方とその指導_06.03.2015
Kazuhito Yamato
 
2019LET九州沖縄講演資料
2019LET九州沖縄講演資料2019LET九州沖縄講演資料
2019LET九州沖縄講演資料
Kosuke Sugai
 
英語リスニング研究最前線:実験音声学からのアプローチ
英語リスニング研究最前線:実験音声学からのアプローチ英語リスニング研究最前線:実験音声学からのアプローチ
英語リスニング研究最前線:実験音声学からのアプローチ
Kosuke Sugai
 
機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討
機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討
機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討
早稲田大学
 
第三回さくさくテキストマイニング勉強会 入門セッション
第三回さくさくテキストマイニング勉強会 入門セッション第三回さくさくテキストマイニング勉強会 入門セッション
第三回さくさくテキストマイニング勉強会 入門セッション
antibayesian 俺がS式だ
 
Blended Learning: Transform Daily Class into an Engaging Learning Environment
Blended Learning:  Transform Daily Class into  an Engaging Learning EnvironmentBlended Learning:  Transform Daily Class into  an Engaging Learning Environment
Blended Learning: Transform Daily Class into an Engaging Learning Environment
NECTJ
 
科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency
科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency
科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency
Asahiko Matsuda
 
Sigconf 2019 slide_ota_20191123
Sigconf 2019 slide_ota_20191123Sigconf 2019 slide_ota_20191123
Sigconf 2019 slide_ota_20191123
博三 太田
 
The Handbook of English Grammar for Japanese Learners
The Handbook of English Grammar for Japanese LearnersThe Handbook of English Grammar for Japanese Learners
The Handbook of English Grammar for Japanese Learners
SpeakGlobal, Ltd.
 
2015 yef matsui_presentation公開版
2015 yef matsui_presentation公開版2015 yef matsui_presentation公開版
2015 yef matsui_presentation公開版
Takashi Matsui
 
音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)
音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)
音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)
Kosuke Sugai
 
Hướng dẫn chuẩn bị cho kì thi JLPT 2014
Hướng dẫn chuẩn bị cho kì thi JLPT 2014Hướng dẫn chuẩn bị cho kì thi JLPT 2014
Hướng dẫn chuẩn bị cho kì thi JLPT 2014
Mina Japanese Center
 
聴解の教え方、学び方
聴解の教え方、学び方聴解の教え方、学び方
聴解の教え方、学び方
Yoshifumi Murakami
 
日本語の語彙平易化システムおよび評価セットの構築
日本語の語彙平易化システムおよび評価セットの構築日本語の語彙平易化システムおよび評価セットの構築
日本語の語彙平易化システムおよび評価セットの構築
Tomoyuki Kajiwara
 
日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係
日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係
日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係
Kosuke Sugai
 
Tsubota 20120915
Tsubota 20120915Tsubota 20120915
Tsubota 20120915
nextedujimu
 

Similar to 英語学習者のための発話自動採点システムの開発. (20)

さくさくテキストマイニング入門セッション
さくさくテキストマイニング入門セッションさくさくテキストマイニング入門セッション
さくさくテキストマイニング入門セッション
 
iYES オンラインプログラム
iYES オンラインプログラムiYES オンラインプログラム
iYES オンラインプログラム
 
プロソディの捉え方とその指導_06.03.2015
プロソディの捉え方とその指導_06.03.2015プロソディの捉え方とその指導_06.03.2015
プロソディの捉え方とその指導_06.03.2015
 
2019LET九州沖縄講演資料
2019LET九州沖縄講演資料2019LET九州沖縄講演資料
2019LET九州沖縄講演資料
 
英語リスニング研究最前線:実験音声学からのアプローチ
英語リスニング研究最前線:実験音声学からのアプローチ英語リスニング研究最前線:実験音声学からのアプローチ
英語リスニング研究最前線:実験音声学からのアプローチ
 
機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討
機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討
機能シラバスに基づいた英語教育プログラムにおける発話自動採点システム導入可能性の検討
 
第三回さくさくテキストマイニング勉強会 入門セッション
第三回さくさくテキストマイニング勉強会 入門セッション第三回さくさくテキストマイニング勉強会 入門セッション
第三回さくさくテキストマイニング勉強会 入門セッション
 
Blended Learning: Transform Daily Class into an Engaging Learning Environment
Blended Learning:  Transform Daily Class into  an Engaging Learning EnvironmentBlended Learning:  Transform Daily Class into  an Engaging Learning Environment
Blended Learning: Transform Daily Class into an Engaging Learning Environment
 
科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency
科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency
科学技術英語の考え方と学習ツール Mindset and Learning Tools for Scientific English Proficiency
 
Evaluation
EvaluationEvaluation
Evaluation
 
Sigconf 2019 slide_ota_20191123
Sigconf 2019 slide_ota_20191123Sigconf 2019 slide_ota_20191123
Sigconf 2019 slide_ota_20191123
 
The Handbook of English Grammar for Japanese Learners
The Handbook of English Grammar for Japanese LearnersThe Handbook of English Grammar for Japanese Learners
The Handbook of English Grammar for Japanese Learners
 
2015 yef matsui_presentation公開版
2015 yef matsui_presentation公開版2015 yef matsui_presentation公開版
2015 yef matsui_presentation公開版
 
音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)
音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)
音読のバリエーションに応じた音声編集(関西英語教育学会 2016年度(第21回)研究大会 企画ワークショップ第2室)
 
1 3-2
1 3-21 3-2
1 3-2
 
Hướng dẫn chuẩn bị cho kì thi JLPT 2014
Hướng dẫn chuẩn bị cho kì thi JLPT 2014Hướng dẫn chuẩn bị cho kì thi JLPT 2014
Hướng dẫn chuẩn bị cho kì thi JLPT 2014
 
聴解の教え方、学び方
聴解の教え方、学び方聴解の教え方、学び方
聴解の教え方、学び方
 
日本語の語彙平易化システムおよび評価セットの構築
日本語の語彙平易化システムおよび評価セットの構築日本語の語彙平易化システムおよび評価セットの構築
日本語の語彙平易化システムおよび評価セットの構築
 
日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係
日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係
日本語母語話者の音韻知覚単位について: モーラ数と持続時間長の関係
 
Tsubota 20120915
Tsubota 20120915Tsubota 20120915
Tsubota 20120915
 

Recently uploaded

第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】
satoshi59
 
第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】
satoshi59
 
第1回スクラッチプログラミング大会【ゴールドパートナー賞】
第1回スクラッチプログラミング大会【ゴールドパートナー賞】第1回スクラッチプログラミング大会【ゴールドパートナー賞】
第1回スクラッチプログラミング大会【ゴールドパートナー賞】
satoshi59
 
Tips for wills and inheritance hearings.pdf
Tips for wills and inheritance hearings.pdfTips for wills and inheritance hearings.pdf
Tips for wills and inheritance hearings.pdf
oganekyokoi
 
Services of Type B Continuous Employment Support.pptx
Services of Type B Continuous Employment Support.pptxServices of Type B Continuous Employment Support.pptx
Services of Type B Continuous Employment Support.pptx
oganekyokoi
 
Python 🐍 : プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀
Python 🐍 :  プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀Python 🐍 :  プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀
Python 🐍 : プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀
Miguel Delamontagne
 
第1回スクラッチプログラミング大会【ブロンズパートナー賞】
第1回スクラッチプログラミング大会【ブロンズパートナー賞】第1回スクラッチプログラミング大会【ブロンズパートナー賞】
第1回スクラッチプログラミング大会【ブロンズパートナー賞】
satoshi59
 
探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)
探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)
探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)
Rikie Ishii
 

Recently uploaded (8)

第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】
 
第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】第1回スクラッチプログラミング大会【シルバーパートナー賞】
第1回スクラッチプログラミング大会【シルバーパートナー賞】
 
第1回スクラッチプログラミング大会【ゴールドパートナー賞】
第1回スクラッチプログラミング大会【ゴールドパートナー賞】第1回スクラッチプログラミング大会【ゴールドパートナー賞】
第1回スクラッチプログラミング大会【ゴールドパートナー賞】
 
Tips for wills and inheritance hearings.pdf
Tips for wills and inheritance hearings.pdfTips for wills and inheritance hearings.pdf
Tips for wills and inheritance hearings.pdf
 
Services of Type B Continuous Employment Support.pptx
Services of Type B Continuous Employment Support.pptxServices of Type B Continuous Employment Support.pptx
Services of Type B Continuous Employment Support.pptx
 
Python 🐍 : プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀
Python 🐍 :  プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀Python 🐍 :  プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀
Python 🐍 : プログラミング教育 📚 Python 🐍 革新的で実践的な方法 🚀
 
第1回スクラッチプログラミング大会【ブロンズパートナー賞】
第1回スクラッチプログラミング大会【ブロンズパートナー賞】第1回スクラッチプログラミング大会【ブロンズパートナー賞】
第1回スクラッチプログラミング大会【ブロンズパートナー賞】
 
探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)
探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)
探求のテーマを作り出す「アイデア創出の授業」(高校の探求の時間の特別講義としてお話し&ワークショップをした内容です)
 

英語学習者のための発話自動採点システムの開発.