[[東京外大2017]]

*Japan Studies 1:コーパス日本語学入門

-春学期・木曜4限
-ogiso@ogiso.net ←@を@に直してください

----

-[[コーパス検索アプリケーション「中納言」 https://chunagon.ninjal.ac.jp/>https://chunagon.ninjal.ac.jp/]]

**2017/05/25

***質問対応
-自分の研究テーマのための検索方法の相談



***(復習)形態論情報を使った検索
-資料「中納言の使い方」参照


***検索条件式の利用

 キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%")
  AND 後方共起: 語彙素="言葉" ON 1 WORDS FROM キー
  WITH OPTIONS tglKugiri="|" AND tglBunKugiri="#" AND limitToSelfSentence="1"
 AND tglFixVariable="2" AND tglWords="20" AND unit="1" AND encoding="UTF-16LE" AND endOfLine="CRLF"

***「中納言」検索結果のダウンロードとExcelでの利用
+ダウンロード
+アーカイブの展開(解凍)
+Excelでインポート

***Excelの基礎
-並べ替え
--反転前文脈の使い方
-フィルタ
--テキストフィルタ

***【重要】ピボットテーブルの使い方
-ピボットテーブル
-ピボットグラフ


***複数の検索結果の結合
-例:蒲公英・向日葵・菫

ショートカットキーを活用すると便利
-Ctrl+End ファイルの末尾/表のいちばん右下に移動
-Shift+Ctrl+End 〃範囲を選択

+表をコピー
--Ctrl+Home, ↓(列名はコピーしないようにする),Shift+Ctrl+End, Ctrl+C
+コピーした表を既存の表の下に貼り付け
--Ctrl+End, Home, ↓, Ctrl+V, Ctrl+Home

***集計用の列を自分で用意する
-例:表記(ひらがな・かたかな・漢字)別集計
-例:用法分類


**&color(red){2017/05/18 ''休講''};
-出張のため休講とします。

**2017/05/11

***前回の単位分割課題
-[[短単位・長単位分割の解答>http://www.ogiso.net/wiki/index.php?plugin=attach&pcmd=open&file=LSUW_sample_OW1X_00003.pdf&refer=%C5%EC%B5%FE%B3%B0%C2%E72017%2FJapanStudies1]]

***形態論情報を使ったコーパスの検索
-配布資料「中納言の使い方」参照
--この資料は次回以降も使いますので持ってきてください。


**2017/04/27

***コーパスの形態論情報:短単位と長単位

-配布資料参照

***品詞体系と見出し語の階層
-BCCWJ,CHJはUniDicの品詞体系にもとづく

-[[授業資料/UniDicの品詞体系]]
-[[授業資料/UniDicの見出し語階層]]

***形態論情報を使った検索
-例


***(参考)Web茶まめ
http://chamame.ninjal.ac.jp/


**2017/04/20

***「中納言」オンライン利用申込み
-https://chunagon.ninjal.ac.jp/useraccount/register


***コーパスの設計とサンプリング

//-''([[スライド>http://www.ogiso.net/wiki/index.php?plugin=attach&pcmd=open&file=2017_%C2%E83%B2%F3%A5%B3%A1%BC%A5%D1%A5%B9%A4%CE%C0%DF%B7%D7%A4%C8%A5%B5%A5%F3%A5%D7%A5%EA%A5%F3%A5%B0.pptx&refer=%C5%EC%B5%FE%B3%B0%C2%E72017%2FJapanStudies1]]参照)'' 第2回コーパスの設計とサンプリング

-''(スライド参照)'' 第2回コーパスの設計とサンプリング

-均衡コーパス(Balanced corpus)
--「バランスがとれている」「代表性」とは?
--コーパスの母集団の設定とサンプリング
--BCCWJのサブコーパス
--可変長と固定長
-著作権をめぐる問題


***参考リンク
-英語のコーパス リファレンス
--[[ブラウンコーパス マニュアル>http://www.hit.uib.no/icame/brown/bcm.html]]
http://www.hit.uib.no/icame/brown/bcm.html
--[[BNCリファレンスガイド>http://www.natcorp.ox.ac.uk/docs/URG/]] http://www.natcorp.ox.ac.uk/docs/URG/
-現代日本語書き言葉均衡コーパス(BCCWJ)
--[[現代日本語書き言葉均衡コーパス:概要>http://pj.ninjal.ac.jp/corpus_center/bccwj/index.html]]
--[[現代日本語書き言葉均衡コーパス:サンプリング>http://pj.ninjal.ac.jp/corpus_center/bccwj/sampling.html]]


**2017/04/13

***「コーパス」について [#k44345b6]

:狭義のコーパス|言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。
--現代日本語書き言葉均衡コーパス(BCCWJ) / 日本語歴史コーパス(CHJ)

:広義のコーパス|コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究にも利用可能。
--さまざまなテキストアーカイブ(新潮文庫の百冊 / 青空文庫 / 国会会議録)
--Web上のデータ
---検索サイトの利用
---WAC(Web as Corpus)

-この授業で扱うのは主に狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」が中心
-日本語コーパス以前のデータとBCCWJの違いは
--cf. スライド

***紙の資料からコーパスまで

+(紙の)本文
+(紙の)総索引(コンコーダンス)
+電子テキスト
+構造化テキスト
+形態論情報付きコーパス

***現代日本語書き言葉均衡コーパス(BCCWJ)とは
-BCCWJについて、まず最小限のことを説明します。

-[[BCCWJ少納言>http://shonagon.ninjal.ac.jp]]
--登録不要
--文字列検索のみ
--500例まで表示
-[[BCCWJ中納言>http://chunagon.ninjal.ac.jp]]
--要登録
--形態論情報を使った検索
--全件(一度に最大10万例まで)ダウンロード可

***「現代日本語書き言葉均衡コーパス(BCCWJ)」
-BCCWJ[[少納言>http://shonagon.ninjal.ac.jp]]


***「中納言」オンライン利用申込み
-https://chunagon.ninjal.ac.jp/useraccount/register


**2017/04/06
***イントロダクション/日本語コーパスの紹介

-[[自己紹介]]
--大学共同利用機関法人人間文化研究機構 国立国語研究所 http://www.ninjal.ac.jp/
-コーパスとは
--[[国立国語研究所コーパス開発センター>http://pj.ninjal.ac.jp/corpus_center/]]

-デモ
--「現代日本語書き言葉均衡コーパス(BCCWJ)」
---BCCWJ[[少納言>http://shonagon.ninjal.ac.jp]]
---BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]]
--[[Web茶まめ>http://chamame.ninjal.ac.jp]]
--Excelによる集計(ピボットテーブル)

-シラバス確認
--この授業の目的
--授業の進め方
--評価方法


トップ   新規 一覧 検索 最終更新   ヘルプ   最終更新のRSS