[[成蹊2014]] -後期・金曜2限 //-7号館3階 301パソコン教室 -ogiso@ogiso.net ←@を@に直してください -BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]] **2014/11/06 ***「中納言」の利用:形態論情報を使った検索 ***復習 +「中納言」による検索 +Excelでインポート +ピボットテーブルで集計 ***Excelの基礎 -並べ替え --反転前文脈の使い方 -フィルタ --テキストフィルタ ***検索の例 -男と女のレジスタ分布 [[データ kwic-MaleFemale.zip>https://www.dropbox.com/s/x3p6kimzj36enxn/kwic-MaleFemale.zip]] --男性と女性 --男と女と形容詞 --短単位で検索(unit="1") キー: (語彙素 LIKE "[男女]" AND (語彙素読み="オトコ" OR 語彙素読み = "オンナ")) WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0" AND endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2" キー: (語彙素="男性" OR 語彙素 = "女性") WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0" AND endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2" --以下は長単位で検索(unit="2") キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%") AND 後方共起: (語彙素 = "男性" OR 語彙素 = "女性") ON 1 WORDS FROM キー WITH OPTIONS unit="2" AND tglWords="10" AND limitToSelfSentence="0" AND endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2" キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%") AND 後方共起: (語彙素 LIKE "[男女]" AND (語彙素読み="オトコ" OR 語彙素読み = "オンナ")) ON 1 WORDS FROM キー WITH OPTIONS unit="2" AND tglWords="10" AND limitToSelfSentence="0" AND endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2" -「検索課題」配付資料参照 ***補足 -[[ジップの法則>http://ja.wikipedia.org/wiki/%E3%82%B8%E3%83%83%E3%83%97%E3%81%AE%E6%B3%95%E5%89%87]] **2014/10/31 ***「中納言」の利用:形態論情報を使った検索 -配布資料「『中納言』概説・実習」つづき --前回の復習 --2.8~ ***検索条件式 キー: 語彙素 = "奇麗" IN core="true" WITH OPTIONS unit="1" AND tglWords="20" AND tglKugiri="|" AND tglFixVariable="2" ***検索結果をExcelで利用する -前回資料(4.)参照 ***「中納言」検索結果のダウンロードとExcelでの利用 +ダウンロード +Excelでインポート ***【重要】ピボットテーブルの使い方 -ピボットテーブル -ピボットグラフ **2014/10/24 ***「中納言」利用申込み -契約書を返却します。 ***「中納言」の利用:形態論情報を使った検索 -配布資料「『中納言』概説・実習」 --1.3つの検索方法 ~ 2.7検索にあたっての注意点 まで --配布資料は次回以降も使いますので必ず持ってきてください。 **2014/10/10 ***「中納言」利用申込み -先週申し込んだ人にはアカウントを発行しました。メールを確認してログインして下さい。 **コーパスの形態論情報 ***短単位と長単位 -''(配付資料)''参照 -''(スライド)''参照 ***品詞体系 -BCCWJはUniDicの品詞体系にもとづく --形態論情報の例 ----- #include(授業資料/UniDicの品詞体系,notitle) ----- #include(授業資料/UniDicの見出し語階層,notitle) ----- ***形態論情報を活かした検索 -「中納言」での指定方法 //-資料「『中納言』概説・実習」参照 **2014/10/03 ***「中納言」利用申込み -申込用紙を回収します。 -提出した人には仮アカウントを発給しました。メールを確認して本登録を行ってください。 ***日本語コーパスの紹介(2) コーパスの設計とサンプリング -''(スライド参照)'' 第2回コーパスの設計とサンプリング -均衡コーパス(Balanced corpus) --「バランスがとれている」とは? --コーパスの母集団の設定とサンプリング --BCCWJのサブコーパス --可変長と固定長 -著作権をめぐる問題 ***参考リンク -英語のコーパス リファレンス --[[ブラウンコーパス マニュアル>http://khnt.aksis.uib.no/icame/manuals/brown/]] http://khnt.aksis.uib.no/icame/manuals/brown/ --[[BNCリファレンスガイド>http://www.natcorp.ox.ac.uk/docs/URG/]] http://www.natcorp.ox.ac.uk/docs/URG/ -現代日本語書き言葉均衡コーパス(BCCWJ) --[[現代日本語書き言葉均衡コーパス:概要>http://www.ninjal.ac.jp/corpus_center/bccwj/index.html]] --[[現代日本語書き言葉均衡コーパス:サンプリング>http://www.ninjal.ac.jp/corpus_center/bccwj/sampling.html]] **2014/9/26 ***「中納言」利用申込み -申込用紙を配布します。''押印して次回、必ず持ってきてください。'' ***現代日本語書き言葉均衡コーパス(BCCWJ)とは -BCCWJについて、まず最小限のことを説明します。 -[[BCCWJ少納言>http://shonagon.ninjal.ac.jp]] --登録不要 --文字列検索のみ --500例まで表示 -[[BCCWJ中納言>http://chunagon.ninjal.ac.jp]] --要登録 --形態論情報を使った検索 --全件(一度に最大10万例まで)ダウンロード可 ***日本語コーパスの紹介(1)コーパスとはどんなものか :狭義のコーパス|言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。 :広義のコーパス|コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究にも利用可能。 -この授業で扱うのは狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」 -日本語コーパス以前のデータとBCCWJの違いは -''(スライド参照)'' **2014/09/19 ***イントロダクション -[[自己紹介]] --大学共同利用機関法人人間文化研究機構 国立国語研究所 http://www.ninjal.ac.jp/ -コーパスとは ---[[国立国語研究所コーパス開発センター>http://www.ninjal.ac.jp/corpus_center/]] ---[[形態素解析辞書UniDic>http://sourceforge.jp/projects/unidic/]] -デモ --BCCWJ[[少納言>http://shonagon.ninjal.ac.jp]] --BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]] -シラバス確認 --[[シラバス>http://www.ogiso.net/wiki/index.php?plugin=attach&pcmd=open&file=2014%B8%E5%B4%FC_SEIKEI%20PORTAL%282%29.pdf&refer=%C0%AE%EC%FE2014%2F%C6%FC%CB%DC%B8%EC%B3%D8%B9%D6%B5%C1F]] --この授業の目的 --授業の進め方 --評価方法 --アンケート