#author("2023-04-20T23:45:43+00:00","default:ogiwiki","ogiwiki") [[FrontPage]] *日本語学講義Ⅱ(コーパス日本語学入門) [#f20f4b84] -前期金曜4限:14:40-16:10 -Mail: ogiso@ogiso.net --[[WebClassの授業ページ>https://webclass.gakushuin.ac.jp/webclass/course.php/1U3302001032022/]] -[[中納言>https://chunagon.ninjal.ac.jp]] ------ -&color(red){教室が''西2-505''に変更になりました。}; **04/21 第2回 日本語コーパスの紹介(1) [#h1fad4a2] 『現代日本語書き言葉均衡コーパス』『日本語日常会話コーパス』 ***「中納言」授業アカウントの配布 [#k4971e1e] -必要な人に一人ずつ配布します(授業期間+αのみ利用可能) -個人用アカウントを取得した人はそちらを利用して下さい ***コーパスを使ってみる [#s1b41ed3] -細かい話は抜きで「中納言」でコーパスを使ってみよう --『現代日本語書き言葉均衡コーパス』(BCCWJ)コアのみを対象に設定 --文字列検索 --短単位検索 ***コーパスとは [#t54768fa] (以下スライド参照) :狭義のコーパス|言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。 --現代日本語書き言葉均衡コーパス(BCCWJ) / 日本語歴史コーパス(CHJ) :広義のコーパス|コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究に利用可能。 -さまざまなテキストアーカイブ(新潮文庫の百冊 / 青空文庫 / 国会会議録) --参考:[[「ひまわり」パッケージ>https://www2.ninjal.ac.jp/lrc/index.php?%C1%B4%CA%B8%B8%A1%BA%F7%A5%B7%A5%B9%A5%C6%A5%E0%A1%D8%A4%D2%A4%DE%A4%EF%A4%EA%A1%D9]] -Web上のデータ --検索サイトの利用・WAC(Web as Corpus) -この授業で主に扱うのは狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」「日本語日常会話コーパス(SHC)」「日本語歴史コーパス(CHJ)」「昭和・平成書き言葉コーパス(SHC)」 ***コーパスへの要請 [#c3c11312] --大規模であること --各種のテキストが含まれていて、ジャンルなどのバランスがとれていること --著作権の問題がないこと --言語研究に利用できる情報がついていること ***「現代日本語書き言葉均衡コーパス」(BCCWJ)の構成とサンプリング [#s89fe505] -https://clrd.ninjal.ac.jp/bccwj/ -均衡コーパス(Balanced corpus) --「バランスがとれている」「代表性」とは? --コーパスの母集団の設定とサンプリング --BCCWJのサブコーパス --可変長と固定長 ------ -著作権をめぐる問題 ***参考リンク [#o1a9da5c] -英語のコーパス リファレンス --[[ブラウンコーパス マニュアル>http://khnt.aksis.uib.no/icame/manuals/brown/]] http://khnt.aksis.uib.no/icame/manuals/brown/ --[[BNCリファレンスガイド>http://www.natcorp.ox.ac.uk/docs/URG/]] http://www.natcorp.ox.ac.uk/docs/URG/ -現代日本語書き言葉均衡コーパス(BCCWJ) --[[現代日本語書き言葉均衡コーパス:概要>https://clrd.ninjal.ac.jp/bccwj/index.html]] --BCCWJの基本設計:https://clrd.ninjal.ac.jp/bccwj/basic-design.html --サンプリング:https://clrd.ninjal.ac.jp/bccwj/sampling.html --XMLによる電子化:https://clrd.ninjal.ac.jp/bccwj/XML.html ------ ***「日本語日常会話コーパス」(CEJC)の構成 [#x9f78d1c] -https://www2.ninjal.ac.jp/conversation/cejc.html -『日本語日常会話コーパス』—設計・構築・特徴—(報告書) --https://www2.ninjal.ac.jp/conversation/report/report06.pdf ***利用する側から見たコーパスの設計 [#p142476c] -BCCWJでもCHJでも、どのように設計されているかを知らないと大きな誤りを犯す可能性がある --サブコーパスのサイズを無視した比較 --バランスのとれていない項目間の単純比較(BCCWJの年代、CHJの時代・ジャンル等) **04/14 第1回 イントロダクション [#z7ffa4ea] -[[自己紹介]] --大学共同利用機関法人人間文化研究機構 国立国語研究所 https://www.ninjal.ac.jp/ ---[[国立国語研究所言語資源開発センター>https://clrd.ninjal.ac.jp/]] https://clrd.ninjal.ac.jp/ ***授業内容等の確認 [#e55ee18f] -[[シラバス>https://g-port.univ.gakushuin.ac.jp/campusweb_gk/slbssbdr.do?value(risyunen)=2023&value(semekikn)=1&value(kougicd)=U330200103&value(crclumcd)=2442017000]]の確認 --[[シラバス(G-Port)>https://g-port.univ.gakushuin.ac.jp/campusweb_gk/slbssbdr.do?value(risyunen)=2023&value(semekikn)=1&value(kougicd)=U330200103&value(crclumcd)=2442017000]] --この授業の目的 --授業の進め方 --評価方法 -受講者アンケート --関心のある分野について --PC等のスキルについて ***「中納言」アカウントについて [#t6709ede] -「授業アカウント」について -個人用の「中納言」オンライン利用申込み --https://chunagon.ninjal.ac.jp/useraccount/register ***授業で利用する主なソフトウェア・Webアプリケーション(予定) [#i06478d2] |ソフトウェアの種類・名前|利用目的|h |[[コーパス検索アプリケーション''「中納言」''>https://chunagon.ninjal.ac.jp/]]|コーパスの検索| |表計算ソフト''Excel''|ピボットテーブルによる分析・グラフ作成| |ワープロ''Word''|「スタイル」を利用したレポート作成| |[[Web茶まめ>https://chamame.ninjal.ac.jp/]]|形態素解析| |[[テキストエディタ ''VisualStudio Code ''>https://code.visualstudio.com/]]|テキストデータの作成・整備、正規表現を使った検索など| ***授業内容デモ [#kc4ae1c5] -コーパスの利用 --[[「現代日本語書き言葉均衡コーパス(BCCWJ)」>https://clrd.ninjal.ac.jp/bccwj/]] --[[「日本語日常会話」>https://www2.ninjal.ac.jp/conversation/cejc.html]] --[[「日本語歴史コーパス(CHJ)」>https://clrd.ninjal.ac.jp/chj/]] ---[[中納言>https://chunagon.ninjal.ac.jp]] -Excelによる集計(ピボットテーブル) -形態素解析 --[[Web茶まめ>https://chamame.ninjal.ac.jp]] -テキストエディタと正規表現 ***(参考動画) [#v4246970] -(参考)国語研オープンハウス2021 https://www2.ninjal.ac.jp/openhouse/2021/ --動画:『日本語歴史コーパス』のかんたんな使い方─犬派?猫派?編─ https://youtu.be/672LMkV6GxU -言語学レクチャーシリーズ https://www.ninjal.ac.jp/education/videolecture/ --動画:コーパスを使って日本語の歴史を探る https://www.youtube.com/watch?v=dEi0kKdyrWk&list=PLZfZgVvFbh1a3zOK9Z2OJk6mA0olmcw3u