成蹊2024

日本語学講義D

11/29 コーパスの語数表と調整頻度

「中納言」検索課題

BCCWJ利用の落とし穴(設計を踏まえたコーパス利用の必要性)

調整頻度(pmw)

コーパスの語数表

(Excel基礎知識)セルの相対参照と絶対参照

集計の前処理

出現サンプル数の調査(重複の削除)

用例数ではなく、用例が一つでも出現したサンプルの数を調べたい場合

ランダムサンプリング調査

11/22 休み 欅祭

11/15 第8回 Excelによる検索結果の集計(2)

Excelの基礎

【重要】ピボットテーブルの使い方

複数の検索結果の結合

一度にピボットテーブルで集計できるように一つの表にまとめる

ショートカットキーを活用すると便利

  1. 表をコピー
    • Ctrl+Home*4(表の左上へ移動), ↓(列名は選択しないようにするため1行下へ),Shift+Ctrl+End, Ctrl+C(コピー)
  2. コピーした表を既存の表の下に貼り付け
    • Ctrl+↓(表の一番下の行に移動), ↓(1行下へ), Ctrl+V(貼り付け)

または、「検索条件式ごとに出力ファイルを分割する」を外して検索条件式で一度にダウンロード(ZIPファイルの中のcsvファイルを利用)

たくさんまとめて調べたい場合には特に便利

キー: 語彙素="ワイン";
キー: 語彙素="ブランデー";
キー: 語彙素="ウイスキー";
キー: 語彙素="葡萄" AND 後方共起: 語彙素="酒" ON 1 WORDS FROM キー;
キー: 語彙素="日本" AND 後方共起: 語彙素="酒" ON 1 WORDS FROM キー;

11/8 第7回 「中納言」の使い方(3) / Excelによる検索結果の集計(1)

復習

位置情報と用例へのパーマリンク

検索条件式の利用

キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%")
 AND 後方共起: 語彙素="言葉" ON 1 WORDS FROM キー
 WITH OPTIONS tglKugiri="|" AND tglBunKugiri="#" AND limitToSelfSentence="1"
AND tglFixVariable="2" AND tglWords="20" AND unit="1" AND encoding="UTF-16LE" AND endOfLine="CRLF"

↓これだけでもいい(WITH OPTIONS 以下は式で指定がない場合、検索画面での設定に従う)

キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%")
 AND 後方共起: 語彙素="言葉" ON 1 WORDS FROM キー

OR検索

キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%")
 AND 後方共起: (語彙素="言葉" OR 語彙素="言語") ON 1 WORDS FROM キー

周辺語検索

キー: 品詞 LIKE "名詞%"
 AND 共起: 語彙素="美しい" BETWEEN -3 AND 3 WORDS FROM キー
 IN subcorpusName="平安-仮名文学" AND core="true"

「中納言」検索結果のダウンロードとExcelでの利用

  1. ダウンロード
  2. Excelでインポート

11/1 第6回 「中納言」の使い方(2)

10/25 第5回 コーパスの形態論情報(2)/「中納言」の使い方(1)

コーパスへの形態論情報の付与

形態素解析を試してみる

形態素解析の仕組み

「中納言」の使い方

10/18 休み(四大学運動競技大会)

10/11 第4回 コーパスの形態論情報

利用する側から見たコーパスの設計

コーパスの形態論情報

品詞体系

参考資料

コーパスへの形態論情報の付与

形態素解析を試してみる

形態素解析の仕組み

「中納言」の使い方

10/4 第3回 日本語コーパスの紹介(2)『日本語日常会話コーパス』『日本語歴史コーパス』『昭和・平成書き言葉コーパス』

(前回補足)参考リンク

「日本語日常会話コーパス」(CEJC)の設計・構成

「日本語歴史コーパス」(CHJ)の構成

近世以前
残されている資料が少なく、できるだけ(可能なら全部)コーパスに入れたい
近世(後期)以降
偏りはあるものの選べるだけの資料があるが、それでもなるべく全文でいれたい(作品など資料単位で調査したい)

近代語コーパスの場合

「昭和・平成書き言葉コーパス」(SHC)の設計・構成

9/27 第2回 コーパスとは 日本語コーパスの紹介(1)『現代日本語書き言葉均衡コーパス』

「中納言」授業アカウント配布

コーパスを使ってみる

細かい話は抜きで「中納言」でコーパスを使ってみよう

コーパスとは

狭義のコーパス
言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。
  • 現代日本語書き言葉均衡コーパス(BCCWJ) / 日本語歴史コーパス(CHJ)
広義のコーパス
コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究に利用可能。

コーパスへの要請

「現代日本語書き言葉均衡コーパス」(BCCWJ)の構成とサンプリング

09/20 第1回 イントロダクション

授業内容等の確認

授業内容デモ

「中納言」アカウントについて

授業で利用する主なソフトウェア・Webアプリケーション(予定)

ソフトウェアの種類・名前利用目的
コーパス検索アプリケーション「中納言」コーパスの検索
表計算ソフトExcelピボットテーブルによる分析・グラフ作成
ワープロWord「スタイル」を利用したレポート作成
Web茶まめ形態素解析

*1 Macの場合はCommand
*2 EndキーはノートPCではしばしばFn+→
*3 EndがFn+→の場合は、Shift+Ctrl+Fn+→を同時押し
*4 HomeキーはノートPCではしばしばFn+←
*5 サンプル先頭からの文字数を10倍したもの

トップ   編集 差分 履歴 添付 複製 名前変更 リロード   新規 一覧 検索 最終更新   ヘルプ   最終更新のRSS
Last-modified: 2024-11-29 (金) 08:40:03