[[成蹊2013]] -日本語・日本文学を学んでいくうえでぜひ身につけておきたいコンピュータに関する知識・技術を学びます。 -後期・金曜4限 //-7号館3階 301パソコン教室 -ogiso@ogiso.net ←@を@に直してください -BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]] -[[Web Collaborartion System>https://web.cc.seikei.ac.jp/]] //**注意 //-残り授業日 //--12/13, 12/20(休講), 2014/1/10,1/17 -''レポート締切:1月27日'' --メールでogiso@ogiso.net ←@を@に直してください に送ってください。 **2014/1/17 ***レポート作成と質問 ***レポート作成と質問(最終回) ***Wordを使ってレポートを書く -図表の取り扱い --「形式を選択して貼り付け」 --図表番号、キャプション -文書の構造化 --章・節番号 --「スタイル」「ナビゲーション ウィンドウ」(見出しマップ)の活用 -節番号、図表番号と相互参照 -目次、図表目次 **2014/1/10 ***レポート作成のためのコーパス検索・調査(2) -考えてきたテーマについて、実際に用例を検索してレポート作成の準備を進めます。 -積極的に質問して下さい。 **2013/12/20 -2013年12月20日(金曜日)の授業は休講です。 -レポートテーマについて検討を進めておいてください。 **2013/12/13 ***補足 -複数の検索結果表をまとめる --2回分の検索結果を一つのピボットテーブルで集計するには -自分で情報を追加して集計に使う --自分で追加した列をピボットテーブルで集計するには --たんぽぽ・ひまわり・すみれ ***レポート作成のためのコーパス検索・調査(1) -考えてきたテーマについて、実際に用例を検索してレポート作成の準備を進めます。 // //**2013/12/07 //-''2013年12月7日(土曜日=金曜授業日)の授業は休講です'' **2013/12/06 ***BCCWJ利用の落とし穴 -BCCWJはあくまでも「現代語」のためのコーパスなので通時的な調査には向かない --レジスターによって母集団の年が違っている ---レジスターの偏りを年代の偏りと勘違いしないこと --30年あるのは白書・ベストセラー・国会会議録など一部のものだけ -もともとテキスト量の多いレジスターにたくさん用例があるからといって「そのレジスターでよく使われる」とはいえない→調整頻度の計算 --cf.人口あたりの事故件数,1平方キロあたりの…etc. ***調整頻度の計算 -粗頻度を総語数で割る --レジスターごとの語数データ:中納言ページの「語数について」からExcelでダウンロードできる ---語数ファイルをピボットテーブルで集計して分母に -調整頻度には100万語あたりの頻度(pmw)が比較的よく使われる --粗頻度/総語数*1000000 ---数字が小さくなりすぎないようにするため ***ランダムサンプリング調査(Excelでの集計・補足) --大量に用例があり、調査内容からすべて対象にできない場合 --ランダムに並べ替え→先頭n例を調査対象に ---ランダムな数字の列: =RAND() ---ランダムな数字の列をコピーして「値として貼り付ける」と数字が固定される ***NINJAL LWP for BCCWJの紹介 -http://nlb.ninjal.ac.jp/ -ワードプロファイラー -語の振る舞いの概略を見るのに手軽で便利 -注意点 --UniDicの見出し語体系でない(=本来のBCCWJではない) --自動係り受け解析結果は形態素解析以上に誤りが多い **2013/11/29 ***検索の例つづき -「検索課題」配付資料参照 ***形態素解析とUniDic ---- #include(授業資料/形態素解析,notitle) ---- --形態素解析器//[[MeCab>http://mecab.googlecode.com/svn/trunk/mecab/doc/index.html]](Windows用)最新版 [[Download>http://code.google.com/p/mecab/downloads/detail?name=mecab-0.994.exe]] ***授業用UniDic+MeCabパッケージのダウンロード ***茶まめで形態素解析・Excelで集計 +茶まめで解析してみる(解析器はMeCab+解析辞書はUniDic) +Excelに出力する +ピボットテーブルで集計する -テキストのジャンルと語種,品詞の割合をグラフ化してみる --ブログのテキストと新聞記事のテキストの解析結果を比較 ----- **レポートテーマについて -次回までにレポートテーマを考えてくること(全員に聞きます) -普段から見聞きする言葉に気をつけるとともに、図書館も活用すること -ひとつの言葉から、同種の別の語や違う観点からの観察などへと膨らませていく ***表記 --「雀」「すずめ」「スズメ」動植物名の表記・・・レジスター別用例数、文体差 --「卵」「玉子」「たまご」「タマゴ」・・・意味の違い?文体差? --「斡旋」「あっ旋」「あっせん」、「石鹸」「石けん」「せっけん」・・・常用漢字表外字を含む漢語の表記の揺れ ***類義語・対義語 --「奇麗」と「美しい」・・・連体修飾する名詞の違い(→意味の違い) --「うるさい」「やかましい」「さわがしい」「かしましい」「かまびすしい」類義語・・・共起語、文体差 --「男性」と「女性」(「男」と「女」)・・・語彙の非対称性、社会言語学的分析 ***語形、語法 --「好ましい」「好もしい」・・・語形の揺れと文体差 --「煙草を吸う」と「煙草をのむ」・・・用例数の割合、「煙草をのむ」の出現条件 ***新語・意味変化 --「断トツ」「定番」「夜ご飯」・・・新語の広がり --「役不足」「確信犯」・・・”誤用”と”正用” **2013/11/22 ***復習 +「中納言」による検索 +Excelでインポート +ピボットテーブルで集計 ***Excelの基礎 -並べ替え --反転前文脈の使い方 -フィルタ --テキストフィルタ ***検索の例 -「検索課題」配付資料参照 ***補足 -連体修飾(である可能性が高いもの)の検索と集計 -ジップの法則 **2013/11/08 -資料「『中納言』概説・実習」つづき ***検索条件式 キー: 語彙素 = "奇麗" IN core="true" WITH OPTIONS unit="1" AND tglWords="20" AND tglKugiri="|" AND tglFixVariable="2" ***検索結果をExcelで利用する -前回資料(4.)参照 ***「中納言」検索結果のダウンロードとExcelでの利用 +ダウンロード +アーカイブの展開(解凍) +Excelでインポート ***【重要】ピボットテーブルの使い方 -ピボットテーブル -ピボットグラフ **2013/11/01 ***コーパスの形態論情報 -[[UniDic>http://download.unidic.org]]の品詞体系 -UniDicマニュアル ***学校文法との違い --品詞:名詞-普通名詞-一般 (大分類>中分類>小分類) --活用型:下一段-ア行 (大分類>行分類(>小分類)) --可能性に基づく品詞 ---名詞-普通名詞-サ変可能 --形状詞 (=形容動詞語幹) --助動詞「う」が付いた形を意志推量形として扱う --漢語サ変動詞を名詞(語幹)と動詞(「する」)に分割 ***見出し語の階層構造 -語彙素(語彙素読み) --語形 ---書字形 -矢張り(ヤハリ) 32887 --ヤハリ 19876 ---やはり 19781 ---ヤハリ 0 ---矢張り 93 --ヤッパリ ---やっぱり ---ヤッパリ --ヤッパシ ---やっぱし ---ヤッパシ --ヤッパ ---やっぱ ---ヤッパ ***形態論情報を活かした検索 -資料「『中納言』概説・実習」(2.)参照 **2013/10/25 -「中納言」契約書を1部返却します。 ***日本語コーパスの紹介(2) コーパスの設計とサンプリング -(スライド参照) --「バランスがとれている」とは? --コーパスの母集団の設定とサンプリング --BCCWJのサブコーパス --可変長と固定長 -著作権をめぐる問題 -参考リンク --[[ブラウンコーパス マニュアル>http://khnt.aksis.uib.no/icame/manuals/brown/]] http://khnt.aksis.uib.no/icame/manuals/brown/ --[[BNCリファレンスガイド>http://www.natcorp.ox.ac.uk/docs/URG/]] http://www.natcorp.ox.ac.uk/docs/URG/ --[[現代日本語書き言葉均衡コーパスの基本方針>http://www.ninjal.ac.jp/kotonoha/ex_2.html]] --[[現代日本語書き言葉均衡コーパスのためのサンプル抽出>http://www.ninjal.ac.jp/kotonoha/ex_3.html]] **2013/10/11 ***日本語コーパスの紹介(1)コーパスとはどんなものか -''(スライド参照)'' :狭義のコーパス|言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。 :広義のコーパス|コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究にも利用可能。 -この授業で扱うのは狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」 --もうひとつの授業「日本語日本文学のためのコンピュータ」で扱っているデータは後者 -日本語コーパス以前のデータとBCCWJの違いは **2013/10/04 ***「中納言」利用申込み -申込用紙を配布します。押印して次回、必ず持ってきてください。 ***現代日本語書き言葉均衡コーパス(BCCWJ)とは -BCCWJについて、まず最小限のことを説明します。 --来週以降、詳しく説明します。 -[[BCCWJ少納言>http://shonagon.ninjal.ac.jp]] --登録不要 --文字列検索のみ --500例まで表示 -[[BCCWJ中納言>http://chunagon.ninjal.ac.jp]] --要登録 --形態論情報を使った検索 --全件(一度に最大10万例まで)ダウンロード可 ***「中納言」を使ってみる -詳しい説明を後回しにして、とにかく「中納言」を使ってみましょう。 -ログイン方法、インターフェイスの使い方を確認してください。 -配付資料「中納言の使い方」参照 **2013/09/27 ***イントロダクション -[[自己紹介]] --大学共同利用機関法人人間文化研究機構 国立国語研究所 http://www.ninjal.ac.jp/ -コーパスとは ---[[国立国語研究所コーパス開発センター>http://www.ninjal.ac.jp/corpus_center/]] ---[[形態素解析辞書UniDic>http://sourceforge.jp/projects/unidic/]] -デモ --BCCWJ[[少納言>http://shonagon.ninjal.ac.jp]] --BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]] -シラバス確認 --[[シラバス>http://www.ogiso.net/wiki/index.php?plugin=attach&pcmd=open&file=2013%B9%D6%B5%C1.pdf&refer=%C0%AE%EC%FE2013%2F%C6%FC%CB%DC%B8%EC%B3%D8%B9%D6%B5%C1F]] --この授業の目的 --授業の進め方 --評価方法