[[成蹊2011]] *日本語日本文学のためのコンピュータa -日本語・日本文学を学んでいくうえでぜひ身につけておきたいコンピュータに関する知識・技術を学びます。 -後期・金曜4限 -連絡先: seikei@ogiso.net( ←@を半角に置き換えてください) **2012/01/13(最終回) レポート作成 -レポート完成に向けて作業を進めてください。 -積極的に質問してください。 ***Wordの基本 -スタイルと見出し -ナビゲーションウィンドウ(見出しマップ)の使い方 -図表の貼り込み -図表番号 ***レポートの提出方法 Wordファイルをメールに添付して送ること。メール本文・Wordファイルの両方に氏名・学籍番号を明記すること -提出先:''seikei@ogiso.net'' ←@を半角に置き換えてください -''〆切:1/27(金)'' -分量:A4用紙3枚以上 **2011/12/23 レポートテーマに関する調査 -各自のレポートテーマ(先週のものから変えても可)について調査してください。 -個別に見て回ります。積極的に質問してください。 ***相対頻度の計算 ***調整頻度の計算 --''Himawari版青空文庫・文字数データ''&br;[[Aozora2009GWchars.xls>http://home.ogiso.net/wiki/pukiwiki.php?plugin=attach&pcmd=open&file=Aozora2009GWchars.xls&refer=%C0%AE%EC%FE2010%2F%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BFa]] **2011/12/16 レポートテーマの検討 -各自のレポートテーマを確認します。 -各自のレポートテーマについて調査してください。 -個別に見て回ります。積極的に質問してください。 ***現代語コーパスとの比較 -「現代日本語書き言葉均衡コーパス(BCCWJ)」『少納言』 --http://shonagon.ninjal.ac.jp **2011/12/9 ひまわりとExcel(2) ***ひまわりの検索結果をピボットテーブルで集計(復習) -分類用のフィールドを作って集計する --例:「新聞紙」の意味・用法の変化 ---ランダム→先頭100 ***ひまわりの使い方補足 -ひまわりの検索結果をエディタ(正規表現を使った置換)で加工する -ひまわりの正規表現について([[授業資料/Himawariの正規表現]]) -ひまわりのキー範囲 ***ひまわりで利用可能なデータについて [#p8928529] -国会会議録データ --Web Collaboration : /temporary/ogiso/Himawari_kokkai.zip -青空文庫・国会会議録以外のデータ紹介 -古典文学作品のデータ ***レポートについて -''レポートテーマ確認(第1回)来週'' **2011/12/02 ひまわりとExcel ***検索結果をExcelで使う [#k187ca82] -並べ替え(ソート) -オートフィルタ(絞り込み) --オートフィルタの「オプション」 --複数の条件指定 -ピボットテーブルとピボットグラフ |前文脈|キー|後文脈|著者|タイトル|著者ID|生年|没年|原著者|原著者ID|仮名遣い|コーパス名| -文字列処理関数 --例: =left(<文字列>,<文字数>) ***レポートテーマについて(予告)[#cf3cbcf7] -授業で紹介したエディタや表計算ソフトの使い方を活かして、用例を元にしてたとえば次のようなテーマでレポートをまとめてもらいます。データは授業フォルダ内のものを自由に利用してください。 --例:作家ごとの言葉の使い方の違い --例:類義語の意味の違い --例:語の用法の変化 --例:語形・(表記)のゆれ --などなど **2011/11/25 全文検索システムひまわり ***「ひまわり」とは [#g59679c3] -「ひまわり」 [[国立国語研究所/言語データベースとソフトウェア/ひまわり>http://www2.ninjal.ac.jp/lrc/index.php?%C1%B4%CA%B8%B8%A1%BA%F7%A5%B7%A5%B9%A5%C6%A5%E0%A1%D8%A4%D2%A4%DE%A4%EF%A4%EA%A1%D9]] -ただのテキストファイル(プレーンテキスト)ではなく、XML形式にして、インデックスを付けた専用のデータを利用 ***データの準備 --[[青空文庫>http://http://www.aozora.gr.jp/]](XHTML)データ --WebCollaborationからUSBメモリにダウンロード ***ひまわりと正規表現 [#lde4da4e] -「ひまわり」で使用できる正規表現 --検索語/キー:普通の文字と、文字クラスの一部([あいう]のようなもの。[あ-う]のような範囲指定は不可) --前文脈/後文脈:ほぼ全ての正規表現 **11月18日 欅祭準備日 **11月11日 海外出張のため休講 **2011/11/04 正規表現の応用・タグ付き正規表現 ***正規表現の応用 [#c7a3ea2d] --カタカナ語 --送りがなの揺れ(行う/行なう) --''全然~ない。'' --会話文中(''「''で始まる) -[[授業資料/正規表現]] --会話文中("「"で始まる文中)の用例を検索する --同一文中での共起 ***タグ付き正規表現 -走[らりるれろ] でGrepした結果を置換するにはどうしたらいいか --次のように置換するととんでもないことに… ---検索文字列:走[らりるれろ] ---置換文字列:★走[らりるれろ] -タグ付き正規表現・カッコ(半角丸カッコ)と\1(\2,\3…)を使う -[[授業資料/タグつき正規表現]] ***タグ付き正規表現の応用 -(参考)タグ付き正規表現の応用:[[grepと置換でKWICを作る>授業資料/grepと置換でKWICを作る]] ***最長一致の原則(greedy matching) [#y047e9bd] -正規表現は、パターンが一致する最も長い範囲にマッチする --例:''「(.+)」'' → ''【\1】'' ---「こんにちは」「さようなら」 → 【こんにちは」「さようなら】 --''「([^」]+)」'' → ''【\1】'' のように書けばよい ---「こんにちは」「さようなら」 → 【こんにちは】【さようなら】 -最短一致を指定するには(ものぐさ指定) --''「(.+?)」「(.*?)」''のように、繰り返し指定の+*の後に「?」をつける ***正規表現に関する参考資料 [#w86de08b] -サクラエディタの正規表現:http://sakura-editor.sourceforge.net/htmlhelp/HLP000089.html -正規表現に関する本 [[amazonで検索>http://www.amazon.co.jp/s/ref=nb_ss_gw?__mk_ja_JP=%83J%83%5E%83J%83i&url=search-alias%3Daps&field-keywords=%90%B3%8BK%95%5C%8C%BB&Go.x=0&Go.y=0&Go=Go]] #amazon(4873111706) #amazon(4873113598) #clear ***ひまわり -デモ -動作チェック **2011/10/28 正規表現 ***復習 -検索で初出行を調べる -置換で用例数を数える -grepとタグジャンプ ***正規表現とは [#d216d4e0] -''正規表現'' [[>用語>http://e-words.jp/w/E6ADA3E8A68FE8A1A8E78FBE.html]] --文字を表すための特殊な文字(メタ文字) --置換・検索・grepで利用できる --記号はすべて半角 --特殊文字そのものを表す場合には\でエスケープする(特殊な意味を打ち消す) 例:1\+2 -文字クラス [ ] --文字クラスの補集合(それ以外の文字)[^ ] ***正規表現のいろいろ [#q514651f] -[[授業資料/正規表現]] --文字クラス [ ] --文字クラスの否定(補集合)[^ ] --繰り返し ? + * --グループ化 () --or(論理和) | --文頭 ^、文末 $ **2011/10/20(木) 金曜日不足分授業日 (休講) -金曜日不足分授業日ですが、都合が付かないため休講とします。 **2011/10/14 テキストエディタの利用 -テキストデータ(青空文庫)の配布 --Web Collaboration : /temporary/ogiso -検索・置換、grep --検索で初出行を調べる --置換で用例数を数える --grepで用例リストを作る --タグジャンプで文脈を確認する ***ショートカットキー [#da449f25] -[[授業資料/覚えておきたいショートカットキー]] ***grepと置換でKWIC(CSVファイル)を作る(簡易版) [#u3ab2d6f] -CSVファイルとは:テキストファイルで表を表現する [[用語:CSVファイル>http://e-words.jp/w/CSV.html]] -KWIC:KeyWord In Context ***正規表現を使ってみる [#u471d57b] -キャラクタクラス --例:読[まみむめもん] ---半角ブラケットの中に文字を並べる→並べた文字いずれか1文字 **2011/10/07 テキストデータとテキストエディタ -授業ページへのショートカット -出席のチェック -USBメモリの準備 ***(前回補足)デモンストレーション [#tae8f4ce] --青空文庫+ひまわり→Excelピボットテーブル |前文脈|キー|後文脈|著者|タイトル|著者ID|生年|没年|原著者|原著者ID|仮名遣い|コーパス名| ***テキストデータ -すべての基本、文字が並ぶだけのデータ --[[授業資料/テキストデータとは]] --バイナリファイルとテキストファイル -TXT,CSV,HTM・・・ --ファイルの種類と拡張子 参考:[[拡張子辞典>http://www.jisyo.com/viewer/]] --[[拡張子(wikipedia)>http://ja.wikipedia.org/wiki/%E6%8B%A1%E5%BC%B5%E5%AD%90]] -授業で使うテキストデータ --[[授業資料/テキストデータ紹介]] ***テキストエディタ [#q7ae852c] -テキストエディタとはどんなものか --[[授業資料/テキストエディタ]] -サクラエディタのダウンロードとインストール --[[サクラエディタのダウンロード:sakura2.zip>http://home.ogiso.net/wiki/pukiwiki.php?plugin=attach&pcmd=open&file=sakura2.zip&refer=%C0%AE%EC%FE2011%2F%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BFa]] ---サクラエディタホームページ:http://sourceforge.net/projects/sakura-editor/ -テキストエディタの設定 --行の折り返し --行番号表示 ---スタイル行番号(ワープロ的行番号)と論理行番号(エディタ的行番号) -練習用サンプルデータ --[[soseki.zip>http://home.ogiso.net/wiki/pukiwiki.php?plugin=attach&pcmd=open&file=soseki.zip&refer=%C0%AE%EC%FE2011%2F%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BFa]] **2011/09/27 ガイダンス -[[自己紹介]] --[[国立国語研究所>http://www.ninjal.ac.jp/]] --国語研コーパスの紹介([[KOTONOHA>http://www.ninjal.ac.jp/kotonoha/]]) --[[BCCWJ少納言>http://shonagon.ninjal.ac.jp/]] -[[シラバス>http://home.ogiso.net/wiki/pukiwiki.php?plugin=attach&pcmd=open&file=2011%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BF.pdf&refer=%C0%AE%EC%FE2011%2F%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BFa]]確認 ([[→リンク>http://home.ogiso.net/wiki/pukiwiki.php?plugin=attach&pcmd=open&file=2011%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BF.pdf&refer=%C0%AE%EC%FE2011%2F%C6%FC%CB%DC%B8%EC%C6%FC%CB%DC%CA%B8%B3%D8%A4%CE%A4%BF%A4%E1%A4%CE%A5%B3%A5%F3%A5%D4%A5%E5%A1%BC%A5%BFa]]) --この授業の目的 --授業の進め方 --評価方法 -前期の日本語学講義Eとの違い --できあがったコーパスを利用する(前期) vs. できるだけ自分で何とかする(後期) ***授業で利用する主なソフトウェア [#i06478d2] |ソフトウェアの種類・名前|利用目的|h |[[テキストエディタ ''サクラエディタ'' sakura2>http://sourceforge.net/projects/sakura-editor/]]|検索・整形| |[[全文検索ソフト''ひまわり''>http://www2.ninjal.ac.jp/lrc/index.php?%C1%B4%CA%B8%B8%A1%BA%F7%A5%B7%A5%B9%A5%C6%A5%E0%A1%D8%A4%D2%A4%DE%A4%EF%A4%EA%A1%D9]]|検索・分析| |表計算ソフト''Excel''|分析・グラフ作成| |ワープロ''Word''|「スタイル」を利用したレポート作成|