サルではわからんコーパスOn the Web 97/04
■はじめに
■第1部:コーパスとは
■第2部:コーパス利用のためのソフトウェア
■第3部:データの収集
■投稿規定
「サルではわからんコーパス」はCorpus Wizard for Winのヘルプでは書ききれないことを中心にまとめたものです。現在はホームページ上で閲覧できるようになりました。
でコーパスでなにができんの
「サルではわからんコーパス」への投稿をお待ちしています。
分量:自由
対象:初心者か中級以上
締切:随時
応募先:浜口宛に電子メール で御願いします。
内容の審査はしませんが、形式上の変換(長い行に改行を入れるとか、関連項目にリ
ンクを張るなど)はやらせていただきます。
中級以上には「コーパスの鉄人」を計画しています。
質問はこちらから送れます。質問コーナー
コーパスというのはですね、一定の目的を持って収集された言語データの集合体で、情
報検索に便利な形にしたものとでもいいましょうか。機械可読形式であれば面倒な作業
はソフトウェアが代行してくれますので、人間はどのような情報を取り出せばいいのか
考えればいいだけです。これが難しいんですけどね。
話はかわりますが、4th Workshop on Very Large Corpora の投稿募集のメールには
Large Corpora は10の4乗(10,000)から9乗(1,000,000,000)語の範囲のものらしいで
す。10,000語程度ならなんとかなりそうですね(^_^;)でもveryがつくものっていった
いどんなものなんでしょうか。
■ コーパスっていったい何?
■ 世界のコーパス
■ 日本のコーパス
オンラインソフト
MS-DOS用
Windows用
Macintosh用
市販ソフト
MS-DOS用
Windows用
Macintosh用
国産ソフト
▲ KKC for DOS
▲ AYUDAシリーズ
▲ WGREP
▲ CGREP
▲ JGREP
海外ソフト
▲ UC Berkley Humanity Tools
KKC for DOSは検索ソフトの一種で指定されたキーワードを含む行を標準出力に出力します。機能としてはCorpus Wizardのサブセットです。
国産ソフト
▲ Corpus Wizard for Win16
▲ Corpus Wizard for Win16機能拡張DLL
▲ Corpus Wizard for Win32
▲ QGREP
▲ NekoGREP
▲ SGREP
▲ ファイル検索犬ポチfor Windows
海外ソフト
▲ MonoConc for Windows
国産ソフト
▲ ファイル検索犬ポチ
準備中
準備中
準備中
KKC for DOSの検索結果を加工することによってなんとかコンコーダンサー的な使い方ができないかと工夫を重ねて作ってみました。
KKC for DOSのページもあります。
KKC for DOSと同じ検索結果をWindows上でも得られるようにするだけのプログラムとしてスタートしましたが、現在では検索結果のソート、コロケーション統計、位置指定絞込み再検索など市販コンコーダンサーの代用となるよう機能強化が図られました。強化された機能を利用するにはKKCWTOOL.DLLがインストールされている必要があります。
Corpus Wizard for Win16/Win32のページもあります。
Corpus Wizard for Win16は日本語テキストに対しても検索は出来るんですが、ソートなど結果の加工処理については対応できませんので、別プログラムとしてCorpus Wizard Plus!を作成し、必要に応じて併用していただく形に落ち着きました。ただし、単語検索等の関係で多言語対応はWin32版で対処することになりました(^_^;)
Corpus Wizard for Win16/Win32のページもあります。
Corpus Wizard for Win16 +Corpus Wizard Plus! を統合し、32ビット化したものです。コロケーション統計の高速化などが図られています。現在では多言語対応も夢ではない内部構造になっています。なお、登録ユーザー向けに以下のツールがおまけとして提供されます。
Boreal for Win32/Win16 単語出現頻度計数
Dr.Count for Win32/Win16 単語数計数
Zephyr for Win32 簡易CSV,TSV閲覧ツール
DelHyph for Win ハイフネーション削除ツール
これらのおまけツールは登録ユーザー以外の方にはシェアウェアとして公開されます。
Corpus Wizard for Win16/Win32のページもあります。
テキスト処理に便利なソフトが多数含まれています。
所在
NIFTY FLM LIB 5 #1,#2,#3
どのようなテキストを収集するかというのを決めたら以下に紹介する方法で集めてみましょう。
■ オンライン上のテキスト
■ 市販CD-ROM
CD-ROM取り扱い店情報
以下のフォーラム・SIGにはシェイクスピアなどをはじめとするテキストが登録されています。
NIFTY-Serve英会話フォーラム16番ライブラリ
PC-VAN KOTOBA OSL #4
以下のメッセージからのコメントツリーにはCNNのWWWで提供されているtranscriptに関する情報があります。
FENG MES 12 #1351(改装前)
CNNに行ってみましょう
TIME誌も良いでしょう
出版社・新聞社へのリンク集はこちら
最近はTIME, USA TODAYなどCD-ROMがたくさん発売されていますので、そちらの方のご利用もおすすめします。
- ★ TIME MAN OF THE YEAR, Compact Publishing社(SoftKeyグループ)
- ★ TIME ALMANAC REFERENCE EDITION, Compact Publishing社
- ★ TIME ALMANAC 1995, Compact Publishing社
- ★ CNN TIME CAPSULE: 100 Defining moments 1994, ViCARIOUS社
- ★ CNN NEWSROOM Global View, Compact Publishing社
- ★ Project Gutenberg, Walnut Creek CDROM社
- ★ Newsbytes News Network, WAYZATA Technology社
- ▼ USA TODAY,発行会社は忘れてしまいました(^_^;)
- ◇ MacScholar, パシフィックハイテック
量はあまりありませんが法律関係では
- ★ The Legal Guide Team's Complete Home & Office Legal Guide, CDRP, Inc.(Chestnut)
ちょっと工夫が必要ですが、CD-ROM Treasure PACK I(WAYZATA Technology) には
- ★ Washington Times & Insight 1994 Edition
が入っています。ただし検索のために特殊なフォーマットになっいますのでKKCをはじめとする検索ソフトで使うには事前の加工が必要です。クリップボード経由で転送するとか・・・いつまでたっても終わりませんが・・・
他にもInternetに流れているFAQを収録したCD-ROMもありますので近いうちに確認したいとおもっています。といいつつ、一番活用しているのはネットニュースだったりします。
テキストデータ系CD-ROMの入手情報もお待ちしております。
ネットワーク上の入手情報 もあります。
汎例
★ 私が購入し実際に使っているもの
▼ 店頭で見かけただけ
◇カタログで見つけたもの
で、TIME Magazine Multimedia Almanacには1989年1月から1995年6月までの記事が収録
されていますが、残念ながらテキストデータではありませんでした(^_^;)
『英語教育』1995年9月号で井出 清氏が英語教育にも役立つCD-ROM2枚の紹介をされています。
著作権などの関係で、ネット上の情報をまとめて引用することはしません。直接該当するネットワークにアクセスして下さい。所在情報なら引っ掛からないでしょう(^_^;)
米国のTVのtranscriptionを収録したCD-ROMについての情報が
FENGC MES 12 #436(リフォーム前)
FENGC MES 12 #929(リフォーム前)
にあリます。
作者:仲谷賢一さん
種別:シェアウェア(\1000) NIF送金代行番号1583
On Line Today Japan 1995/12号 p.84 フリーソフトウェア・ナウ 第27回
Windows版もあるらしい
そ、それだけはきかんといでぐで〜〜〜〜〜〜(o)
以下のアドレスに御願いします。
NIFTY : NBC03301
PC-VAN: NED30616
インターネット: htakashi@mse.biglobe.ne.jp
圧縮書庫内のファイルも検索できる検索ソフトです。LHAの書庫は搭載している解凍ルーチンで対応していますが、-lh6-形式のファイルは-xオプションでLHA.EXE(ver.2.5x以降)を呼び出してやれば検索できます。
CGREP のC はContextのCです。キーワードとマッチした行だけではなく、前後の行も一緒に出力させることも出来ます。
オプションが多少複雑ですが、そのぶんきめ細かい検索が出来るはず(^_^;)JGREPはPC98用ですが、JGSLIMというDOS汎用版もあります。
近畿
兵庫県
神戸市
星電社PC-PORT三宮3F(DOS/Win),4F(Mac)
会員カード(来店/買上ポイント特典付)あり
650 神戸市中央区三宮町1丁目5-8
JR/阪急/阪神/ポートライナー三宮下車
周辺案内
地下鉄三宮[地下]
[〓〓〓〓〓〓〓〓〓〓〓〓〓阪急三宮〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓至梅田
□■□■□■□■□■□■□■□■□■JR三宮□■□■□■□■□■□■□至大阪
ポートライナー ---+
| ダイエー
阪神三宮[地下] |
そごう |
住友BK |
PCXTOWN ★ 富士BK 国際会館 |
PC−PORT |
上新 |
大丸神戸店 至ポートアイランド
交通案内
現在星電社三宮店本館は建設工事中ですのでセンター街から直接入ることは出来ま
せん。富士銀行と住友銀行の間の道路を利用してください。
星電社PC-PORTハーバーランド[星電社ハーバーランド店4F]
会員カード(来店/買上ポイント特典付)あり
JR神戸/神戸高速鉄道高速神戸下車
市営地下鉄大倉山下車
周辺案内
中央図書館
地下鉄大倉山[地下]
湊川神社
高速神戸[地下]
Duo Kobe[地下街]
□■□■□■□■□■□■□■JR神戸□■□■□■□■□■□■□至三宮・大阪
Duo Kobe[地下街]
=====================阪神高速神戸線[高架]/国道2号線[地平]==============
ハーバーサーカス
[4F : Sofmap] メガバンドール ★
[6F : PC売場] PC-PORT
阪急百貨店 モ
ザ
イ
ク
交通案内
土日休日は周辺道路の渋滞が激しいです。自動車を使わない方が無難です。電車バスをご利用ください。自転車でも渋滞に巻き込まれて苦労しますので(^_^;) 横断歩道以外での横断は危険ですから止めましょう。これまで何人ひき殺しかけたことか・・・
作業用スペース
- ICAME
- ACL (Ken Litkowski): http://www.clres.com/siglex.html
- Michael Barlow: http://www.ruf.rice.edu/~barlow/corpus.html
- Stuttgart, IMS, computational linguistics:http://www.ims.uni-stuttgart.de/IMS.html
- Lund, Dept. of Linguistics and Phonetics: http://www.ling.lu.se
- CLR: http://clr.nmsu.edu/clr/CLR.html
- Oxford Text Archive: http://ota.ox.ac.uk/TEI/ota.html
- ELSNET: http://www.cogsci.ed.ac.uk/elsnet/eci_summary.html
- Mannheim, IdS: http://www.ids-mannheim.de/telri/telri.html
- CETH (Humanities): http://www.ceth.rutgers.edu
- http://info.ox.ac.uk/bnc/corpora.html
|
2号館トップへ
|
3号館へ
|
御意見・御要望はこちらへどうぞm(__)m :
<htakashi@mse.biglobe.ne.jp>