自然言語処理

自然言語処理 (natural language procesing)†

人間が読み書きや話しに使う言語で書かれた文書や，文書の集まり(コーパス)をコンピュータで処理すること． コーパス中の語の頻度に基づく統計的自然言語処理や，テキスト中から再利用可能な知識を見つけるテキストデータを対象としたデータマイニングであるテキストマイニングは機械学習と関連が深い．

-- しましま

関連項目†

• natural language procesing
   
• 機械学習
• テキストマイニング
• 情報検索
   
• 検索:自然言語処理 NLP

リンク集†

• 言語情報処理ポータル
• Statistical natural language processing and corpus-based computational linguistics: An annotated list of resources
• Natural Language Processing @ AAAI AI topics
• Related links @ Arturo Montejo Ráez
• nlp.nagaokaut.ac.jp:自然言語処理 @ 長岡技科大自然言語処理研
• 雑談@くどう:FrontPage：自然言語処理のツールや書籍の紹介などがまとめられている．
• ACLWiki
• ACL Anthology：計算機言語学関連の論文のデジタルアーカイブ
  • ACL Anthology Network：文献間や研究者間のネットワークについての統計
     
• Wikipedia:Natural_language_processing
• Wikipedia.jp:自然言語処理

Freeware†

• mloss:natural-language-processing
• AI Related Ruby Extensions：自然言語処理や機械学習などのruby用コード
• BOW：TF-IDFの計算などの基本的な処理
• C&C tools：パーサー，タガー
• 茶筌：形態素解析
• fnTBL：名詞のチャンキングや曖昧性解消
• FreeLing：トークン化から固有表現抽出とかまでいろいろな自然言語処理
• GATE - General Architecture for Text Engineering：自然言語処理の統合アーキテクチャー，UIMAと統合中
• KH Coder：日本語テキストの定量解析 (Perl)
• LingPipe：固有表現抽出，名詞のcoreferenceなどのライブラリ
• Lucene：Apacheプロジェクトの検索エンジン
  • Carrot2：検索結果のクラスタリング
• Mallet：自然言語処理，最適化，条件付確率場，クラス分類，クラスタリング (java)
• MeCab：形態素解析
  • RMeCab：MeCabをRから呼び出す
• Minorthird：アノテーション，クラス分類
• MLTL (機械学習テンプレートライブラリ)：自然言語処理用のデータ構造を扱うテンプレート (C++)
• 中川研究室で開発したソフト・言語資源
• Natural Language Software Registry
• Natural Language Toolkit：自然言語処理をpythonで (ドキュメント)
• OpenNLP：オープンソースの自然言語処理ソフト開発の相互交流を図る．いろいろなプロジェクトがある．
• Porter Stemming Algorithm：英単語の正規化手法
• Natural Language Processing @ CRAN Task View：統計処理ソフト R の関連パッケージまとめ
• Rainbow：テキスト分類
• Senna：品詞タグ付け，固有表現抽出など
• SVMTool：SVMを使った英語やスペイン語のタガー (C++, perl)
• Standord Core NLP：品詞タグ付け，固有表現抽出，名詞の同一指示分析
• Stanford Entity Resolution Framework (SERF)：同じ実体を見つける entity resolution 問題 (java)
• 辻井研ソフトウェア：最大エントロピー法, タガー, パーサなど
• Stanford Parser：確率的文脈自由文法によるパーサ
• Text algorithms for Ruby - RDoc Documentation：stemmingやLevensten距離などのごく基礎的なテキスト処理 (ruby)
• TextGarden：テキストマイニング．小さなフィルタリングプログラムの集まり．
• uClassify：テキスト分類 WebAPI
• UIMA - Unstructured Information Management Architecture：自然言語処理統合環境
  • U-Compare：UIMA準拠コンポーネントの相互接続のためのプロジェクト
  • 竹内 広宜 他 ”UIMA（非構造情報処理アーキテクチャー）” 人工知能学会誌, vol.22, no.6 (2007)
  • cleartk：UIMA用のフレームワーク
• Wikipedia Clustering：Wikipediaページのクラスタリング．自然言語処理ライブラリも．(C++)

関連文献†

• 基本の教科書
  Book/Foundations of Statistical Natural Language Processing
• 全文がWebで公開されているチュートリアル
  C. J. van RIJSBERGEN, Information Retrieval
• Daniel Jurafsky and James H. Martin "Speech and Language Processing" Prentice-Hall
  第2版のドラフト公開中
• 日本語の教科書
  • Book/確率的言語モデル
  • Book/情報検索と言語処理
  • Book/言語と心理の統計 (統計科学のフロンティア10) 第2部 確率モデルによる自然言語処理 @ 永田昌明
• Book/人工知能学事典 7章

朱鷺の杜Wiki

• 機械学習
• 学会・研究会
• 書籍・資料
• 論文英語
• フリーウェア
  • python
  • numpy
• テストデータ
   
• 日本語版PRML本
• カーネル多変量解析
   
• 人気ページ
• 今日の人気ページ
• ページ一覧

参加しよう

• Wiki超入門
• 練習用ページ
• 数式の表示
• こびとさん
• 編集用ID: ibis
• パスワード: 「VC次元」のVのフルスペルで最初だけ大文字
   

  最新の30件

  2024-05-31

  • 人工知能学会全国大会
  • しましま/人工知能学会全国大会2024

  2024-04-13

  • python

  2024-04-09

  • K-NEL
  • K-NEL/errata

  2023-11-22

  • PRML/errata2

  2023-11-21

  • PRML/errata1

  2023-11-01

  • しましま/IBIS2023

  2023-10-29

  • IBIS

  2023-06-11

  • しましま/人工知能学会全国大会2023

  2023-03-28

  • Book

  2022-11-27

  • 朱鷺の社

  2022-11-24

  • しましま/IBIS2022

  2022-07-08

  • AutoTicketLinkName

  2022-06-17

  • しましま/人工知能学会全国大会2022

  2021-11-13

  • しましま/IBIS2021

  2021-10-29

  • 回帰分析

  2021-06-11

  • しましま/人工知能学会全国大会2021

  2021-03-07

  • MenuBar

  2021-02-15

  • python/numpy

  2020-12-22

  • 特異値分解

  2020-12-18

  • complement naive Bayes

  2020-11-27

  • しましま/IBIS2020

  2020-10-17

  • Paper/bias-on-the-web

  2020-07-16

  • F値

  2020-06-30

  • DataSet

  2020-06-24

  • バイアス-バリアンス

  2020-06-10

  • Paper

  2020-03-15

  • PRML
  • PRML/link

カウンタ

• 累計: 28356
• 今日: 1
• 昨日: 0