ゆるゆる更新します。

 

要素技術

言語資源

• 言語資源とは
  • 辞書
  • シソーラス
  • コーパス
• 言語資源リスト
• コーパスを自作する
  • Bratインストール（macOS）
  • Brat前準備：データと各種設定

 

前処理

• 前処理とは
• クリーニング
• 文分割
• 単語分割
• 形態素解析
• N-gram
• 正規化
• Stop Wordsの除去
• Sparse Termsの除去

 

素性（特徴）

• 素性とは
• One hotベクトル
• Bag-of-Words
• Bag-of-Ngrams
• TF-IDF
• 分脈ベクトル表現
• Word Embeddings

 

構文解析

• 再帰下降構文解析
• Shift-Reduce構文解析
• 左隅構文解析器
• 適応部分文字列表

 

意味解析

• 照応解析

 

検索アルゴリズム

 

 

Task

NLPのタスクは多岐に渡る上に、区分の仕方が実社会の課題ベースになっているのできっちりかっちり分けることはできません。

とはいえ分類しないと概観もできないので以下のページを参考にタスクの分類を行います。

• Kyubyong/nlp_tasks | Github

 

興味のあるところをピックアップして更新していきます。

メモとしてymym3412さんのACLサマリーのリンクを貼っておきます。

 

Anaphora Resolution: 照応解析

Automated Essay Scoring

Automatic Speech Recognition: 自動音声認識

Automatic Summarisation: 自動要約

• Unsupervised Abstractive Meeting Summarization with Multi-Sentence Compression and Budgeted Submodular Maximization #241
• A Unified Model for Extractive and Abstractive Summarization using Inconsistency Loss #221
• Fast Abstractive Summarization with Reinforce-Selected Sentence Rewriting #219

Coreference Resolution: 共参照解析

• Neural Coreference Resolution with Deep Biaffine Attention by Joint Mention Detection and Mention Clustering #253

Entity Linking: エンティティリンキング

Grammatical Error Correction: 文法誤り訂正

Grapheme To Phoneme Conversion

Humor and Sarcasm Detection

Language Grounding

Language Guessing

Language Identification

Language Modeling

Language Recognition

Lemmatisation

Lip-reading

Machine Translation: 機械翻訳

Morphological Inflection Generation

Named Entity Disambiguation

Named Entity Recognition: 固有表現抽出

• NERとは
• 論文 -Neural Architectures for Named Entity Recognition-

Paraphrase Detection

Paraphrase Generation

Parsing: 構文解析

• Extending a Parser to Distant Domains Using a Few Dozen Partially Annotated Examples #242
• Improving a Neural Semantic Parser by Counterfactual Learning from Human Bandit Feedback #235
• Zero-Shot Transfer Learning for Event Extraction #174
• Linear-Time Constituency Parsing with RNNs and Dynamic Programming #151

Part-of-speech Tagging: 品詞タグ付け

• Morphosyntactic Tagging with a Meta-BiLSTM Model over Context Sensitive Token Encodings #234

Pinyin-To-Chinese Conversion

Question Answering: 質問応答

• Multi-Passage Machine Reading Comprehension with Cross-Passage Answer Verification #237

Relationship Extraction

Semantic Role Labeling

Sentence Boundary Disambiguation

Sentiment Analysis: 感情解析

Sign Language Recognition/Translation

Singing Voice Synthesis

Social Science Applications

Source Separation

Speaker Authentication

Speaker Diarisation

Speaker Recognition: 話者識別

Speech Reading

Speech Recognition

Speech Segmentation

Speech Synthesis

Speech Enhancement

Speech-To-Text

Spoken Term Detection

Stemming

Term Extraction

Text Similarity

Text Simplification

Text-To-Speech

Text-To-Speech

Transliteration: 翻字

Voice Conversion

Voice Recognition

Word Embeddings: 単語埋め込み

• Domain Adapted Word Embeddings for Improved Sentiment Classification #216

Word Prediction

Word Segmentation

Word Sense Disambiguation: 語義の曖昧性解消

 

 

PyTorch入門

PyTorchのチュートリアルに沿ながら自然言語処理についてざっくりと触れます。

• PyTorch 入門 -Mac book proでチュートリアル-
• PyTorch DL for NLP -イントロダクション-
• PyTorch DL for NLP -bag of wordsで英語とスペイン語を分類-
• PyTorch DL for NLP -単語埋め込み、n-gram、CBOW-
• PyTorch DL for NLP -LSTM-
• PyTorch DL for NLP -Bi-LSTM CRF-

 

 

学習教材

入門 自然言語処理

 

言語処理のための機械学習入門

 

• Welcome to PyTorch Tutorials – PyTorch Tutorials 0.4.0 documentation