NLPの一般的なプロジェクト分野(アルゴリズムの考え方)
1839 ワード
一、QA問答システム
二、意味分析、意味マッチング
三、機械翻訳
四、感情分析
3つの方法:https://blog.csdn.net/qq_16555103/article/details/95625946------感情分析
五、意図認識
六、ネーミングエンティティ識別NER
七、テキスト分類
DeepLearning:
① seq2seq + attention
② transformer、bert
二、意味分析、意味マッチング
1、 :
① booststriping
2、 、 -------
3、 :
① doc2vec、LDA
三、機械翻訳
DeepLearning:
① seq2seq + attention
② transformer、bert
四、感情分析
3つの方法:https://blog.csdn.net/qq_16555103/article/details/95625946------感情分析
五、意図認識
1、
① ( ;eg: ... ... ... ; ‘ ’ )
2、DeepLearning:
① rnn(LSTM) + attention
② bert
六、ネーミングエンティティ識別NER
1、 :
① bioes ------ HMM/CRF
2、deeplearning:
① LSTM + CRF ----- :LSTM , CRF viterbi softmax loss 。
:softmax ( LSTM
), CRF viterbi 。
② transformer 、 bert
=====================================================================================================
、 :
:
、 、
、 、 、 ...
1、NER :
① :
② : , NER 。 : 、 ...
: 。
, :‘ ’ , 。
③ :
七、テキスト分類
1、 (50 )
1.1 :
① + KNN、SVM、LR、 ( )
② doc2vec +
1.2 :
① LSTM/ LSTM/GRU --------- : LSTM + attention
② transformer、bert
2、 ( 50 )
DeepLearning:
① bert bert 512
② textCNN + LSTM