Jieba ?? ??? ? ?? ?? ?? ??? ?? ?? ??

?? ???? ??? ?? ???? jieba? ???? LDA ??? ???? ?? ?? ??? ???? ????? ?? ???? ?? ?? ??? ???? ??? ????. ?? ??, jieba ?? ???? ?? ??? ?? LDA ???? ???? ?? ? ?? ????? ?? ??? ????? ? ????.

?? ?? ???? ??? ?????.

 # ????? Word stop_words = set (stopwords.words ( 'Chinese'))
broadcastvar = spark.sparkcontext.broadcast (stop_words)

# ??? ??? ?? Def Tokenize (???) :
    ?? ?? (jieba.cut (???))

# ??? ?? ?? ?? Word def delete_stopwords (??, stop_words) :
    filterd_words = [stop_words? ??? ?? ?? ??? ?? ??]
    filterd_text = ''.join (??? _words)
    ??? _text? ?????

# ??? ? ?? ?? ?? def remove_punctuation (input_string) :
    ??? = string.punctuation "!???##·%&＇() ＊＋, －/:; ＜＝＞＿｜｝］＿??ｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏ ＜＝＞＿｜｝］＿??ｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏｏ
    ??? = str.maketrans ( '', '', ???)
    no_punct = input_string.translate (???)
    No_Punct? ??????

def ymatic_focus (???) :
    Gensim import Corpora, Models??
    num_words = min (len (???) // 50 3, 10) # ?? ?? ???? ??????.
    stop_words = broadcastVar.Value
    text = delete_stopwords (??, stop_words)
    text = remove_punctuation (???)
    ?? = ?? ? (???)

    ?? = Corporate.Dictionary ([??])
    ??? = [dictionary.doc2bow (??)]
    lda_model = models.ldamodel (corpus, num_topics = 1, id2word = ??, Passes = 50)
    ?? = lda_model.show_topics (num_words = num_words)
    ??? ?? :
        return str (??)

?? ??? ?? ? ??? ??? ????? ?? ?? ??? ?????.

1. ??? ?? ?? : ??? ??? ?? ??? ????, ?? ??? ???? Jieba?????, ?? ???? ?? ??? ???? ??????. ??? ???? ????? ???? ??? ? ??????.

2. ?? ??? ?? ?????? ??? : ?? ??? ? ?? ??????? ????? ?? ??? ???? LDA ??? ???? ????? ?? ?? ?? ??? ??? ???? ??? ?? ?? ??????? ??????. GitHub? ?? ? ?? ??? ???? ???? ?? ??? ?? ????? ??????.

?? ??? ?? Jieba Word ???? ???? ?? ???? ?? ?? ?? ???? ?????? ????? ???? ??????? ??? ?? ?? ? Word Cloud Map? ????. ?? ??? ?? ???? ???? ???? ??? ??? ??? ?? ??? ?? ??? ?? ?? ????.

? ??? ??? ?? ???? ???? ? ? ???? ?? Jieba Word ???? ??? ????? ??? ??????? ?? ?????. ??? ??? PHP ??? ????? ?? ?? ??? ?????!