CKIP

中研院資訊科學研究所的馬偉雲助研究員說明：以中文來說，最基本的，要先教電腦學會「斷詞」和「理解詞的意思」。 如何理解一種語言？ 小時候學習中文，會 ...

斷詞（Tokenize)：這個動詞的意思就是希望可以將一個句子藉由工程方式，切割成一個一個的字元。 英文(歐美語系) 和中文(東亞語系) 的斷詞有很大的 ...

「斷詞」，指的是能夠讓電腦把詞彙以「意義」為單位切割出來,例如以下句子:「我的興趣是看電影和讀書」，對電腦而言這樣的字串無法解析出有意義的單位例如 ...

断词. 拼音 duàn cí. 繁体斷詞. 基本释义1.见断辞。 「断词」的意思和详细解释. 【断词】是什么意思（来源：网络解释）. 见“ 断辞”。