在python中如何分句
在處理文字時,會遇到需要將文字以 句子 為單位進行切分(分句)的場景,而文字又可以分為 中文文字 和 英文文字 ,處理的方法會略有不同。本文會介紹 Python 是如何處理 分句 的。
分句的關鍵是找到合適的結束符號,比如:中文裡的 。,英文裡的 . 等,而且,在這一點上中英也是有很大區分的。
這裡介紹一種純用 Python 實現的分句函式。
def cut_sentences(content): # 結束符號,包含中文和英文的 end_flag = ['?', '!', '.', '?', '!', '。', '…'] content_len = len(content) sentences = [] tmp_char = '' for idx, char in enumerate(content): # 拼接字元 tmp_char += char # 判斷是否已經到了最後一位 if (idx + 1) == content_len: sentences.append(tmp_char) break # 判斷此字元是否為結束符號 if char in end_flag: # 再判斷下一個字元是否為結束符號,如果不是結束符號,則切分句子 next_idx = idx + 1 if not content[next_idx] in end_flag: sentences.append(tmp_char) tmp_char = '' return sentences content = '在處理文字時,會遇到需要將文字以 句子 為單位進行切分(分句)的場景,而文字又可以分為 中文文字 和 英文文字 ,處理的方法會略有不同。本文會介紹 Python 是如何處理 分句 的。' sentences = cut_sentences(content) print('nn'.join(sentences)) 在處理文字時,會遇到需要將文字以 句子 為單位進行切分(分句)的場景,而文字又可以分為 中文文字 和 英文文字 ,處理的方法會略有不同。 本文會介紹 Python 是如何處理 分句 的。
這個函式可以透過修改 end_flag (結束符號),來自定義特定的句子切分方式,比如加入 ; 等符號。
當然,也可以用正規表示式來完成分句,使用 re.split 的方法。
import re def cut_sentences(content): sentences = re.split(r'(.|!|?|。|!|?|.{6})', content) return sentences content = content = '在處理文字時,會遇到需要將文字以 句子 為單位進行切分(分句)的場景,而文字又可以分為 中文文字 和 英文文字 ,處理的方法會略有不同。本文會介紹 Python 是如何處理 分句 的。' sentences = cut_sentences(content) print('nn'.join(sentences)) 在處理文字時,會遇到需要將文字以 句子 為單位進行切分(分句)的場景,而文字又可以分為 中文文字 和 英文文字 ,處理的方法會略有不同。 本文會介紹 Python 是如何處理 分句 的。
推薦課程:
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/964/viewspace-2832956/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 在python中如何打亂資料?Python
- 說說在 Python 中如何匯入類Python
- 說說在 Python 中如何遍歷字典Python
- 說說在 Python 中,如何寫入檔案Python
- 說說在 Python 中如何測試函式Python函式
- 說說在 Python 中如何處理異常Python
- 說說在 Python 中如何向函式傳參Python函式
- 說說在 Python 中,如何讀取檔案中的資料Python
- python如何幫我在投資中獲取更高收益Python
- 如何用OpenCV在Python中實現人臉檢測OpenCVPython
- 3 python的數值在記憶體中如何儲存Python記憶體
- xlwings:在Excel中整合PythonExcelPython
- JSON在Python中的使用JSONPython
- reload在python中的使用Python
- 說說在 Python 中如何傳遞任意數量的實參Python
- 如何呼叫程式碼在python3中改變函式值?Python函式
- redis在python中的應用RedisPython
- input在python中的使用注意Python
- Python中如何清空Queue?Python
- cmd中如何退出PythonPython
- python中ThreadPoolExecutor如何使用Pythonthread
- 教你在Python中實現潛在語義分析Python
- LiteDB在.NET中如何使用
- 在 Java 中如何使用 transientJava
- 在 JavaScript 中如何克隆物件?JavaScript物件
- 在 Python 中實現 COMET 技術Python
- python 代理在爬蟲中的作用Python爬蟲
- 在python docker中安裝ESL庫PythonDocker
- 怎樣在Python中執行cmdPython
- 在python程式中呼叫java程式碼PythonJava
- PyScript:讓Python在HTML中執行PythonHTML
- Python中reversed()方法如何使用?Python
- Python中None如何判斷PythonNone
- python中如何建立新表格Python
- 如何使用python中的opengl?Python
- Python中如何切換GIL?Python
- python中如何隨機分配Python隨機
- 在Python如何使用SMTP傳送郵件Python