python里split函数进行文本词语分割
# 汉语分词
text='我是一名五年级的小学生,我喜欢写程序。'
print(text.split())
CHwords=[]
for word in text.split():
CHwords.extend(word)
print(CHwords)
# 英语分词
text='I am a chinese girl!!'
EGwords=[]
for word in text.split():
EGwords.append(word)
print(EGwords)
# 英语简写分词
text='I'm a chinese girl!!'
for char in '-.,;!
"'': # 将标点符号用空格代替
text=text.replace(char,' ')
print(text)
# ''的长度是0,因此将words中长度为0的删除。
newwords=[]
for word in text.split(): # 依据空格来进行词语分割
if(len(word)!=0):
# 对于字符变量append()和extend()功能不一样
newwords.append(word)
print(newwords)
程序运行结果:
['我是一名五年级的小学生,我喜欢写程序。']
['我', '是', '一', '名', '五', '年', '级', '的', '小', '学', '生', ',', '我', '喜', '欢', '写', '程', '序', '。']
['I', 'am', 'a', 'chinese', 'girl!!']
I m a chinese girl
['I', 'm', 'a', 'chinese', 'girl']
注释:extend和append的区别不做解释啦
相关文章
- Python使用tkinter组件Label显示简单数学公式
- 内网渗透之DCOM横向移动
- 以目标为导向的语义交流的共同语言——一个课程学习框架
- python爬虫前奏【成信笔记】
- HTML 5 File API:文件拖放上传功能
- 教你快速创建 Python 虚拟环境
- pyenv 实现Python多版本自由切换
- 用 Python 对 Excel文件进行批量操作
- Python - 接入钉钉机器人
- Python - 抓取 iphone13 pro 线下店供货信息并发送到钉钉机器人,最后设置为定时任务
- crontab - 解决 mac 下通过 crontab 设置了 Python 脚本的定时任务却无法运行
- [源码解析] PyTorch分布式(5) ------ DistributedDataParallel 总述&如何使用
- Python科普系列——类与方法(上篇)
- SAP对STO的交货单执行PGI,报错 -Fld selectn for mvmt type 643 acct 400020 differs
- Spring Boot 实现通用 Auth 认证的 4 种方式
- 盘点4种使用Python批量合并同一文件夹内所有子文件夹下的Excel文件内所有Sheet数据
- OushuDB 学习经验分享(三):技术特点
- Java和Python思维方式的不同之处
- Python中日志记录新技能
- 奥比中光Gemini OpenCV—Python使用