关于Python中去除重复词

我想问一下大家，怎么把这个Python程序改成能处理多个重复词，感谢！

import re

s = "This is a a desk is desk."
words = re.findall(r'\b\w+\b', s)  # 使用正则表达式提取单词
unique_words = list(set(words))  # 使用集合去重
result = ' '.join(unique_words)  # 将去重后的单词列表转换为字符串

print(result) 

# 结果： is desk a This

一种思路是改正则表达式
但是如果一句话里有多个不同的单词重复，怎么都没办法
所以你不如写个while，循环执行，一直到正则匹配不到重复单词，就break

不知道你这个问题是否已经解决, 如果还没有解决的话:

• 这有个类似的问题, 你可以参考下: https://ask.csdn.net/questions/7797972
• 这篇博客你也可以参考下：万字长文！终于讲透了Python中的多线程和多进程！
• 同时，你还可以查看手册：python- “已编译的” Python 文件 中的内容
• 除此之外, 这篇博客: Python问题解决，重复向列表中添加字典作为元素中的 Python问题解决（一），重复向列表中添加字典作为元素 部分也许能够解决你的问题, 你可以仔细阅读以下内容或者直接跳转源博客中阅读:
  

  其他python学习笔记集合：
  

  Python基础知识详解 从入门到精通 全集索引篇

  Python基础知识详解（十）小结，用python实现教师信息管理系统

  上篇用python实现教师信息管理系统，这里学几个实现这个系统过程中遇到的问题

• 您还可以看一下 CSDN就业班老师的 Python全栈工程师特训班第十三期-直播回放 课程中的 Python全栈工程师特训班第十三期-第一周04小节, 巩固相关知识点
  
• 以下回答来自chatgpt:

  针对问题：如何在Python中处理多个重复词？

  可以使用Python中的set去除重复词。如果数据是以字符串的形式存储，可以先进行分词，然后再使用set函数去除重复词。

  示例代码：

  data = "hello world hello python world"
  words = data.split()
  unique_words = set(words)
  print(unique_words)
  

  输出结果为：

  {'hello', 'python', 'world'}
  

  如果需要统计词频，可以使用Python中的collections模块中的Counter函数。

  示例代码：

  from collections import Counter
  
  data = "hello world hello python world"
  words = data.split()
  word_count = Counter(words)
  print(word_count)
  

  输出结果为：

  Counter({'hello': 2, 'world': 2, 'python': 1})
  

如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 写成博客, 将相关链接放在评论区, 以帮助更多的人 ^-^