java对word或者pdf文档的内容进行判重

领导给我一个任务，要我对word或者pdf的文档的内容进行判重，这个该怎么做？

用poi读取word pdf不知道