python爬虫怎么才能爬取一个大学里所有机构的简要介绍

机构众多,少说几十个。而且点进去又是一个新网页,再进去找到部门介绍,可能里面是一个文档,也可能直接是一篇文章。没啥思路
😭

这个怎么爬,如果进入后另一个网站,还要找部门,只能逐个爬取了。
爬虫里面有一个思路叫模糊查找,看看有没有最大的共同点,找到共同点再细分(最后还是要逐个分析)