验证码训练问题,如何训练一个能够识别同位数比如说4位验证码,但有很多不同种类的验证码集的验证码识别模型

问题遇到的现象和发生背景

我想训练一个识别2captcha这个网站的验证码的模型,用的是cnn算法

我的解答思路和尝试过的方法

我尝试将里面出现过的图片尽可能的分类,然后一个个的训练,举个例子:4位的,我分成了纯英文,英数混合,以及纯数字。
然后,每个类别里面还分了很多的类。我发现这个网站的验证码类别太多了,分类可能就有很多很多,如果一个个训练模型肯定不太现实。

我想要达到的结果

我想要比如说拿四位纯数字来说,想训练一个四位纯数字的模型,他可以识别这个网站上所有或者说百分之50的4位纯数字验证码类型,这种该如何做到。
我能否将我所收集到的所有四位纯数字验证码的图片放到一起训练,来达到这种效果?