通过API返回数据,100条数据,大概有200MB。
使用pyquery进行逐条解析,即,pq(response)。多次使用不同数量的数据进行解析,发现最多只能解析出23条。想请教pyquery是否存在解析文件大小的局限性呢?
为排除数据自身问题,我把22,23,24,25,26,27条数据提取出来解析,可以正常解析,一般来说不存在数据自身问题了。
求教
你构造一个含有24条的数据测试下?