由于可能要开始新的工作,所以准备开发一个新的爬虫,爬取投标项目的资料。
通过对中超联赛初盘数据的筛选,发现保持着非常高的均衡性,所以简单的通过公开数据应该是无法得出有用结论。 下一步…
在老家又待了两天,重新构思了爬虫,采用MySQL作为数据库,重新将数据采集了一次。 根据先前的思路,在技术上存…
第三次变更方案。因为技术能力薄弱,数据数量庞大且数据结构复杂的情况下,我无法胜任数据处理的工作。 所以只能退而…
之前的想法,直接将数据通过MySQL来进行存储,但是实践中无法保证所有数据都是格式化的,毕竟一百多万条,不可能…