2022.10.11 加入,已入驻 940 天。
2022.10.11 加入,已入驻 940 天。
项目职责: 该项目是个人独立完成的一个爬虫项目,采集的网站是一个境外购物网站,该网站存在反爬机制,需要做cookie封装及请求地址代理等操作。 业务逻辑实现最主要采用了Golang的协程特性,以多线程方式高效采集了汽车零件的参数及图片等数据并导出为Excel,Excel数据表的管理采用了excelize第三方库,同时采用Gin、GORM、Bootstrap等框架实现了简易的工具使用及导出界面。