鸽尼数据分析,Go - 甜薪工场

人才库人才详情

我擅长Go

鸽尼

产品研发/Go

个人优势

暂无

工作经历

路行通

数据分析2022.09 ~ 至今

数据获取： 1. 使用python获取网络信息； 2. 使用fiddler监控并获取本地信息；数据分析和处理： 1. 获取中台业务数据并对原始数据进行分析； 2. 对分析后的数据进行去噪清洗，存入数据库； 3. 对数据库中数据进行可视化处理，监控数据情况；

教育经历

四川大学

电子科学与技术，硕士2020.09 ~ 2022.09

项目经历

招标信息爬取

2021.06 ~ 2021.09

项目职责：使用scrapy爬取必联网招标信息，使用代理IP池，并存入mysql数据库中;信息存储字段：projectcode='',#项目编号web='',#信息来源网站keyword='',#关键字detail_url='',#招标详细页网址title='',#第三方网站发布标题toptype='',#信息类型province='',#归属省份product='',#产品范畴industry='',#归属行业tendering_manner='',#招标方式publicity_date='',#招标公示日期expiry_date='',#招标截止时间

查看详情

豆瓣电影爬取_baizes

2021.09 ~ 2022.03

项目职责：通过python和scrapy爬取豆瓣电影标题、链接，并进入链接爬取电影简介以文本txt格式存储在当前目录douban文件下

查看详情

豆瓣租房爬取

2022.03 ~ 2022.06

项目职责：通过python爬取豆瓣信息，使用xpath解析租房标题、链接，并通过链接进入二级界面爬取租房评论，将信息合并后存入本地excel文件中

查看详情