甜薪工场甜薪工场
甜薪工场
工作者接单雇主招人
查看供给方

网络空间雷达系统(ZoomEye)

2023.08 ~ 2024.02

项目职责:项目技术: Tornado、ElasticSearch、MongoDB、Docker、Golang 项目描述: 是一个网络空间搜索引擎,用于帮助用户发现和扫描互联网上的设备、服务、漏洞等信息。可以对多个服务端口协议 进行测绘, 实现对整体或局部地区的网络空间画像 项目职责: 1. 网络空间资产探测(端口探活(zmap)、指纹扫描、服务/设备识别) 2. 搜索引擎数据权限重构 3. 支付模块对接(微信、支付宝、PayPal) 4. 管理后台服务搭建

其他项目

BI工具
2019.03 ~ 2020.07
项目职责:项目技术: Flask、React、MySQL、 Oracle 项目描述: 用于从不同的数据源中提取数据,并将其转换成易于理解的信息和可视化报表。包括图表管理,数据库管理,用户模 块, 仪表板管理, SQL 工具等 项目职责: 1. 权限管理功能开发 2. 图表管理(新增图表类型、查询维度管理、常用数据图表配置) 3. 仪表盘管理、智能分析报告生成 4. SQL在线工具开发、SQL校验与分析数据预览
查看详情
互联网舆情监测系统
2020.07 ~ 2021.07
项目职责:项目技术: Tornado、Celery、MongoDB、ElasticSearch 项目描述: 是通过对互联网上的信息进行采集、分析和挖掘,从而了解公众对特定话题、事件或实体的观点、评论和情绪的系统 。由数据采集、文本分析、情感分析和可视化等模块组成,用于帮助用户更好地了解社会舆论和民意的动向 项目职责: 1. 数据架构优化 MongoDB数据迁移ElasticSearch, 数据增量采集 2. 文件数据上传及可视化分析 3. 数据采集任务发起、结束、及周期调度 4. 机器学习模型工程化集成
查看详情
特征网关服务
2021.07 ~ 2023.02
项目职责:项目技术: Gin、Gorm、MySQL、Kafka、Nginx 项目描述: 是管理和提供机器学习模型所需特征数据的中央化访问点,为机器学习工模型提供了统一的接口,用于获取、处理和 使用特征数据、并进行特征调用记录统计、告警监控、负载均衡、访问控制 项目职责: 1. 特征调用调用统计(T+1、 T+7、 T+30、T+90) 2. 特征路由及特征热更上线 3. Prometheus告警监控对接 4. 特征开发
查看详情
特征计算服务
2022.01 ~ 2023.07
项目职责:项目技术: Gin、MySQL 项目描述: 是用于从原始数据中提取和计算出能够描述数据属性的可量化指标, 实现数据的降维和抽象, 以便输入到机器学习模型 中, 使得其在构建和训练时可不关心业务流程上下文从而支撑高性能自动化的特征工程 项目职责: 1. 数据读取及计算方式决策 2. 数据计算 SQL 的变换、语义抽取与合并、语法树的重新构建 3. SparkSQL 自动生成,实现对大规模T+1数据集的增量计算和聚合分析
查看详情
特征管理平台
2022.01 ~ 2023.07
项目职责:项目技术: FastApi、Tortoise-ORM、Celery、MySQL 项目描述: 是用于收集、存储、版本控制和管理机器学习模型所需特征的一种服务。可以帮助有效地组织和管理特征数据,以便 在机器学习模型训练和推断过程中使用, 可实现特征自动创建、检索与查询、血缘追溯、版本控制、发布与共享以及差异分析 项目职责: 1. 特征创建、检索、血缘追溯、发布与共享等功能 2. 特征查询接口压测及适用场景决策 3. 特征稳定性、集成测试等功能集成 4. 特征版本控制及差异数据对比
查看详情

相关职位

我擅长Python

后端
全日/半日均可 ¥ 25,000/月