查看岗位
人才库人才详情
我擅长全栈工程师
小禅
产品研发/全栈工程师
个人优势
暂无
工作经历
汇丰
高级后端工程师2020.01 ~ 2021.10
1、公司内部数据计算Kubeflow平台，主要做ML模型训练和运行jupyter notebook。项目利用terraform 管理基础设施建设，实现gitops原理，服务构建在gcp云上，利用弹性扩容技术充分发挥服务的伸缩性
实现流程：
1.1 使用terraform+packer作为实现基础Linux应用镜像的构建
1.2 编写terraform+ansible实现服务器应用的部署、启动、定时备份和还原
1.3 使用bigquery+R fluent服务实现日志采集分析，并用terraform构建alerting实现邮件告警通知
1.4 全过程使用jenkins pipeline+gitlab webhook实现CICD自动构建
1.5 使用terraform构建GPU服务器，并自动安装对应版本的cuda+cudnn
2、公司内部IKP平台采用docker+kubernetes作为测试、生产环境架构，主要是实现pyspark、tensorflow模型和airflow容器化，实现模型应用的高可用和自愈功能
实现流程：
2.1、 编写Dockerfile构建pys
教育经历
广州大学
电子科学与技术，本科2014.09 ~ 2018.06
项目经历
公司内部数据计算Kubeflow平台
2021.06 ~ 2021.09
项目职责：1、公司内部数据计算Kubeflow平台，主要做ML模型训练和运行jupyternotebook。项目利用terraform管理基础设施建设，实现gitops原理，服务构建在gcp云上，利用弹性扩容技术充分发挥服务的伸缩性实现流程：1.1使用terraform+packer作为实现基础Linux应用镜像的构建1.2编写terraform+ansible实现服务器应用的部署、启动、定时备份和还原1.3使用bigquery+Rfluent服务实现日志采集分析，并用terraform构建alerting实现邮件告警通知1.4全过程使用jenkinspipeline+gitlabwebhook实现CICD自动构建1.5使用terraform构建GPU服务器，并自动安装对应版本的cuda+cudnn
查看详情
公司内部IKP平台
2021.09 ~ 2022.03
项目职责：2、公司内部IKP平台采用docker+kubernetes作为测试、生产环境架构，主要是实现pyspark、tensorflow模型和airflow容器化，实现模型应用的高可用和自愈功能实现流程：2.1、编写Dockerfile构建pyspark、jupyterhub、pytorch应用镜像(基础镜像->公共库镜像->应用镜像)，并定时清理过期镜像2.2、使用二进制方式部署kubernetes集群2.3、部署和维护Harbor私有容器仓库2.4、编写kubernetes的efk、traefik、prometheus、dashboard、storageclass等yaml实现功能2.5、实现jenkinskubernetes项目CICD流程2.6、kubernetes测试、生产环境应用部署、测试、上线
查看详情
ModelRiskAnalysisTool
2022.03 ~ 2022.06
项目职责：使用terraform构建谷歌云的计算资源，负责均衡和存储，同时负责ELK系统的脚本编写与资源创建，使客户从nas同步数据到bigquery，最后使用只能BI生成报表和分析，同时也负责ML环境搭建与数据备份，确保用户训练和使用的数据在机器过期重建时保持最新，使用python原生库编写代码，IMR工具接入ldap和saml校验从而判断用户权限，并编写自动化测试接口生成python代码扫描报告，提供给开发人员参考。
查看详情
相似职位推荐
我擅长后端开发、前端开发、小程序APP开发，8年开发经验
主攻后端web开发，可以使用多语言进行各种web系统开发，php熟练使用laravel框架，python熟练使用django、flask、tornado框架，.Net熟练使用furion框架，熟练使用mysql、postgresql数据库。可以进行TCP编程，对接各种硬件设备。熟练使用vue框架，可以自行对接后端接口开发各种系统前端页面。喜欢新技术对新知识接受能力强。
公众号零售/电商生活方式家庭/教育互联网/科技其他
全日/半日均可 ¥ 18,000/月
我擅长后端开发、前端开发、小程序APP开发，8年开发经验
主攻后端web开发，可以使用多语言进行各种web系统开发，php熟练使用laravel框架，python熟练使用django、flask、tornado框架，.Net熟练使用furion框架，熟练使用mysql、postgresql数据库。可以进行TCP编程，对接各种硬件设备。熟练使用vue框架，可以自行对接后端接口开发各种系统前端页面。喜欢新技术对新知识接受能力强。
¥ 100/月
