项目职责：公司规模: 1000+（电商平台） 职位: 高级软件工程师 职责: 后端系统设计与研发 项目: 主要从事电商平台的后端服务研发、API接入、ETL开发等 1. ETL开发 以公司业务划分主题，如用户、订单等主题数据，计算相关的指标，主要以HQL为开发工具，部分负责逻辑会使用spark程序，通过oozie来调度任务，完成数据的清洗流程 2. 用户行为日志 App端搜集的用户行为日志，每天定时发送到指定服务器上，使用spark程序解析数据，保存在hive中，通过数据平台的ETL任务，计算用户的日活，月活，留存率，页面留存时间、平均留存时间等指标，以便分析和挖掘用户行为 3. 供货平台 一些供应商接入，包括一些虚拟商品，如游戏点卡、话费等，提供发货接口、优选供应商接口、退货等接口

项目职责：公司规模: 200+（互联网金融） 职位: 高级软件工程师 团队: 5人 职责: 项目从0到1的建设，平台架构，项目管理，设计研发 项目如下: 1. 小额借贷系统 互联网金融小额借贷系统，主要是面向用户提供小额信用贷款的服务，背后接入了一些融资平台，系统包含用户、交易、活动、支付、对账、资产、风控等模块，在该公司负责用户和活动模块的开发 2. 存储服务 互金小贷业务中有些增信数据，比如联系人，通话记录等，数据量比较大，api调用需要快速响应，考虑使用hbase来存储这些数据，通过rowkey设计来解决数据热点和快速检索的问题，预设分区让region的数量在单个regionServer中可控，保持较高可用性，百亿记录的表在毫秒级响应 3. 实时日志监控系统 由于生产事故不能及时发现，故开发日志监控系统，通过flume从业务系统采集数据到kafka集群，spark-streaming从kafka中消费数据，根据匹配规则将符合规则的日志发送给相关系统的负责人员（邮件、短信、微信方式）

项目职责：公司规模: 2000+（车联网） 职位: 架构师 职责: 平台架构，项目设计研发 团队: 11人 项目: 入侵检测系统 通过车机端、app端及云端的数据上报，实时大屏展示安全业务应用及攻击效果，可视化安全业务报表 项目: 平台架构开发维护 集群管理及维护: 集群搭建、维护，监控报警，配置调优等 离线数仓体系建设: 数据接入kafka、spark、sqoop，主题建模hive，指标计算kylin，hbase，报表展示superset 实时指标计算: 数据接入kafka、spark，数据存储redis、hbase、数据服务springboot cos存储桶: 应对pb级数据量存储，把大数据量的数据迁移至cos服务上 存储架构更新: 老的服务器使用的是公有云网盘，成本高、IO低、IO密集占用网络带宽；替换成大数据机型的网络磁盘，成本降低60%以上，IO效率提升6倍以上 软件架构更新: 1、单点问题，老的平台yarn、hdfs、hbase均存在单点故障，开启HA模式，保证高可用性； 2、部分节点单独部署hbase，造成内存和磁盘的空间浪费，改为同时部署hdfs和yarn，数据本地化的同时提高资源利用率； 3、监控及管理界面单独部署、老平台管理界面及监控都在一个单节点上，如NN，RM，cm及监控，hue等都在一个节点上，把NN和RM单独拆分出来，以免数据量越来越大NN负载太多，造成集群服务不可用

项目职责：公司规模: 100+ 职位: 架构师 职责: 平台架构，项目设计研发 项目: 北吉熊his平台 公司主要开发以口腔为基础的his平台，包括患者管理，预约管理，就诊管理，医生管理，电子病历，订单管理，进销存管理，报表管理等模块，系统涵盖了客户就诊前，就诊中，就诊后的全流程业务数据及门店数据分析。 负责模块: 订单，支付。 技术架构: spring cloud，mybatis，mysql，redis。

项目职责：公司规模: 100+ 职位: 架构师 职责: 平台架构，项目设计研发 项目: 东方易犬-数字藏品平台 基于版权服务的数字藏品平台，购买该平台的数字藏品会默认授权该藏品可用于商业活动，该数字藏品平台包含以下部分，用户，藏品，交易，营销活动，区块链，支付等模块，还有后端数据分析，可视化等功能。 负责模块: 用户，订单。 技术架构: spring cloud，mybatis，mysql，redis，kafka。