ID:20488
叶洁 数据工程师 13年经验
2024-12-17
个人介绍:1. 熟悉使⽤ Java、Scala 编程语⾔; 2. 熟悉 JVM,了解基本的 JVM 调优;、 3. 熟悉常⽤的大数据工具; 4. 熟悉常⻅的数据结构和算法; 5. 熟悉 Spark、Flink、Hbase、Kafka 等⼤数据组件; 6. 阅读过 Spark 核⼼源码,熟悉 Spark 任务提交、存储系统、Spark SQL 等组件的流程与实现。 7. 阅读过 Flink 核⼼源码,熟悉 Flink 任务提交、Graph ⽣成过程、State 管理等组件的流程与实现。
项目经验:1. ⼈群标签开发 项⽬描述:标签管理是 DMP 平台的主要功能之⼀,通过对上游数据基于 Spark、Flink 进⾏加⼯,⽣成⼈群标签 供⼴告主进⾏圈选,⽤于⼴告定向。 责任描述: 1. 负责 OTT 设备所有标签开发以及⼿机设备的⽤户⾏为标签开发,使⽤ Spark 处理上游⽤户画像宽表,每⽇定 时调度,产出离线标签,封装成 Bitmap,存⼊ HBase 中; 2. 使⽤ Flink 处理⽤户⾏为打点⽇志,产出实时标签,写⼊ Redis 中,供⼴告引擎在线读取; 主要成果: 产出基础属性、设备属性、⽤户⾏为、兴趣娱乐、消费能⼒ 5 类共 25 个标签。 2. 离线任务优化 项⽬描述: 针对 DMP 平台原有以 Spark Client ⽅式提交的离线任务进⾏优化。 责任描述: 1. 独⽴完成服务的架构设计、开发 2. 以 DB 为队列,通过建⽴⼀个调度表存放任务信息,通过接⼊⼀层 dispatcher 服务消费 DB 中的任务,以 Spark Cluster 的⽅式提交任务,并通过 YARN 接⼝实时检测任务的执⾏状态及时进⾏失败重试; 主要成果:⽬前已接⼊ 5 类 DMP 离线任务,⽇均任务 1500+,优化前平均等待时间 150 分钟+,优化后平均等 待时间 40 分钟+,缩短 110 分钟,效率提升近 2/3 算法实时特征 1. ⽤户 APP 实时使⽤特征 项⽬描述:对⽤户使⽤ APP 的下载、安装、更新、打开等实时事件进⾏处理,⽣成实时序列、统计量特征,写⼊ 特征管理平台,供算法团队使⽤。 责任描述: 通过消费上游设备事件埋点⽇志,处理⽤户⾏为⽇志,利⽤ Flink 的 ProcessFunction + Timer 实现每分钟更 新⽤户过去⼀⼩时的实时时间,⽣成不同维度的特征序列写⼊特征管理平台。 主要成果:处理上游 5W 条/S ⽇志信息,向下游输出 100W 条/S 特征,产出各种维度组合特征 60 个
技      能: Java  
¥600 / 8小时
立即预约
ID:20312
孙想 高级Java开发 1年经验
2024-12-17
个人介绍:熟练掌握 JavaEE技术,擅长Struts、Spring、SpringMVC、Spring Boot,Spring Cloud, Ibatis、Mybatis、Hib ernate、 Zookeeper+Dubbo, Nginx反向代理、Nacos、Docker容器; 熟练使用 Serlvet、JSP、JDBC、XML、反射、JSON、WebService等技术; 熟练使用 Eclipse、MyEclipse、Idea、SVN、Git、PL/SQL Developer 、Navcat、Maven、PostMan等开发工具; 灵活运用 HTML/CSS、JavaScript、JQuery及常用的插件、Ajax、VUE+Element等客户端技术; 熟练掌握单例模式、工厂模式、责任链模式、代理模式等常用的模式; 熟悉JAVA BIO/NIO通讯、netty框架; 熟悉使用Oracle、Mysql数据库的语言编程; 熟悉使用Nosql Redis、MongoDB 的使用编程; 熟悉ActiveMq,RabbitMq、RocketMq消息队列框架; 熟悉使用办公软件:Excel、Word、熟悉PPT的制作; 具备良好的OOP思想,熟悉MVC设计模式; 具备研发团队的日常管理工作,熟悉敏捷开发产品迭代流程。
项目经验:内容: 1、负责公司核心产品e换电平台(促销管理,代理商)平台架构设计以及实施,包括:商家授权注册中心、代理商系统、消息服 务器、优惠券系统、活动管理系统、用户终端 APP和 SDK。 2、负责参与和讨论研发流程和规范的指定,包括:Java 的代码规范、工程命名规范、SQL 的规范、日志规范、研发流程规 范、日常的问题反馈及问题的处理流程、平台接口规范等工作。 3、负责根据产品实施,及业务发展情况,评估优化平台的系统,提升产品的质量,降低耦合性,提高研发效率,同时是人员 责任清晰。如业务项目服务化拆分、数据库拆分 4、参与产品需求评审,负责协调各方面资源进行产品设计、开发、测试及上线,统筹把控系统架构及产品需求在技术实现上 的设计,项目过程中流程、质量、资源等风险。 5、负责促销团队人员管理; 业绩: 1、从0-1有的参与搭建公司核心产品促销系统,促销 saas 平台,已正常交付使用阶段; 2、不断改进研发流程和规范,提升研发效率 3、不断改进平台架构设计,如对用户数据信息安全存储、服务的限流、日志模块化和自动化、服务降级/容错等等,保障平台 的稳定、高效的提供服务
技      能: Java  
¥1300 / 8小时
立即预约
ID:20659
张兵 中级java开发工程师 3年经验
2024-12-17
个人介绍:熟练掌握Java、python,熟悉java技术栈,spring生态,微服务等主流框架,熟悉vertx开发框架,熟悉python django框架。能够独立搭建并部署一整 套分布式微服务项目。熟悉RabbitMQ,kafka等消息中间件,熟悉mysql、oracle、sql server、redis等数 据库,熟悉influxdb时序数据库。熟悉JVM调优等内存优化方法,熟悉K8S,docker等容器技术,熟悉graalvm、jdk17等最新 技术特性。熟悉linux操作系统
项目经验:曾担任职务:java开发工程师 工作职责:负责电力运维云平台项目。技术方面,前期采用基于Spring Boot的开发框架,前后端 分离,保障系统的可维护性和可扩展性。 在数据处理方面,运用了Mysql、Redis等数据库技术,设计并实现了高效的数据存储和查询策略 ,确保了系统在处理大规模电力数据时的高性能和稳定性。 在项目开发过程中,我借鉴了业界先进的实践和同行的成功案例。例如,在实现消息中间件的选 择和定制时,我参考了多个成功案例,并根据项目的具体需求,选择并优化了Kafka的应用,确保 了消息处理的高效性和稳定性。 此外,我还负责了系统的JVM调优和内存优化工作,通过细致的性能分析和调整,显著提高了系统 的运行效率和稳定性。 在项目后期,为了应对系统不断增长的业务需求和复杂度,对项目进行迭代优化,采用微服务架构 ,使用Spring Cloud技术进行系统服务的拆分和微服务的开发及部署,进一步提升了系统的伸缩 性和模块化。例如,为了实现服务的发现和配置管理,项目采用了Nacos作为服务注册中心和配置 中心。Nacos的动态服务发现和配置管理功能显著提升了微服务架构的灵活性和可维护性。 在微服务的网关选择上,引入了Spring Gateway。通过定制Spring Gateway的路由规则和过滤器 ,成功实现了对服务流量的精准控制和高效负载均衡,增强了系统的安全性和扩展性。 此外,为了优化服务间的通信,引入了Dubbo作为RPC框架。Dubbo的高性能和轻量级特性使得微服 务间的调用更加高效和稳定,进一步提升了系统的性能 曾担任职务:python开发工程师 工作职责: 1.基于Python的Django架构开发的一套基金投研平台,在“云通基金投研平台”项目中,我辅助 研发经理设计和实施整个平台的架构。运用Python和Django框架,不仅实现了高效的数据库设计 和MVC模式的应用程序开发,还深入参与了数据处理和分析脚本的设计与实现,极大地提升了平台 的数据处理能力和用户体验。 为了实现高效的消息推送和数据通信,引入了Kafka作为消息队列系统。通过Kafka的高吞吐量和 可扩展性特性,平台能够高效处理来自多个数据源的实时数据流,并确保数据的稳定传输和及时 处理,从而显著提高了整个系统的响应速度和可靠性。 在自动化部署和维护方面,利用了Kubernetes进行容器化配置管理,并通过Jenkins实现了持续集 成和持续部署流程的自动化。提升了开发效率,也确保了平台的高可用性和可扩展性。 通过Docker容器技术,有效地隔离了开发和生产环境,确保了应用的快速部署和可靠性
技      能: Java  
¥1300 / 8小时
立即预约
ID:20740
黄军 高级java开发工程师 15年经验
2024-12-16
个人介绍:掌握JAVA语言特性,具有丰富的J2EE WEB项目开发经验。 熟练使用Spring/SpringMVC、SpringBoot、SpringCloud、MyBatis等开源框架。 掌握Oracle、Mysql等数据库;熟练使用SQL进行数据统计,业务开发;熟悉Redis、MongoDB等非关系数据库的使用。 熟练使用Git,maven等管理工具。 熟练使用RabbitMq、Kafka、RocketMq等消息中间件。 熟悉Linux操作系统及其常用命令,编写简单脚本。 熟悉使用Blink进行数据流、批处理。
项目经验:1、医生端: 项目介绍 该系统用于医生对植入除颤设备的患者随访时进行数据录入与记录查看,主要实现功能有为患者开户、审核患者、创建随访计划, 填写随访详情,解析固定格式的pdf文字内容及图表内容, 创建疗程任务、查看患者心衰设备、ICM设备检测的心电图、呼吸率、心音等数据详情。 使用技术:Springboot,、mybatis,、Vault、Mysql、Redis、Hbase 个人责任: 负责该项目初始化,参与表设计及架构设计,项目的迭代开发 主导随访计划及患者相关模块的开发 2、医疗患者小程序: 项目介绍: 心衰监测小程序主要实现用户通过微信小程序登录平台进行创建患者(需进行实名认证),进行设备绑定、通过小程序将心衰监测仪设备检测的数据进行上传,后端对原数据进行处理并计算患者心率、呼吸率、QRS波宽度、QT间期等指标数据。植入icm患者可进行,icm设备绑定,通过小程序将icm设备数据进行手动上传,并查看相关记录。 使用技术:Springboot, mybatis, Vault、Mysql、Redis、Hbase、doris、python、matlab 负责该项目初始化,参与表设计及架构设计,项目的迭代开发 主导心衰,随访等相关模块的开发 3、小班回放项目2021.1~2021.10: 项目介绍: 学生上完课后需将云端录制的学生及老师原视频和上课时的信令进行重播并录制成视频文件,供学生复习使用,该系统主要实现回放合成任务的创建,使用ffmpeg进行音视频转码拼接,合成视频视频文件,合成失败告警及重试。 使用技术: rabbitmq,、Springboot、 mybatis、Mysql、Redis、springCloud、eureka 个人责任: 负责该项目的整体开发和迭代开发 4、小班课回放相关2018.7~2020.12 项目介绍: 学生上完课后需将录制的学生及老师原视频和上课时的信令历史进行重播并录制成视频文件,供学生复习使用,该系统主要实现开启声网视频录制,课中信令数据收集, 回放合成任务的创建,合成失败告警及重试。 使用技术:Springboot, mybatis, kafka、Mysql、mongodb 个人职责: 负责该项目的整体开发和迭代开发
技      能: Java  
¥300 / 8小时
立即预约
立即预约
意见反馈