ID:22535
谭静 数据分析师 6年经验
2024-08-02
个人介绍:web前端 html css js jQuery web后端 python django mysql数据库 redis数据库 数据分析 数据爬取 反爬虫技术 伪造头... 数据清洗 pandas 正则表达式 数据可视化 echarts
项目经验:项目一《禁毒数据分析》 1、爬取人民检察院案件信息公开网 a、在爬取过程中遇到了反爬虫 b、通过伪造头、无头浏览器、以及控制爬取频率等反反爬虫机制成功爬取吸毒人员数据 c、数据为每个吸毒人员的起诉书内容 d、存入mysql数据库 2、数据清洗 a、python对mysql数据库调用读出每一篇起诉书内容 b、用python的pandas和正则表达式提取出吸毒人员的姓名(名被隐藏)、身份证号(只有开头6位和结尾4位)、年龄、职业、性别、学历、是否贩毒、吸毒地点、吸毒抓获时间、吸食毒品种类、毒品单价、毒品重量、通讯方式(是否使用手机)、是否复吸(是否有吸毒史)、常驻地址等信息 c、去重后存入mysql 3、数据分析 a、pandas数据groupby数据分组以及count统计 b、matplotlib绘制柱状图、散点图、饼图 c、通过数据分析得到以下结论 吸毒人员的男女占比,以及在每个城市的男女占比 吸毒人员的学历情况分布,大部分是初中学历(具体数据不便公布) 吸毒人员职业情况的分布,大部分是无职业无经济来源,因此有很大部分是以贩养吸(具体数据不便公布) 吸毒地点的分布情况,以及不同地区的吸毒地点分布情况,常出现在个人的租赁单间以及旅行社 不同地区的吸毒抓获时间以及吸毒人数的趋势分布,能看出不同地区对吸毒人员布控的程度,以及治理的情况 不同地区的毒品单价分布 不同地区的复吸率的统计 4、数据可视化 a、搭建web页面,调用可视化工具echarts搭建出精美的数据可视化页面
技      能: 其他  
¥1200 / 8小时
立即预约
ID:21380
李云 .NET高级开发工程师 14年经验
2024-08-01
个人介绍:全栈开发,主攻后端C#开发,会写前端 良好的编程习惯,代码注释,多层开发经验,接口式开发;熟练使用依赖注入框架,解耦程序,方便维护; 熟练使用asp.net mvc,.net core,EF core 熟练使用asp.net core webapi接口开发 熟练使用网页端实时推送技术WebSocket,SignalR 熟练使用html,css,JavaScript,ajax,jQuery 熟悉使用TCP/IP网络通信编程,Http编程 熟练使用多线程编程System.Threading.Tasks 熟练使用winform 熟练使用数据库sqlserver,mysql,oracle 熟练使用缓存redis,程序内运行时缓存System.Runtime.Caching.MemoryCache 熟练使用消息中间件RabbitMQ 熟悉使用Nginx,haproxy负载均衡器 熟悉使用ffmpeg视频处理
项目经验:项目1:图库管理系统 项目架构:B/S 项目描述:实现单位里面各个部门的图片上传下载,能在线管理图片,根据关键词、标签、部门搜索图片,非本部门的图片不允许查看,实现图片的权限管理,图片的上传需要部门的领导人审核通过之后才可以上线供查看。同时还有视频管理模块,大视频文件在线上传,在线浏览,视频在线转码为mp4,提供视频的搜索下载,后台实时处理转码的视频实时推送到前端展示 使用技术:asp.net core mvc,sqlserver,EF core,signlR推送,MemoryCache,PowerDesigner,minio分布式对象存储框架,ffmpeg视频在线转码处理技术,http图片在线压缩裁剪技术 项目架构:三层,业务层和数据层皆采用接口方式,数据层采用EF Core仓储模式 个人职责:全权负责整个系统的编写,技术研发,框架搭建,ui由设计师设计, 实现系统的业务逻辑设计编码 业务层接口和数据层接口采用依赖注入形式调用解耦 设计数据库 实现系统框架设计,接口设计,数据层仓储模式搭建 搭建minio分布式对象存储服务集群,两个节点 实现视频在服务器端在线转码为MP4 实时推送视频的转码情况到前端展示 项目2:信息报送系统 项目架构:B/S 项目描述:实现各个部门文章信息的上报,并需审核通过的文章才可以发布到内网门户网站,审核通过的文章根据栏目价格计算各个作者的文章稿酬,审核步骤:本部门审核--》领导初审--》高级领导终审--》发布,每步审核都记录审核人日志。统计模块统计各个部门作者的稿酬,实现导出excel电子表格,支持打印。文章作者权限只能上报,审核人审核,发布人发布的角色分开形式。 使用技术:asp.net mvc,sqlserver,EF core,MemoryCache,PowerDesigner,layui 个人职责: 搭建系统框架,系统采用三层架构,业务层,数据层都是用接口 数据层采用EF,仓储模式 业务层接口和数据层接口采用依赖注入形式调用解耦 实现审核流程设计 实现数据库设计 编写整个系统代码
技      能: .NET  
¥400 / 8小时
立即预约
ID:20635
崔淑兰 Java工程师 14年经验
2024-07-28
个人介绍:语言: 精通Java编程 后端框架: SpringCloud、SpringCloud Alibaba、SpringBoot、MyBatis、MyBatis-Plus等主流框架。 接口: restful、rpc 支付: 微信支付、支付宝支付 前端框架: Vue3、Vue2、Uniapp、antd、elementui等 数据库: MySQL、Oracle、MongoDB 服务器: Nginx、Apache 缓存: Redis 消息队列: Rabbitmq、RocketMQ、Kafka 搜索引擎: ElasticSearch 系统部署: Docker、jenkins、Ranncher 分库分表: shardingsphere 分布式事务: Seata 分布式锁: Redisson、基于setnx等 源码阅读: Spring、SpringCloud、Nacos、MyBatis、RocketMQ等源码解读。 通信: WebScoket、Netty 工作流: activity 对象存储: OSS、Minio等。 OS: Linux、Windows 报表: echart 代码版本控制: Git 其他: Nacos、maven、Gradle、idea、vscode等 持有英语六级、软件设计师中级等证书。
项目经验:名称:美孚黑霸王微信小程序 岗位:java开发工程师 时间:2021/03 – 至今 环境:Idea+Tomcat8+MySQL+GitLab+Nginx 架构:springboot+springcloud+mysql+redis+RabbitMQ+SpringSecurity+Oauth2+Jwt 平台端:营销管理(签到、抽奖、调查问卷、邀请有礼、秒杀),标签管理(标签配置、标签概览),风控管理,系统管理(账号管理、角色管理、部门配置,系统配置) 小程序:登陆(微信登录),签到(赠送积分、实物/非实物、赠送抽奖次数等奖励),抽奖,调查问卷,邀请有礼,扫码买油,积分商城(虚拟、实物礼品兑换),积分明细、购物车、兑换记录、中奖记录、购物得积分、会员专属活动,我的车辆、我的信息、专属客服、海报中心、关注公众号。 职责: 参与需求评审,需求分析。 开发系统风控模块。 开发标签打印及其记录的统计以便运营人员分析客户行为。 开发抽奖模块的新增与编辑。 开发签到模块功能(赠送积分、实物奖品等)。 参与数据库设计。 积分明细、积分兑换扣减功能开发。 对接第三方接口。 名称:资产管理系统 岗位:java开发工程师 时间:2020/02 – 2021/3 环境:Idea+Tomcat8+MySQL+GitLab+Nginx 架构:SpringBoot+Activity+MySQL+Redis+SpringSecurity 背景:传统资产的管理数据容易丢失,资产分配的流水难以统计跟踪等。资产管理系统应运而生,专门维护资产信息,全程跟踪资产的生命周期(入库、申领、归还、调拨、盘点、打印标签、折旧、报废),其中会涉及工作流(申请、审核流程)等。 系统主要包括以下模块: 后台管理端:资产管理(资产信息、资产标签)、组织管理(部门管理、用户管理)、日常任务(资产领取申请、调拨、打印标签、盘点、报废等)、系统管理(数据字典、系统日志)、基础配置(商家管理、合同管理) 职责: 参与需求评审,需求分析。 开发合同管理、商家管理、用户管理模块。 设计调拨流程,以及编码实现。 统一前端系统风格、样式美化、互动性。 审查代码。 参与数据库设计。 缺陷修改。 协助用Docker部署在阿里云线上环境。 名称:商城小程序 岗位:java开发工程师 时间:2022 – 至今 环境:Idea + MySQL + Git+ Gitee 架构:SpringBoot + MyBatis-plus + SpringSecurity +MySQL+ Redis +Jwt 系统主要包括以下模块: 后台模块:商品管理(商品信息、分类管理、商品规格、商品收藏、用户足迹),会员管理(会员信息、会员等级、等级任务、在线会员),订单管理(订单信息、评论管理、售后),优惠券管理(优惠券配置、领取记录),营销管理(秒杀商品、秒杀活动、砍价商品、拼团商品、拼团列表),系统管理(用户管理、角色管理、部门管理、字典配置)。 小程序功能:下单购物、购物车、微信登录、签到有礼、积分商城、我的收藏、我的足迹、我的拼团、我的地址、邀请有礼、订单(待付款、待发货、待收货、待评价、退款/售后)。 职责: 系统架构设计、技术选型、系统搭建、工具类封装、内核设计 系统管理模块设计与开发 商品管理模块设计与开发 会员管理模块设计与开发 优惠券模块设计与开发 系统目前开源了一部分 小区管理系统,租房管理系统,聊天系统,求职招聘系统等的开发
技      能: Java  
¥400 / 8小时
立即预约
ID:21551
张桂英 .Net高级研发工程师 6年经验
2024-07-26
个人介绍:1.熟练CS/BS架构 熟练掌握.Net中MVC/Entifty FrameWork/Bootstrap/Winform,在工作中引用相关的设计和认知,并且去更好的去完善该框架等。 2.Server Sql 数据库表的基本结构及数据库表的组成部分和常用数据类型 3.jquery和运用H5实现业务模块 4.C#语言 5.熟练掌握Lambda表达式 6.Net开发环境Visual Studio 7熟练掌握WebApI,WebService 8熟练掌握代码管理工具如Git、SVN,并对其有使用经验,以及对其他的原理机制有一定的了解 9熟练掌握HBuliderX,百度开发者工具,微信开发者工具 10熟练掌握Navicat数据库管理工具 11熟练操作服务器管理配置、【阿里云或腾讯云配置】、IIS证书、域名解析等
项目经验:1.项目描述:OA平台关键的特征就是它的开放性,真正做到了“随需应变”的管理,能够让用户轻松的自定义各种业务模块,并在不影响,不停止现有应用的状态下进行更新 项目职责:负责技术选型,对接业务需求,梳理完善整个业务线,跟其他同事一块完善业务部莫 工作相关问题及技术:框架采用MVC三层+EF框架组成,开发过程中数据库查询用Lambda, 项目定时操作使用SQLServer定时任务,第三方使用阿里云认证等接口,同时前后台采用layui样式 2.项目名称:小程序商城拼团 项目描述:项目为一个在线购物平台,同时也是一个为客户服务的平台,对于商品进行拼团抢购,最终在出价最高者停拍,系统自动随机抽中中奖者 项目职责:对接业务需求,配合前端去写后台API接口 工作相关问题及技术:后台框架采用EF,数据存储于SQL SERVER,前台采用H5去实现业务模块 3.项目名称:天天购(商城) 项目描述:该平台为线下人们方便服务的,可搜索商家根据商家定位去实体店购买,线上话费充值,购买火车票,充值加油卡等 项目职责:对接需求,前端出前台页面,我进行页面绑定去实现业务模块等操作 工作相关问题及技术:整个框架运用于Bootstrap,数据存储于SQL Server,话费充值,火车票,加油卡等操作采用第三方(聚合)接口进行开发 4.项目:原生APP 项目描述:该APP为买矿机,对接第三方的活体实名认证,对接中币的ZTPay等 项目职责:对接需求,配合安卓和IOS端去写API接口 工作相关问题及技术:后台框架采用EF,数据存储于SQL SERVER,API接口写完, 1、用Postman内测 2、接口地址更新于Eolinker API 5.项目名称:进销存管理系统 项目描述:该系统是方便电商公司出库,入库,不同管理人员去分配不同工作而用到的系统,方便后期查账,管理公司使用的 项目职责:对接需求方案,确认进销存页面的布局 工作相关问题及技术:采用MVC的三层,数据存储于SQL SERVER 6.项目名称:公司内部多种ERP,CRM管理系统 ①优化ERP内部业绩展示等 7.根据前台UI设计模板去做后端各种需求功能,前端写好静态页,我这边进行页面功能嵌套+功能实现操作 8.公司内部使用茶叶会员小程序,在ERP有该信息,使用微信小程序授权登录显示各种信息记录等,律师小程序开发 9.开锁,电脑维修,道路救援,工商注册等多种小程序开发 10.项目:CS三层架构,WinForm去开发企业提供信息化管理系统,设备安装,部署实施 11.项目名称:预算管理系统和费用报销管理系统
技      能: .NET  
¥400 / 8小时
立即预约
ID:22508
王小红 大数据开发工程师 10年经验
2024-07-25
个人介绍:掌握Linux 基础操作命令,能够编写简单的 Shell 脚本 熟练Mysql,Oracle等主流数据库,能够基于MySQL等数据处理引擎进行数据开发 熟悉Hadoop组件的Hdfs读写流程、MapReduce计算流程、Yarn资源调度 掌握Hive窗口函数及内置函数的使用,能够基于Hive进行数据开发 熟悉Flink流计算框架,有过实时项目经验熟悉Flink内部运行机制 熟悉Spark架构的执行流程以及工作原理,以及RDD之间的依赖和Spark的容错机制 熟悉Hbase架构原理及读写流程、rowkey设计原则、Hbase性能优化 掌握Kafka基本原理,使用Kafka消息中间件存储并消费数据 熟悉使用Flume完成日志采集,使用Sqoop完成义务数据的导入 熟练使用阿里数据中台DataWorks DI、DataHub等数据接入组件 熟练Azkaban、sqoop、dataX等开源的ETL调度、同步工具 熟悉Clickhouse、Kylin、Presto等OLAP引擎的原理以及源码 熟练使用FineBI、Sugar等可视化报表组件 熟悉数据仓库建设和维度建模,有较丰富的离线或实时数仓建设和数据 ETL 设计开发的经验
项目经验:通过Flume程序实时监控采集商城日志数据文件,实时采集到kafka作为原始日志数据 使用FlinkCDC实时迁移Mysql中的用户行为数据存到kafka中构建ods层 调用重分区算子,rescale,rebalance,shuffle解决kafka的topic分区之间数据不均匀,防止数据倾斜 负责构建dwd层通过Flink应用程序使用操作符对ods层数据进行清洗,过滤等操作 使用redis作为热点数据的旁路缓存,使用Flink的异步IO实现对外部系统的异步访问,提高程序性能 构建DWS宽表:通过预加载,双流join,lookupjoin实现维度关联,将宽表数据存入Clickhouse 使用异步IO实现连续发送多个请求,提高并发效果,减少多请求等待带来的消耗 通过ReplacingMergeTree保证最终一致性,查询时的sql语法加上去重逻辑,保证ClickHouse的一致性 利用web ui定位,查看火焰图平顶,并分析GC日志,调整资源解决Flink反压 ADS层指标:产品总数,上架商品的sku/spu数,交易成功指标数,浏览下单数,支付买家数等 使用DataV调用接口进行可视化报表展示 参与将项目部署到Flink on Yarn,通过WebUI查看资源使用,以提高集群的资源利用率 负责阿里云离线项目的整体架构设计和实施,包括技术选型、系统数据流程设计等 使用Flume等日志采集工具进行日志采集和聚合 利用MaxCompute等大数据计算框架进行数据处理和分析,为项目提供数据支持 使用Quick BI、DataV等工具进行数据可视化展示,为项目提供直观的数据视图 负责数据的安全性和隔离性,采取必要的措施防止数据异常和敏感数据泄露 设置定时调度任务,对项目进行监控和管理,确保项目的正常运行
技      能: 其他  
¥1400 / 8小时
立即预约
立即预约
意见反馈