ID:22794
黄明 爬虫工程师 14年经验
2024-12-27
个人介绍:网络协议和页面解析:了解HTTP/HTTPS协议和网页HTML结构,能够利用网络请求库发送请求并解析返回的页面内容。 数据抓取与存储:熟练使用Python编程语言,能够编写爬虫代码实现数据的自动抓取,并灵活运用正则表达式或解析库(如Beautiful Soup)提取所需数据。同时,对于大规模数据的处理和存储也具备相关能力。 动态页面处理:熟悉浏览器自动化工具(如Selenium),能够模拟用户行为、加载动态页面、执行JavaScript脚本,实现对JavaScript生成内容的抓取。 反爬技术应对:了解常见的反爬机制,如验证码、IP封禁、限制访问频率等,能够运用代理、用户代理池、随机请求头等技术绕过反爬手段,提高爬取效率和稳定性。 分布式爬虫与调度:具备分布式爬虫框架(如Scrapy)的使用经验,能够设计和搭建分布式爬虫系统,并进行任务调度、数据去重、分布式存储等工作。 数据清洗与预处理:具备数据清洗和预处理的能力,能够针对爬取的数据进行去重、格式转换、缺失值处理等操作,确保数据的准确性和一致性。 爬虫策略优化:能够分析网站结构和爬虫需求,制定合理的爬取策略,包括请求频率控制、代理IP的选择、登录验证处理等,提高爬虫效率和稳定性。
项目经验:爬取网易新闻并保存数据 全权负责可公开数据爬取 会使用js逆向技术 运用fillder软件 运用postman软件 字体解密操作 专业,负责
技      能: 其他  
¥900 / 8小时
立即预约
ID:20974
欧阳丽丽 高级Java工程师 5年经验
2024-12-27
个人介绍:能使用Hadoop、Hbase、Hive ,spark等进行大数据存储、处理和分析; 有Jave EE开发经验,熟悉Spring MVC 注解开发,iBATIS, Hibernate,Struts 2等后台技术,前端能使用Ajax,JSP,JavaScript,jQuery,CSS和html5等技术。
项目经验:国家电网物资运输监控平台 软件环境:CentOS 64位 硬件环境:8G内存+500G硬盘+百兆网卡+百兆局域网 集群规模:6台服务器 开发工具:Eclipse+ MySql + Tomcat 责任描述:1、负责数据后台的开发、维护,支撑数据平台的业务需求工作; 2、根据需求完成相关数据处理模块的开发; 3、负责对产品、市场团队技术支持; 4、负责基于Hadoop的并行计算平台的开发与优化工作; 5、与部门进行跨地域跨文化的沟通和合作,共同开发维护数据产品。 项目描述:基于国家电网物资运输监控系统一期,采用大数据处理技术,对车辆行驶的经纬度坐标信息进行分析处理以及运输任务数据挖掘。主要业务有路段情况预判,工况数据分析,计划路线推荐等。主要技术采用Hadoop框架中的MapReduce计算处理数据,HDFS存储,Hive数据仓库,数据库持久层使用Hbase和MySQL ,Web后台采用Jave EE, 前端使用Ajax,JSP,JavaScript,jQuery,CSS和html5等技术。
技      能: Python  
¥1200 / 8小时
立即预约
ID:22607
杨林 程序员和PPT制作 13年经验
2024-12-27
个人介绍:大家好,我是一名热衷于编程的软件工程师。自小对计算机科技产生浓厚兴趣,我始终怀揣着对编程的热爱与追求。 我拥有丰富的编程经验,熟练掌握多种编程语言,如Python、Java和C++等。在大学期间,我积极参与各类项目,不仅提升了自己的技术水平,也培养了团队协作能力。毕业后,我曾在一家知名互联网公司担任软件工程师一职,负责开发和维护公司的后端系统。 工作中,我善于沟通、乐于学习,始终保持对新技术的敏锐洞察力。我相信,只有不断进步与创新,才能使我们在日新月异的科技世界中立足。希望能在接下来的日子里,与大家一起努力,共同进步!
项目经验:我曾在一家互联网公司担任项目负责人,负责一项关键的软件开发项目。这个项目的目标是开发一款新的在线支付系统,以提升公司的业务效率和用户体验。 在项目中,我主导了整个开发流程,从需求分析、设计、编码到测试和上线。我带领团队在规定的时间内成功地完成了项目,获得了公司和客户的高度认可。通过这个项目,我积累了丰富的项目管理和团队协作经验,提高了自己的技术水平,学会了如何应对各种突发状况,更好地解决问题。 这个项目让我深刻认识到,一个成功的项目需要优秀的领导力、高效的团队协作以及扎实的技术基础。
技      能: 其他  
¥500 / 8小时
立即预约
ID:21331
张丽娟 .net高级开发工程师 5年经验
2024-12-27
个人介绍:有4年 B/S,C/S开发工作经验,有较丰富的Web项目和C#后端的开发和实施,项目分析经验 1.熟练掌握C#,LIng,WPF 2.熟练掌握主流数据库Mysql,SQL server,Oracle 3.熟练掌握 Restfull风格WebAPI,jquery 4.熟悉并在项目中使用过Razor 5.熟悉ASP.NET,Web Service,WPF,ADO.NET ,.NET.core开发经验,.net framework4.0和三层架构以及具备Mvc,MVVM开发模式 4.熟练掌握SQl语句和存储过程的编写,数据库函数,有一定的SQl性能分析与优化能力 5.熟练掌握HTML/HTML5,css/css3,JavaScript,Ajax等Web前端开发技术,Jquery,Vue.js,layui等框架
项目经验:百信购物管理系统 总体逻辑框架:用户登录:商场工作人员使用相关权限登录。商品管理:对商品进行下架,以及上架操作,同时也可以添加新品进行销售。订单管理:对顾客下单后的所产生的订单号进行不同状态和不同条件的查询以及做标记。配送管理:对顾客所购买的商品进行配送发货。优惠卷管理:可以给自己的商城对应的商品添加对应的优惠卷,或者可以设置满减卷等。会员管理:顾客再商城上购买或充值都可以升级为会员,会员进行消费可消费金额对应的积分。统计管理:对该商城上旬,中旬,下旬,一季度等等的销售额以及盈利情况进行统计。权限管理:给不同的员工赋予不同的权限,让其操作不同的业务。员工管理:对员工情况经行修改以及添加新的员工。供应商管理:管理产品对应的供应商的信息以及对应产品的报价和添加供应商。营销管理:对新品和爆品经行营销和推广发布相关的活动信息自由编辑和灵活搭配。库存管理:可以对商品进行一键入库,出库,以及库存预警等功能。 该项目是基于mvc框架,具体使用了Asp.net,SQL Server,Razor,WebApi,EasyUI前端框架,js,Ajax,html5等技术。 主要职责:任开发人员,主要任务是编写库存管理,订单功能,优惠卷管理,项目实施阶段配合客户内部进行功能讲解及培训工作。 具体开发方式:对任务模块的界面使用Html5以及Js,css,以及EasyUl的方式经行构建,通过EasyUl和Ajax对页面数据采用Http协议进行Post提交数据。把订单数据和优惠卷数据写成WebApi的方式供别人调用以及访问。通过Razor生成动态的优惠卷展示到网页上面去。 飞鸽药业管理系统 ERP管理系统是现代企业运行模式。它是一个在全公司范围内应用。高度集成的系统,覆盖了客户,项目,库存,采购,供应,生产,等管理工作。可以将企业资源效益最大化 该系统采用B/S架构, 主要模块分为:采购管理,销售管理,库存管理,账款管理,仓库管理,生产管理,成本管理,药品管理,客户文件管理,财务管理,供应商管理等。 基本架构: 数据实体类库:主要是对数据库里的表进行实例化成类 数据访问类库:将提交过来的数据对数据库进行数据的存储和修改等 业务处理类库:处理相关的模块之间与的计算以及统计和汇算等相关业务 控制器:负责将页面传导过来的数据发送给业务层,同时将业务层返回的数据传递给视图。 显示层:显示界面,并且将控制器传递的值进行展示,同时也需要将数据提交到控制器当中去。 主要使用了:.net.core,JavaScript,SqlServer,Css,HTML5,EasyUl,Vue.js,Web Service,mvc 系统总体逻辑框架:采购管理:由审核人通过的请购清单来采购,生成采购订单,分别有采购入库、采购退货等。销售管理:跟销售商进行相对的合作来实行销售操作,如报价单是货比三家而来确定最后的合作销售商,产生销售订单以及发货出库,销售退货等。 库存管理:对库存进行盘点的管理,出入库操作都会影响库存管理。账款管理:由供应商或者销售商产生的合作关系来记账。仓库管理:如仓库调拨,仓库清仓等。客户主文件:该客户是经常合作的还是第一次合作的等。生产管理:根基需求该物料的程度来计划需求多少物料,前提是已经购买过的。成本管理:预算生产所需管理统计成本。药品管理:对生产的药品经行分类管理。客户文件管理:记录客户文件信息。财务管理:对于原材料购买和出售的资金流水经行记录。供应商管理:针对不同原材料的供应商信息及原材料的价格经行记录。 主要职责:个人实现了账款管理模块的, 账款的收款,付款,预付款.参与数据库的设计和实现,采用敏捷开发模式,效率高而且更质量化的完成该项目。 开发方式:使用html5和Css以及EasyUl搭建页面样式,使用.net.core中的MVC模式去实现页面与数据的交互,通过Vue.js框架实现响应的数据绑定和组合的视图组件,以及通过Web Service获取其他模块所产生的账款信息。
技      能: .NET  
¥1400 / 8小时
立即预约
立即预约
意见反馈