熟悉c/c++ 熟悉c++11/STL/boost 熟悉多线程/socket 熟悉数据结构 熟悉python 了解常用设计模式/代码设计原则 擅长重构以及内存优化 熟悉spark/hdfs/scala/kafka/akka 拥有大数据设计开发调优经验

ID:22115
立即预约
立即收藏
沟通需求

微信扫码,联系客服沟通需求
个人介绍
项目经验
网络安全产品e开发 xxx是一款网络安全监控工具。主要功能是监控局域网网络活动,包括上网行为分析,会话分析,流量分析,网络安全分析等。软件架构是基于CORBA(Common Object Request Broker Architecture, 公共对象请求代理体系结构)的rpc,其中前端语言为java后端为c++. C++使用ACE_TAO,java使用JacORB.前后端数据库分别使用了mysql和berkeleydb. 主要负责后端linux c++测原始网络流量的抓取,分类,格式化,过滤和存储,并提供按需查询。 1.负责需求评审接收,工作量评估计划制定,需求分解模块设计,进度控制风险设别,代码实现UT以及高质量零偏差交付; 2.负责技术面试,新人培养,团队建设; 3.负责技能传导,代码检视,经验输出; 4.负责技术预研攻关,疑难杂症排除。 工作内容是云平台后端开发,针对输入的海量数据(二进制/文本)依据算法实现并输出 单机工具xxx开发 iDart是一款绿色、免安装、无数据库的windows单机工具,用来处理基站上各类通信设备日志,依据给定算法,将原始成G上T的二进制和文本文件,以excel/ppt/csv等文件形式输出。 工具同时也是一个平台,根据制式包含不同特性的热插拔插件。 其中界面部分使用c#开发,插件部分使用c++(vs2010)开发。 按照架构可分为平台、中间件和插件。 其中平台负责数据源的解析和分发;中间件根据职能对数据进行过滤清洗实现公共功能的聚合并提供接口;插件负责差异化定制化功能的实现。 数据源根据大小区分为静态数据源和分发数据源,静态数据源以单例形式常驻内存,分发数据源按照固定大小分批次解析下发; 不同中间件选择需要的数据源作为输入;各特性插件选择不同中间件以及部分静态数据源作为输入。 技术难点及解决方案: 在软件架构分层的基础上,插件运行的过程中,部分数据源需要全部数据进行计算,受硬件内存(4G)所限,引入了boost库的序列化来解决内存不足的问题。 解决了规格问题之后,性能问题逐渐成为插件的瓶颈,通过使用lock-free多线程加上map-reduce的软硬件方案得到了解决。 同时code-review和UT(google test/google mock)严格执行,保证尽量在编码阶段减少bug。 演进版本S: 随着一线业务需求扩大和变更,单机工具的易用性受到挑战。 软件架构再次发生变化,在新的架构里,xxx被重新定位为后端内部工具,c#界面部分由java开发的web来替代。 用户无需在本机运行xxx,直接通过访问固定网址,上传数据进行计算即可。 大数据开发IB 前端:AngularJS 后端:Hadoop+HDFS+Spark+scala+MySQL 输入:Space工具运行结果(zip格式) 输出:web界面展示 简述: S工具解决了实现了并行化的云计算,但运行效率以及用户体验不如人意。 随着时间推移,S每个月运行的任务成百上千,每个任务的结果大小以G为单位,而用户最关心的关键数据还需要通过再次计算。 I以存量的Space结果任务为输入,依据一线用户更细分的需求进行运算,结果保存在HDFS或者MySQL中,通过url返回给前端,通过Angular进行展示。
接单发单客服

添加客服微信,接单发单快人一步!
相关程序员推荐
杭州紫冰科技有限公司 AI、前后端开发 4年经验
我们是一支来自阿里、美团由软件高级工程师、算法工程师组成的高端软件研发团队。团队小而精,自2022年成立以来,为客户提供十几个软件解决方案。设计领域为门户网站、CRM系统、智能化系统、AI大模型、计算机视觉领域。已经有大量的项目开发经验。
dylan 高级开发工程师 3年经验
前端技能:
- 熟悉 Python、Java语言、分析、识别算法、自动化控制、python爬虫
- 熟悉 excel,数据处理,爬虫程序编写,具有开发实战经验
- 熟悉 Tornado、Scrapy、Sanic、FastAPI、等Python框架
- 熟悉 React、Vue 、uni-app等主流前端框架,并有项目实践经验
- 熟悉 HTML5、CSS3、JavaScript 等前端核心技术
- 熟练使用 Webpack、Babel 等前端工具
- 熟悉跨浏览器、响应式设计和移动端适配
后端技能:
- 熟练掌握 Python、Java语言,具备良好的编码习惯和代码质量意识
- 熟悉 Spring、SpringMVC、MyBatis 等主流后端框架
- 熟悉 MySQL 等关系型数据库的设计和优化
其他技能:
- 熟练使用 Git 进行版本控制
- 熟练使用 Linux 操作系统,具备基本的 Shell 脚本编写能力
- 具备良好的团队合作精神和沟通能力
tangjj c/c++ 开发,go开发,DBA 8年经验
从事互联网工作8年,有丰富的工作经验,参与和主导大型项目开发和设计
JDY2025 C++中级开发工程师 2年经验
本人985数学专业毕业,目前就读于香港理工大学IT技术专业硕士