姓名： 简小帮 性别： 男 年龄： 26岁 经验： 3年 手机： 18888888888 邮箱： user@cvhelp.cn 意向： 云计算/大数据 学历： 本科 婚否： 未婚 身份： 团员 |
|
教育背景
|
|
2017/9-2021/7
简历帮帮大学 本科-自动化 所学课程：c 语言，线性代数，概率论
|
|
工作经历
|
|
2022/12-2024/4
简历帮帮有限责任公司 数据开发工程师 工作描述：
在职期间带领3名新人，负责2亿 DAU 国民级应用 "百度搜索 APP" 数据仓库 架构搭建、性能优化、底层组建模块化、数据可视化、 组织推动作战地图、配置化相关功能等核心业务落地并交付。 团队管理： 带领3人团队负责百度搜索核心业务 "Badcase 周级数据挖掘以及数据可视化0-1搭建"、负责团队成员个人成长、管理期间人员绩效/稳定性均在同等团队中名列前矛、版本发布上线时间从原有的一个月缩短到两周，极大的提高了效率。 2021/3-2022/12
简历帮帮有限责任公司 数据开发工程师 工作描述：
核心开发人员 独立主导 集团战略级项目”能诚行情软件数据分析系统“、quot西门子工业场景数据接入quot 技术难题预研与攻关，并 克服了工业场景不同的数据采集协议数据接入问题，提升系统稳定性与性能、参加产品体系的 设计，开发，文档等工作、目前平台日调用量百万级、至今系统稳定运行，几年来0次严重故障，0投诉。 |
|
项目经历
|
|
2021/3-2022/12
行情软件数据分析系统 数据开发 项目描述：
1. 设计Flink实时数据监控系统,提高数据质量监控实时性和准确性,减少错误数据流入率40%。 2.实施基于角色 3.负责设计和实施HDFS数据兄余策略,通过优化数据复制因子,数据可用性提升99.99%,同时减少了20%的额外存储需求。 4.通过精心设计Kafka的消息路由和负载均衡机制,我有效缓解了数据热点问题,实现了更均匀的数据分布和负载,从而提高了整体集群的处理能力,达到每秒处理30万条消息。 5.确定指标的计算公式和方法,这些方法应该是可解释和可重复的。 6.负责HBase表的设计和优化,通过合理的行键设计和列族配置,减少了数据的兄余和扫描时间。该优化策略使得查询效率提高了30%,显 2022/12-2024/4
整页搜索基础数据平台以及数据可视化0 - 1搭建 数据开发 项目描述：
1.利用 Spark 优化数据存储策略,实现数据压缩率提高40%,有效减少存储成本同时保持快速的数据访问速度。 2.我负责开发和实施 ClickHouse 的安全策略,通过加密和访问控制,确保了数据的安全和合规性。 3.引入 MapReduce和 spark sql 框架对海量数据进行批处理,成功降低了40%的处理时间,显著提高了数据处理流。 程的效率和可靠性。 5.DWD :明细数据层,该层的主要功能是基于主题域的划分,向业务主题、以数据为驱动设计模型,并且基于星型建模,完成数据整合,提供统的基础数据来源。 6.引入 Hive 表连接优化技术,减少了数据处理过程中的资源消耗,提高了系统的整体 |
|
技能水平
|
|
MySQL
熟练 Linux
熟练 Java
熟练 |
|
自我评价
|
|
熟练掌握Java,Scala,python编程语言。,熟练掌握shell命令,git命令。,熟悉Hadoop,HBase,Hive,Spark,zookeeper,Flume,NiFi,Redis,Kafka,Azkaban等大数据组建。,熟练掌握flink,spark sql,spark core,spark streaming等开发技术。,熟悉hive,mysql,hbase,redis,clickhouse,iotdb,pi等数据库。,熟悉监控和可视化工具,包括Superset,Finereport,Grafana,sugarbi。,HCIP华为认证ICT高级工程师计算机四级
|
