头像
梦难迁
已认证
大数据架构师
北京
15年经验
在找工作
远程工作
大数据算法
费用报价
远程工作: 1500元/人天
驻场工作: 2000元/人天
工作时间
工作日:9:00至18:00
星期六:9:00至18:00
星期日:9:00至18:00
个人简介
1. 喜欢思考问题,学习新东西。工作积极讣真,细心负责,有很好的自学能力和接受能力。 2. 善亍从工作中找到乐趣,并带给团队中的其他人。管理团队时能够调劢每个人的特长和积极性,提高团队的执行力和综合水平。 3. 闲暇时喜欢泡茶,听音乐,运劢,旅行等。
学习经历
华南农业大学 数学与应用数学
2004/09/01 - 2008/07/12
所学专业在广东省排名第三,师资力量雄厚。所学课程有概率与数理统计,数学分析,高等代数,神经网络,数据结构,数据库,软件工程,C 语言, SAS 与现代统计,微观经济学,数值分析,离散数学,近世代数等。
工作经历
新略数智科技有限公司
2021/10/01 - 2024/04/04
数据部负责人,针对阿里,京东,抖音,快手,拼多多的广告、营销、日志等数据,搭建 OLAP 数仓,开发 BI 和自研产品看板。负责架构和研发,设计和搭建大数据平台,数仓建模及功能迭代的管理和开发。使用阿里云DataWorks、MaxCompute、Flink、MySQL、ClickHouse平台。
安心互联网保险
2020/05/06 - 2021/09/01
1. 参与安心保险大数据平台产品的技术和流程优化,报表数据集市搭建,对用户投保理赔行为数据建模分析。 2. 平台使用腾讯云及其大数据基础套件搭建,包括 Hadoop,Hive,Spark,Sqoop,Tez 等。 3. 数仓使用 Hive 和 GreenPlum 搭建,分为 ODS 层、明细层、汇总层及服务层。提供数据清单,指标统计和数据集市功能,数据从投保、再保、理赔、ERP 等业务系统用 Sqoop 每天定时抽取、计算和输出。 4. 根据用户投保记录、理赔记录等对用户进行分类评分。统计用户指标,使用聚类分析建模。分析结果给投保中保费及保额的制定提供参考。
北京彩智科技有限公司
2018/09/01 - 2020/04/01
中国福利彩票数据分析系统:主要负责北京、广东数据计算、稽核等,建模对数据进行探索分析。包括: 1. 使用 Hadoop、Hive 集群搭建后台数据存储和处理平台,利用 Spark 做数据解析、验证和转换处理。 2. Spark 任务定时对增量数据处理形成事实数据。投注站、销售网点等信息及爬取互联网日历、天气等数据作为分析维度。 3. 利用 Kylin 创建 OLAP 海量数据分析的预计算 Cube 满足多维的实时查询统计需求。 4. 采用余弦相似度算法对一定地域范围内彩票点的竞争性分析给出店铺增减的参考建议。
北明软件有限公司
2013/10/01 - 2018/08/31
主要负责中石油项目: 1. 中石油营销优化测算分析平台:本人担任项目经理,负责系统架构设计,后台数据处理与模型设计与开发,使用 Python 语言处理数据和建模。对关键指标预测,计算效益最大化时汽油批发零售的销量和价格。 2. 中石油物流系统2.0库存优化模块:主要负责后台数据和 ETL 流程设计及数学建模。后期对模型优化,并参加现场培训等。采用 ARIMA 结合 ESM 模型对未来三个月汽柴油出库量预测,结果推送到物流系统数据库供查看和调整。以调整后预测出库量为需求,结合生产总油、涨降库计划、运输成本等作为约束条件,效益最大化为目标函数建立优化模型,计算各油库配置量,结果输出给物流系统。
专业技能
数据仓库
Hadoop
Spark
Hive
Flink
SQL
ClickHouse
Iceberg
Presto
BI
DataWorks
MaxCompute
MySQL
PostgreSQL
Kafka
logo
浙公网安备33011802001633号
浙ICP备1805484号-2