问答文章1 问答文章501 问答文章1001 问答文章1501 问答文章2001 问答文章2501 问答文章3001 问答文章3501 问答文章4001 问答文章4501 问答文章5001 问答文章5501 问答文章6001 问答文章6501 问答文章7001 问答文章7501 问答文章8001 问答文章8501 问答文章9001 问答文章9501

大数据运维的主要工作内容是什么?

发布网友 发布时间:2022-04-23 00:58

我来回答

3个回答

热心网友 时间:2022-05-05 14:30

大数据相关工作岗位很多,有大数据分析师、大数据挖掘算法工程师、大数据研发工程师、数据产品经理、大数据可视化工程师、大数据爬虫工程师、大数据运营专员、大数据架构师、大数据专家、大数据总监、大数据研究员、大数据科学家等等

数据分析师:
工作内容:
a.临时取数分析,比如双11大促活动分析;产品的流量转化情况、产品流程优化分析,等等;
b.报表需求分析--比如企业常见的日报、周报、月报、季报、年报、产品报表、流量转化报表、经营分析报表、KPI报表等等;
c.业务专题分析:
精准营销分析(用户画像分析、营销对象分析、营销策略分析、营销效果分析);
风控分析(策略分析,反欺诈分析,信用状况分析);
市场研究分析(行业分析、竞品分析、市场分析、价格分析、渠道分析、决策分析等等);
工具和技能:
工具: R、Python、SAS、SPSS、Spark、X-Mind、Excel、PPT
技能:需掌握SQL数据库、概率统计、常用的算法模型(分类、聚类、关联、预测等,每一类模型的一两种最典型的算法)、分析报告的撰写、商业的敏感性等等;

数据挖掘工程师:
工作内容:
a.用户基础研究:用户生命周期刻画(进入、成长、成熟、衰退、流失)、用户细分模型、用户价值模型、用户活跃度模型、用户意愿度识别模型、用户偏好识别模型、用户流失预警模型、用户激活模型等
b.个性化推荐算法:基于协同过滤(USERBASE/ITEMBASE)的推荐,基于内容推荐,基于关联规则Apriot算法推荐,基于热门地区、季节、商品、人群的推荐等
c.风控模型:恶意注册模型、异地识别模型、欺诈识别模型、高危会员模型、
电商领域(炒信模型、刷单模型、职业差评师模型、虚假发货模型、反欺诈模型)
金融领域(欺诈评分模型、征信评分模型、催收模型、虚假账单识别模型等)
d.产品知识库:产品聚类分类模型、产品质量评分模型、违禁品识别模型、假货识别模型等
e.文本挖掘、语义识别、图像识别,等等
工具和技能:
工具: R、Python、SAS、SPSS、Spark、Mlib等等
技能:需掌握SQL数据库、概率统计、机器学习算法原理(分类、聚类、关联、预测、神经网络等)、模型评估、模型部署、模型监控;

数据产品经理:
工作内容:
a.大数据平台建设,让获取数据、用数据变得轻而易举;构建完善的指标体系,实现对业务的全流程监控、提高决策效率、降低运营成本、提升营收水平;
b.数据需求分析,形成数据产品,对内提升效率、控制成本,对外增加创收,最终实现数据价值变现;
c.典型的大数据产品:大数据分析平台、个性化推荐系统、精准营销系统、广告系统、征信评分系统(如芝麻评分)、会员数据服务系统(如数据纵横),等等;
工具和技能:
工具: 除了掌握数据分析工具,还需要掌握 像 原型设计工具Auxe、画结构流程的X-Mind、visio、Excel、PPT等
技能:需掌握SQL数据库、产品设计,同时,熟悉常用的数据产品框架

数据研发工程师:
工作内容:
a.大数据采集、日志爬虫、数据上报等数据获取工作
b.大数据清洗、转换、计算、存储、展现等工作
c.大数据应用开发、可视化开发、报表开发等
工具和技能:
工具:hadoop、hbase、hive、kafaka、sqoop、java、python等
技能:需掌握数据库、日志采集方法、分布式计算、实时计算等技术

热心网友 时间:2022-05-05 15:48

大数据运维,这里指互联网运维,通常属于技术部门,与研发、测试、系统管理同为互联网产品技术支撑的4大部门,这个划分在国内和国外以及大小公司间都会多少有一些不同。

一个互联网产品的生成一般经历的过程是:产品经理(proct manager,非技术部)需求分析、研发部门开发、测试部门测试、运维部门部署发布以及长期的运行维护。

一般来讲国内的互联网运维负责软件测试交付后的发布和管理,其核心目标是将交付的业务软件和硬件基础设施高效合理的整合,转换为可持续提供高质量服务的产品,同时最大限度降低服务运行的成本,保障服务运行的安全。

热心网友 时间:2022-05-05 17:23

付费内容限时免费查看回答负责大数据底层基础架构平台的运维、规划、部署、管理、扩容和优化等;保障系统7*24小时的稳定性和可用性,构建系统监控,容灾,自动化等运营体系; 负责组件Hadoop, Hive, Presto、Spark、Airflow 等大数据组件运维调优;参与大数据相关的开发工作。 任职要求: 本科及以上学历,至少2年以上大数据运维经验;精通Shell及Hadoop/Spark/Hive/Flink/调度系统等生态集群的建设及性能优化;熟悉Java语言,并有数据开发经验者优先(如数据仓库、数据分析、用户画像、算法等);思路敏捷清晰,较强的外部沟通能力;有责任心及抗压能力,有强烈的自驱力,并有良好的团队协作精神。

声明声明:本网页内容为用户发布,旨在传播知识,不代表本网认同其观点,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。E-MAIL:11247931@qq.com
女生多大后可以不在长身高? 如何不用软件把手机投屏到电脑上手机屏幕怎样投放到电脑上 战时拒绝、故意延误军事订货罪既遂的处罚? 战时故意延误军事订货罪处罚标准 名师1+1导读方案:汤姆·索亚历险记目录 三星sm-g7200打开微信慢,无法正常收看,网速不慢。 笔记本电脑如何调亮屏幕亮度 大伙说说洗衣机要不要带烘干好 热烘干洗衣机怎么样 ef英语哪个好 苹果手机有的软件不能下载怎么办? 矿机运维日常工作是什么样的 美版苹果下载不了软件,求救 IT运维中的linux运维具体每天工作是做什么的? 苹果手机下载不了软件怎么办? 电力运维部门工作计划 iphone11promax美版软件为什么会下载失败? 现在做的运维工作平常也挺闲的但是基本上学不到知识,应不应该继续干? linux系统运维实施工程师的职业怎么规划 系统运维个人职业规划怎么写 环境运维个人职业规划怎么写 跨行汇款怎么汇 给本人跨行转账汇款收手续费吗 跨行跨境转账多久能到账? 怎么用银行卡跨行汇款 跨行可以汇款吗? 怎么查询国内跨行汇款的到账状态? 怎么跨行汇款? vivo手机怎么剪辑视频片段? 有没有可以截取视频片段的软件? Linux运维工程师每天的具体工作是什么?需要哪些具体的技能知识?从事Lin... 面试系统运维工程师的工作规划怎么说比较好,就几句话会不会太少 苹果手机下载不了软件,怎么解决? 苹果手机下载不了国外的软件怎么办? 美版的苹果为什么下载不了山姆APP? 苹果手机下载不了任何软件怎么回事 我新买的苹果手机,下载不了东西怎么办 苹果手机怎么突然下载不了软件了? 美版iPhone4s无法在App Store下载东西怎么办 苹果手机APP下载不了软件怎么办? 如何在一号店开店、开店流程、开店条件和开店费用都是什么? 为什么这段时间移动4g网变得好卡? 我这里中国移动4G信号只有3格,平时看视频什么的没问题,但是打游戏的时候会时不时卡,该怎么办? 手机4g数据流量突然变得很卡什么原因? 手机4G上网变慢,中国移动的卡,怎么设置能让手机上网更快? 中国移动4g网很卡 移动4G上网很慢什么原因 中国移动信号4g信号差怎么办? 中国移动4G满信号但网速却很慢,怎么解决? 中国移动4G速度特别慢