【数据分析】:什么是数据分析?-程序员宅基地

技术标签: 数据分析入门到实战  数据分析  人工智能  数据挖掘  

【数据分析】:什么是数据分析?


  • 个人主页:JoJo的数据分析历险记
  • 个人介绍:统计学top3研究生
  • 如果文章对你有帮助,欢迎关注点赞收藏订阅专栏
  • 本文收录于【数据分析】本专栏介绍数据分析从入门到项目实战,包含用户分析、留存分析、行业分析 等。本系列会坚持完成下去,请大家多多关注点赞支持,一起学习~,尽量坚持每周持续更新,欢迎大家订阅交流学习!

一、什么是数据分析

随着数据时代的到来,数据分析师、数据科学家等职位越来越热门。纽约时报将数据科学家称为“21世纪最sexy”的职业。我们接下来来看看什么是数据分析。

1.什么是数据?

数据:是科学实验、检验、统计等所获得的用于科学研究、技术设计、查证、决策等的数值。

在企业中,我们每天有大量的数据产生。那么我们怎样使用这些数据呢?

首先,我们的数据有以下三个特性

  • 数据的变异性:正是因为数据的变异性,才需要我们进行数据分析。
  • 数据的规律性: 在海量的数据中,虽然表面看上去杂乱无章,但是往往存在内部的规律性,而数据分析的工作可以来发现这些规律,从而得出相应的结论。
  • 数据的客观性: 数据是通过客观产生的,并不能以我们人的意志转移,正是因为这样,数据分析才是可靠的。

2. 数据可以做什么?

在我们日常生活中,无时无刻不在使用数据。例如:每天的天气预报,就是通过历史的天气等数据信息进行预测。在当今时代,数据越来越重要。得数据者得天下。

那么对于企业运营而言,可以让我们:

  • 1.了解整体的运营情况
  • 2.了解各部门项目的情况
  • 3.未来发展趋势

对于产品开发而言:

  • 对产品定位
  • 广告投放
  • 运营策略

在不同行业有不同的应用:

电商类:电商网站有大量的用户行为数据。例如购买、点击、浏览、完单等。通过这些数据,数据分析师可以了解不同的用户的行为路径,制定相关策略来产生销量

社交类:对于社交网络数据,可以更好的进行精准推荐(推荐算法),可以改善用户服务和体验

医疗类:现在在医疗领域,数据分析也变得越来越重要,对医疗数据进行进行分析,帮助医疗结果改善卫生服务,并提高发现潜在隐患的机会。例如,疾病个性化问答,医疗知识图谱

金融类: 在金融行业,通过对用户的日常交易数据进行分析,可 以帮助信贷机构评判用户的信用等级,确定信贷额度

二、如何成为一个优秀的数据分析师?

数据分析不是一味的跑数据、建模型以及用各种高深的算法来炫技,对于一个好的数据分析师而言,一定要对业务有很好的了解。其次能够熟练的使用各种工具,以及能够有良好的沟通表达能力。

1.业务理解

对业务的理解决定了一个数据分析师的上限

  • 对行业和产品有热情:从事数据分析工作,首先必须要对 进入的行业和产品感兴趣,有好奇 心,愿意学习一切未知的知识
  • 关注对企业业务产生的价值:能够把业务和数据结合起来,尝试用数据量化业务状态和结果,能够 用数据解释潜藏的未被发现的业务逻辑
  • 多问为什么:当分析需求来的时候,要问下为什么要做这个分析,想解决什么问题。不要做无情的取数机器

2.工具使用

技术水平决定了数据分析师的下限

对于数据分析师而言,一定要掌握基本的数据分析工具:excel、Mysql、Tableau、R、Python等

  • 熟练使用各类分析模型和分析方法 :对使用的模型能清楚其优劣势;对没用过的方法能有所了解,在遇到 已有方法解决不了的问题时能够 联想到尝试其他方法是否可以解决
  • 对数据的敏感度,具有良好的统计学基础:能够及时发现数据展现的问题,指出深挖的方向;对数据的理解有很强的逻辑性和科学性
  • 掌握基本的编程语言能力:SQL/Python/R; SQL是基础 ,Python或R可以提升长期工作效 率

3.沟通表达能力

数据分析师总是需要通过说服产品和工程方面来改变产品,产生影响力

  • 能够跨部门高效沟通
  • 良好的数据可视化能力和 撰写分析报告的能力

三、数据分析的四大步骤

数据分析可以大致分为下列四个步骤:

image-20220801083702681

1.数据抓取

数据抓取也被称为数据采集,是整个数据分析工作的起点。所采集和抓取的全不全、 对不对,直接决定数据分析工作的质量,影响后续所有的环节。可能数据分析师不需要自己动手进行数据抓取,但是需要对这些数据进行规划。首先我们来看看在企业内数据的主要来源:

  • 埋点:是针对特定用户行为或事件进行捕获、 处理和发送的相关技术及其实施过程。
  • 爬虫:利用代码模拟人的行为去各个网站抓取数据
  • 程序应用接口:连接各种软件系统,为了能在各系统之间共享数据而开放的技术接口管道

如何规划数据埋点

  • 业务需求拆解,转化为数据要求,要和业务方沟通好统一要求
  • 定义数据口径和指标统计方式。
    • 对各项时间进行分类聚合
    • 确定指标的数值类型、计数方式
    • 4W1H模型选择数据

常见的数据埋点:

  • 点击
  • 曝光
  • 页面停留

下面我们来看一个小案例

京东数据埋点案例:

image-20220801084523001

首先,对业务进行拆解

  • 促销活动:查看用户转化情况
    • 页面访问
    • 领券
    • 查看详情
    • 购买
  • 新人礼包:拉新和留存情况

进行埋点选择

Who:

  • 用户的ID
  • 登录用户和非登录用户
  • 老客和新客
  • VIP和非VIP
  • 活跃和非活跃

what:

  • 点击优惠券
  • 领取优惠券
  • 使用优惠券

when

  • 客户端的时间
  • 服务器的时间(可能会受到海外时差的影响)

where

  • 活动页面

How

  • 设备、网络等

2.数据清洗

数据清洗是数据分析很重要的一环,也是数据分析中占比很大的一部分。要做的是利用有关技术如数理统计、数据挖掘或预定义的清理规则将脏数据转化为满足数据质量要求的数

缺失值数据

  • 根据数据信息补全
  • 特殊值、平均值、统计学模型补全
  • 直接删除(谨慎使用)

格式处理

  • 时间、日期
  • 数据错位

逻辑处理

  • 去重
  • 异常值处理

3.数据分析

数据分析是指通过某种方法和技巧,对准备好 的数据进行探索、分析,从中发现因果关系、 内部联系和业务规律等分析结果,为特定的研 究或商业目的提供参考。

image-20220801085800936

描述性分析(发生了什么?): 描述某项事物的特性。需要准确、完善甚至是实时的数据。

诊断性分析(为什么会发生?) 在对描述性数据进行评估时,诊断分析工具将使分析师能 够深入到细分的数据,从而隔离出问题的根本原因。

思考题:为什么6月份京东电商平台的订单量激增?从哪些角度去分 析?需要哪些数据?

  • 1.618活动

  • 2.流量的变化情况

  • 3.转换率的购买情况

  • 4.用户的购买频次

  • 5.爆款商品

预测性分析(将会发生什么) 对数据特征和变量的关系进行描述,基于过去的数据对未来进行预测。

规范性分析(需要做什么?) 规范模型利用对发生的事情的理解,为什么发生了这种情 况以及各种“可能发生的”分析,以帮助用户确定采取的最佳行动方案

4.业务决策

数据分析师总是需要通过说服产品和工程方面来改变产品,产生影响力

清洗的可视化和完整的报告分析: 能够把分析结果变得直观、简单、易理解;分析报告全面、有逻辑、经得住推敲;分析结论可靠、可验证

  • 要保证图表的可信性:一定要是客观的
  • 高效传达信息
  • 符合美学原则

推动产品按数据分析的结 论进行修正、落地:数据分析师总是需要通过说服产品和工程方面来改变产品,产生影响力。

撰写数据分析报告的要求

分析报告一般可以分为专题分析报告、综合分析报告和日常数据通报。

基本要求如下:

  • 介绍分析背景和分析目的
  • 说明数据来源、数据的时间区间和统计口径,如日活的定义:究竟是登录算活跃还是点击等
  • 分析逻辑清晰,可采用金字塔结构、总分总结构等
  • 既要给出结论,也要给出解决方案

数据分析的框架

  • 分析背景:简述分析或者报告的背景,为什么做,目的是什么,明 确分析报告要回答的问题
  • 名词解释:关键性指标定义是什么,为什么这么定义
  • 数据获取方法: 数据获取的时间区间,怎么获取到的数据,会有哪 些问题
  • 数据概览:重要指标的趋势,变化情况 (数据通报)
  • 数据分析:拆分问题,使用数据支撑结论
  • 结论汇总:汇总之前数据分析的主要结论,作为概览
  • 给出建议:根据数据分析的结论,给出改进建议
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_45052363/article/details/126103680

智能推荐

【CSDN精选】基于龙芯1B200的rt-thread基础_龙芯1b200参数-程序员宅基地

文章浏览阅读927次,点赞15次,收藏13次。龙芯是中国的一款自主设计的处理器架构,由中国科学院计算技术研究所(ICT)主导研发。龙芯处理器最早的版本为Loongson-1,其后发展出Loongson-2、Loongson-3等系列。这些处理器主要用于高性能计算、服务器、嵌入式系统等领域。Loongson架构具有独立知识产权,是中国自主研发的一种指令集架构。龙芯的设计旨在实现对计算机体系结构的自主掌握,减少对外部知识产权的依赖。RT-Thread(Real-Time Thread)是一个开源的实时嵌入式操作系统。_龙芯1b200参数

Python函数知识点(详解)-程序员宅基地

文章浏览阅读6w次,点赞584次,收藏2.9k次。本篇总结了Python函数相关的基础知识点,代码案例超详细,欢迎阅读,交流!_python函数知识点

虚拟机如何在net模式下进行联网_虚拟机net网络-程序员宅基地

文章浏览阅读1.7k次,点赞3次,收藏7次。虚拟机如何在net模式下进行联网(centos7)1.首先你需要先将虚拟机安装好,如果不会可以参考[centos7安装教程](https://blog.csdn.net/qq_44714603/article/details/88829423?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522161949204316780274178621%2522%252C%2522scm%2522%253A%252220140713.130102334…_虚拟机net网络

python中的range()函数_python range函数-程序员宅基地

文章浏览阅读6.5w次,点赞59次,收藏241次。range()函数:用于生成一个整数序列;range()的三种创建方式:第一种:只有一个参数(小括号中只给了一个数)即range(stop)例如:range(10)指的是默认从0开始,步长为1,不包括10;注意:的运行结果为:;要想输出0-9的数字序列则应该是的结果为;第二种:range(start,stop) (给了两个参数,即小括号中给了两个数)r=range(1,10) print(list(r)) 运行结果为:;第三种:range(start,stop,step):._python range函数

数据的四种基本存储方法_数据存储-程序员宅基地

文章浏览阅读2.5k次。数据的四种基本存储方法,(1)顺序存储方法(2)链接存储方法(3)索引存储方法(4)散列存储方法_数据存储

Mysql启用SSL以及JDBC连接Mysql配置_jdbc mysql ssl-程序员宅基地

文章浏览阅读6.7k次。一、Mysql启用SSL配置1.检查mysql是否支持ssl在linux端用root账号进入mysql命令行界面,查看当前版本mysql数据库是否支持ssl,如果出现以下结果表示支持,如果没有考虑更换版本,或者编译一个带有SSL版本的mysqlshell>show variables like ‘%ssl%’;2.设置用户是否使用ssl连接1.查看用户是否使用SSL连接she..._jdbc mysql ssl

随便推点

强化学习在制造业领域的应用:智能制造的未来-程序员宅基地

文章浏览阅读223次,点赞3次,收藏5次。1.背景介绍制造业是国家经济发展的重要引擎,其产能和质量对于国家经济的稳定和发展具有重要意义。随着工业技术的不断发展,制造业的生产方式也不断发生变化。传统的制造业通常依赖于人工操作和手工艺,这种方式的缺点是低效率、低产量和不稳定的质量。随着信息化、智能化和网络化等新技术的出现,制造业开始向智能制造迈出了第一步。智能制造的核心是通过大数据、人工智能、计算机视觉等技术,实现制造过程的智能化、自动化...

ansible--安装与使用_pip安装ansible-程序员宅基地

文章浏览阅读938次。系列文章目录文章目录系列文章目录 前言 一、ansible是什么? 二、使用步骤 1.引入库 2.读入数据 总结前言菜鸟一只,刚开始使用,仅作以后参考使用。边学习,边记录,介绍一下最基础的使用,可能会有理解不到位的地方,可以共同交流,废话不多说,走起。一、ansible 简介?ansible是自动化运维工具的一种,基于Python开发,可以实现批量系统配置,批量程序部署,批量运行命令,ansible是基于模块工作的,它本身没有批量部署的能力,真正.._pip安装ansible

RPMs系列卟啉框架材料ZnMn-RPM/AZn-RPM/FeZn-RPM/ZnPO-MOF齐岳供应金属-四羧基苯基卟啉(M-TCPPs)及三维框架卟啉材料[Cu(TPyP)Cu2Mo3O1]_fezn-5是什么意思-程序员宅基地

文章浏览阅读298次。RPMs系列卟啉框架材料ZnMn-RPM/AZn-RPM/FeZn-RPM/ZnPO-MOF齐岳供应金属-四羧基苯基卟啉(M-TCPPs)及三维框架卟啉材料[Cu(TPyP)Cu2Mo3O1]_fezn-5是什么意思

51单片机与ESP8266-01s模块通讯点灯_51单片机与eps826601s通信-程序员宅基地

文章浏览阅读9.9k次,点赞10次,收藏92次。前言 本文章为方便新手上手直接用最简单的点灯展示,关于ESP8266-01s的AT指令类就上网搜有很多这就不多讲了。接线ESP-01S USB转TTL 51单片机 VCC 3.3V 3.3V GND GND GND EN 3.3V 3.3V TX RX P3.0 RX TX P3.1 IO0(注刷固件时插) GND(注刷固件时插) 一、ESP8266-01S接US..._51单片机与eps826601s通信

麒麟820也迎来鸿蒙系统,魅族适配麒麟820系统 和鸿蒙OS,魅族要入赘华为系-程序员宅基地

文章浏览阅读188次。蜗居在珠海的小厂魅族,虽然是“小厂”,但是其一路走来的历史,一直被科技圈津津乐道,而深入简出的带头大哥黄章,更是魅友的精神领袖。魅族是一个很低调的企业,但是却有这样一种魅力,总能有意无意的成为新闻的主角,比如近日知名科技大V中国IT杂谈发布了这样一条微博:魅族正在适配麒麟820和鸿蒙系统,未来还要加入华为系。关于这条信息的真实性后面再说,我们先来讨论下华为和魅族是否真的可以成为CP,共同走向人生巅..._鸿蒙420支持麒麟820吗

推荐文章

热门文章

相关标签