Skip to content
On this page

数据分析 - 入门

本笔记来自「路人甲」公众号提供的一份数据分析资料。

基本知识

主要是收集的一些资料,用来大致了解这个行业以及需要具备的基本能力。

工作日常

  1. 产生数据

    1. 每当业务上有新的功能点需要开发上线的时候,数据分析师需要去围绕着这些功能会产生哪些业务变化、这个功能上线的目的是什么、上线之后该如何衡量效果等一系列问题,在功能上线前做好数据的埋点、以及可以衡量最终效果的指标。这样当功能上线的时候,你可以快速的衡量业务效果。
  2. 提供数据

    1. 提供数据可能是作为一个数据分析师每天都要做的事情,甚至有时候大半天都在做这件事情。
    2. 数据需求的来源是多方的,各种业务方以及产品经理。
    3. 商业数据分析师是公司业务方面的数据的出口,为了能准确的给需求方提供数据,你需要跟业务方有充分的沟通,对公司的数据维度有详细的了解。
  3. 解释数据

    1. 这些数据是怎么来的?好的数据坏的数据都需要去知道,那样才能取长补短。例如:

      1. 春节期间用户购买vip的数量翻了一倍,为什么翻倍了?
      2. 上周的用户留存降低了几个百分点,为什么降低?
      3. 知乎的最近一周的活跃用户答题量下滑几个百分点?

      等等这些问题,都需要你一步一步的深入挖掘,而这背后的真正原因能够快速的做出预警或者给之后的发展一些很好的idea。

  4. 探索数据

    1. 光有解释数据是不够的,因为数据分析并不是解决能看出来的问题,还要能提出发现解决一些探索性的问题。

      1. 给新用户怎样的激励,才能让他们的次日留存达到最佳?比方说Linkedin探索出来的让新用户拥有六个以及以上好友可以很好提高他们的留存。

      探索数据通常是一个长期的比较大的项目,探索数据并不存在一个标准的答案,也通常可能是几个月出不了一个好的结论。

  5. 影响数据

    1. A/B Test是为了探索更好的方向,更受用户喜欢的功能。
    2. 通过数据论证可以说服业务方听询数据分析师的意见。
      1. 推送的消息文本应该怎么发?发给几个实验组看看效果;
      2. 这个按钮应该设计成什么颜色,配上什么文字?多设计几套上线几个不同分组看效果。
    3. 通过不断的A/B Test,数据分析师会更好的辅助产品的迭代,影响数据的产生。

基本技能/参考

数据分析师的能力分为:分析能力和业务能力分析能力决定一个数据分析师的下限,业务能力决定一个数据分析师的上限。

数据分析的基础之一是有数据。分析能力相对来说是死板的,通常需要掌握以下技能:

  • 数据分析常用哪些算法?
  • 需要用到哪些库?
  • 如何进行计算?
  • 进行可视化,每一种图表的用途是什么?

为解决以上问题,推荐阅读书籍:《利用Python进行数据分析》、《SciPy and NumPy》

计算和可视化工具有:Tableau

可以考虑的爬虫数据来源:豆瓣图书。并借豆瓣的数据分析以下问题:

  • 书籍的数量是否随着时间增长?
  • 书籍的评分与年代之间是否有某种关系?
  • 书籍的价格一般都是在什么范围?
  • 随着时间的推移,书籍价格是否越来越贵?
  • 历史的长河中,哪个出版社出版的书籍最多?
  • 哪个出版社出版的书籍评分比较高?
  • 高产出的作者有哪些?
  • 有哪些评分和作品数量都很高的作者?
  • 书籍的评分与评论数量之间存在某种关系吗?
  • 书籍评论的关键字云
  • 最后,推荐一些书籍和作者

以上问题涉及的数据维度有:书名、作者、出版社、出版时间、豆瓣评分、价格、打分人数、评论人数、具体评论、国家/地区等。然后以不同维度切入,进行分析。

还可以引出其他问题,例如书籍的领域(计算机、艺术等)、专业领域下哪个作者书籍质量最佳/最受欢迎等。

根据时间维度得出一些结论,然后探索其原因:为什么这个时间点、该领域书籍数量高速增长?

需要注意的是,数据中可能存在一些干扰因素或不正常的数据,需要在分析过程中剔除。

另外豆瓣还有一个项目:豆瓣电影

在分析过程中,根据问题,将数据制成符合场景的图表(例如排行榜类可使用柱状图、热门程度可使用热力图等),以此锻炼自己的数据感知能力图表了解程度基本算法和分析。步骤基本如下:

  1. 提问题:我想做什么?分析什么?
  2. 抽象数据:是否有数据能提供支持?
  3. 获取数据:并且清洗,并不需要百分百的准确度,避免陷入数据精确度的陷阱,浪费大量时间
  4. 分析数据:利用语言或工具对数据进行有目的的分析

其中最难的属于第一步:提问。这需要在项目中不断培养积累。

也可以通过阅读一些相关书籍来建立基本问题框架《数据之美》《啤酒与尿布》《深入浅出数据分析》。在不知道从何下手时,就从最基本、最常见的问题开始。

最重要的是,先开始。

如果困扰于数据源的问题,可以在 Tableau 官网入门,其免费的官方视频资源已经配备了对应的数据源。

(但是 Tableau 收费且贵😭)

实际运用

根据自己的目标,有意识地去了解相关内容。例如一个公众号的运营,「路人甲」公众号提出的经常分析研究精华回答

  • 精华回答就是知乎社区或者话题下赞同数量最多的回答,答案赞同越多答主曝光率越高,那么被关注的机会就越大,那么如何写一个高赞精华回答就很重要。
  • 如何写高赞的回答?把擅长的话题或者知乎的根话题下所有精华回答拉出来,拿一个笔记本对每一个回答做归类做分析,学习高赞回答的文风、思路。
  • 当然,并不是所有的高赞回答都会增粉的,那么这些就是需要结合具体的回答以及回答者的涨粉情况去慢慢分析琢磨了。

按照这个思路,就是在日常中,有意识地分析他人的思路,哪怕想不明白,分析多了,自己也能学会多一种思考方法。这就是借鉴。而不是只会哈哈哈

另外,数据分析有利于在我们日常生活中做决策、提供更多选择(而非“Yes or No”的二选题),也避免在情绪化时作出冲动决策。它不一定是正确的,但可以帮助自己厘清思路、减少其他因素的干扰。