什么是机器学习一文带你理解机器学习




什么是机器学习一文带你理解机器学习

2022-07-20 19:31:37 网络知识 官方管理员

编辑导读:认识世界,就是一个从已知到未知的函数。机器学习,就是预测这个函数,并且使预测结果尽量准确。本文作者围绕机器学习展开讨论,与你分享。

什么是机器学习(一文带你理解机器学习)(1)

问:谈谈你对机器学习的理解。

答:机器学习就是用已知去预测未知。

认识世界,就是一个从已知到未知的函数。收集一大堆数据,然后用它们去预测一个值,就是回归问题。例如数码回收,根据你的机型、机况和行情,给出一个价格走势;从一大堆数据中,找到属于某一类的那些,就是分类问题。例如我们经常使用的验证码,“选出所有带桥的图片”。

机器学习,就是预测这个函数,并且使预测结果尽量准确。当然,这个过程是由算法工程师实现的,策略产品经理需要思考的是怎样用算法的逻辑,去解决业务问题。本文放弃了复杂的定义和公式,尝试用口语化的语言介绍常用算法的逻辑,降低新手产品经理(非技术)的学习成本,并且覆盖尽可能多的工作场景。

一、像树一样决策

决策树(DecisionTree)是一种以树形数据结构来展示决策规则和分类结果的模型,比较接近人类的决策过程。决策树发挥作用,首先要用到看似杂乱无序的已知实例,有2个值可以来形容这些实例。

  1. 信息熵:对随机时间不确定的度量,即到底有多杂乱无章。
  2. 信息增益:事件A的的发生为事件B增加了一些确定性,增量的多少即信息增益。

接下来,你要不断寻找最能将这堆杂乱无章的数据区分开来的特征——即使之区分于其他数据的特质——使用这一特征对数据进行划分。每次选择区分度最高的一个,不断迭代,直到所有特征都被用掉。用最经典的买瓜问题来示例:

什么是机器学习(一文带你理解机器学习)(2)

这时你就可以通过决策树来判断,下一个西瓜到底该不该买。在这个过程中,有时候需要产品帮助判断什么特征才是最有价值的。你也可以不断发现新的有价值特质,或删除一些多余的特征,将这棵”树“修剪地更加精致。

二、以类聚物,以群分人

所谓”近朱者赤近墨者黑“,虽然我们不了解一个人,但我们了解了他身边的人后,就根据已知信息推测他的性格特征。这也是K近邻模型的原理。在一个空间中,距离样本A最近的K个样本B属于一个类别,那么A也属于这个类别,并且具备这个类别的特征。这里”空间“和”距离“的定义较为复杂,不做展开。

如何选择合适的K值?需要持续训练。如果K们不能很好地归成一类咋办?那我A应该归属于谁呢?有两种判定方式,一种是少数服从多数,哪类最多我属于谁;一种是加权投票,可以根据远近程度加权,越近权重越大。

什么是机器学习(一文带你理解机器学习)(3)

对于产品而言,在进行用户分层类的项目时,可能会依赖这类算法能力。举个例子,当前我能提供图文、短视频和中长视频三种形式的服务,每种服务下都积累了大量的用户数据。这时由于运营的出色表现,产品涌入了大量新用户,我需要尽快知道他们更适合哪种形式的服务,以提高留存、活跃和转化。

三、完美一刀切

承接上文,面对大量新用户,我想要知道他们哪些对我价值最高,哪些价值稍低,从而采取不同的运营策略。支持向量机模型会是一个好的选择。

假如我有N个特征来形容这批用户,那么构建一个N维的空间,每个用户都能在其中找到自己的坐标。这时我找到一个N-1维的平面,它正好将所有用户分割成2个不同的类别,并且离正负样本的距离最远。

什么是机器学习(一文带你理解机器学习)(4)

这就是支持向量机模型的基本逻辑,是解决线性不可分问题、非线性问题的利器。

以上三种模型都是根据已知特征,给出一个确定的分类结果(未必准确),我们称之为判别模型。与之相对的是生成模型,它会给出一个最优的猜测结果,同时给出猜测的概率估计值。在一定条件下,它能更好地反映数据分布的全貌。

四、朴素贝叶斯模型

啥叫贝叶斯?贝叶斯就是在已知某条件的前提下,推算某事件发生的概率。它强调我们在预测一个事物前,要根据已有信息推断一个先验概率。用举个例子:如何肿瘤化验结果推断患者是否真正得癌?在计算这个概率之前,我们首先要知道先验概率,即癌症本身的发病率为多少,以及化验检测的准确率是多少。

什么是机器学习(一文带你理解机器学习)(5)

如上图所示,当你的化验结果是有病时,你实际上只有9%的概率真正患病;而如果你真正患病,也有十万分之一的概率没有被检测出来。

这其实告诉我们,在根据数据进行决策时,要考虑前提条件。例如我们在产品内部新上线了一个“长视频”板块,数据分析发现这一板块下的用户以35-45岁的用户为主,所以我们判断要根据这一年龄阶段的用户去优化UI设计和内容投放。

但考虑到先验概率的问题,我们首先要知道该板块用户的转化概率,即从35岁-45岁的网民转化到我“长视频”板块活跃用户的概率。如果这一概率很高,那么我们可能只是在这一年龄段用户聚集的渠道做了比较多的投放,导致现阶段35-45岁用户较多。我们针对其他年龄用户聚集的渠道,也来一波拉新策略,可能同样获得成功。那么现阶段去调整功能设计和内容策略,就是不合适的。

五、总结

对很多非技术产品经理来说,充斥着数学公式和专业术语的技术语言是很难理解,或理解成本较高的。但实际上,作为一个新手产品经理,还没有深入到具体的业务之前,只需要了解每种技术的实现逻辑即可。从策略的视角去审视技术,而不是让技术限制了你的想象力。树立强烈的目标导向,与技术团队建立良好的沟通关系,可能是更高效的手段。

发表评论:

最近发表
网站分类
标签列表