机器学习算法从数据中找到自然模式,从而产生洞察力,帮助你做出更好的决策和预测。它们每天都被用于医疗诊断、股票交易、能源负荷预测等方面的关键决策。例如,媒体网站依靠机器学习从数百万个选项中筛选,给你推荐歌曲或电影。零售商用它来洞察顾客的购买行为。
当你有一个复杂的任务或问题,涉及大量数据和许多变量,但没有现有的公式或方程时,可以考虑使用机器学习。例如,如果你需要处理以下情况,机器学习就是一个不错的选择:
手写规则和方程太复杂 - 如面部识别和语音识别。
任务的规则是不断变化的——就像从交易记录中检测欺诈一样。
数据的性质不断变化,程序需要适应自动交易,能源需求预测和预测购物趋势。
机器学习使用两种技术:监督式学习,它根据已知的输入和输出数据训练一个模型,以便它能预测未来的输出无人监督的学习,它在输入数据中找到隐藏的模式或内在结构。
监督机器学习建立一个模型,在存在不确定性的情况下,基于证据进行预测。监督学习算法采用已知的输入数据集和已知的对数据(输出)的响应,并训练模型生成对新数据响应的合理预测。如果您已经知道要预测的输出数据,那么就使用监督学习。
监督学习使用分类和回归技术进行开发机器学习模型。
分类技术预测离散的响应 - 例如,电子邮件是否是真实的或垃圾邮件,或肿瘤是癌症还是良性。分类模型将输入数据分类为类别。典型应用包括医学成像,语音识别和信用评分。
如果您的数据可以被标记、分类或分成特定的组或类,请使用分类。例如,手写识别应用程序使用分类来识别字母和数字。在图像处理和计算机视觉中,无监督的模式识别技术用于对象检测和图像分割。
常用的分类算法包括万博1manbetx支持向量机(SVM)那提升和袋装决策树那K.-最近的邻居那天真贝父那判别分析那逻辑回归, 和神经网络。
回归技巧预测连续响应 - 例如,电力需求中的温度或波动变化。典型应用包括电力负荷预测和算法交易。
如果您处理的是一个数据范围,或者响应的性质是一个实数,如温度或设备故障前的时间,则使用回归技术。
假设临床医生希望预测某人在一年内会有心脏病发作。他们有关于先前患者的数据,包括年龄,体重,高度和血压。他们知道前一名患者在一年内是否有心脏病发作。因此,问题是将现有数据组合成一个模型,该模型可以预测新人是否会在一年内进行心脏病发作。
无人监督的学习在数据中查找隐藏的模式或内在结构。它用于从包含输入数据组成的数据集的推广,而没有标记的响应。
聚类是最常见的无监督学习技术。它用于探索性数据分析,以发现数据中的隐藏模式或分组。申请聚类分析包括基因序列分析,市场研究和对象识别。
例如,如果一家手机公司想优化他们建造手机信号塔的位置,他们可以使用机器学习来估计依赖信号塔的人群集群的数量。一部手机一次只能与一个信号塔通话,因此该团队使用聚类算法来设计手机信号塔的最佳位置,以优化客户群体的信号接收。
用于执行集群的常见算法包括k - means, k-medoids那分层群集那高斯混合模型那隐藏的马尔可夫模型那自组织映射,模糊c均值聚类, 和减数集群。
选择正确的算法似乎压倒 - 有几十个监督和无监督的机器学习算法,每个都采取了不同的学习方法。
没有最好的方法或一个尺寸适合所有。找到正确的算法部分只是试验和错误 - 甚至高度经验丰富的数据科学家无法判断算法是否会在不尝试的情况下工作。但算法选择也取决于您正在使用的数据的大小和类型,您想要从数据中获取的洞察力以及将如何使用这些洞察力。
以下是在监督和无监督机器学习之间选择的一些指导方针:
罗格斯大学(Rutgers University)艺术与人工智能实验室(Art and Artificial Intelligence Laboratory)的研究人员想知道,计算机算法能否像人类一样,轻松地根据风格、流派和艺术家对画作进行分类。他们首先通过识别视觉特征来对一幅画的风格进行分类。他们开发的算法对数据库中的绘画风格进行分类的准确率为60%,超过了典型的非专业人士。
研究人员假设可用于样式分类(监督学习问题)的视觉特征也可用于确定艺术影响(无监督的问题)。
他们使用在Google图像上培训的分类算法来识别特定对象。他们从66个不同的艺术家在550年来工作的超过1,700张绘画上测试了算法。该算法容易识别连接的工作,包括Diego Velazquez的“Pope Innocent X”在Francis Bacon的“Pope Innocent X的肖像之后”的影响。
办公楼、医院和其他大型商业建筑的供暖、通风和空调(HVAC)系统往往效率低下,因为它们没有考虑到不断变化的天气模式、可变的能源成本或建筑的热性能。
Basificiq的基于云的软件平台解决了这个问题。该平台使用先进的算法和机器学习方法来连续地处理来自电力计,温度计和HVAC压力传感器以及天气和能源成本的千兆字节。特别地,机器学习用于分段数据并确定气体,电动,蒸汽和太阳能的相对贡献以及加热和冷却过程。建筑平台在正常运行期间将大型商业建筑的HVAC能耗降低10-25%。
RAC以超过800万次成员,是英国最大的驾驶组织之一,为私人和商业驾驶者提供路边援助,保险和其他服务。
为了能够对路边事故做出快速反应,减少碰撞事故,并降低保险成本,RAC开发了一种车载碰撞传感系统,该系统使用先进的机器学习算法来检测低速碰撞,并将这些事件与更常见的驾驶事件(如超速行驶或坑洞)区分开来。独立测试表明,RAC系统检测测试崩溃的准确率为92%。