1237 
1 |
统计学和机器学习是两个联系特别紧密的领域。 事实上，这两者的界限有时候非常模糊。然而有一些明显属于统计学领域的方法，不仅可用于机器学习的项目，并且极具价值。 公平地说，需要统计学方法来有效地完成机器学习预测建模项目。 在这篇博客中，你会了解到一些能在预测模型问题的关键步骤中发挥作用的统计学方法的具体例子。 在阅读完这篇博客后，你会了解：
让我们开始吧。  （在应用机器学习项目中使用统计学方法的十个例子。图片来自于 chenutis，版权归其所有。） 概述 在这篇博客中，我们将会着重讲一下如何在应用机器学习项目中使用统计学方法的十个例子。 这将证明统计学知识对于成功解决预测建模问题至关重要。
1. 问题架构 也许预测模型问题中最困难的一点就是问题的架构。 这包括了问题类型的选择，例如是回归还是分类，也许还有这个问题的输入和输出的结构及类型。 问题的架构并不是一直都很清晰，对于某个领域的新手，可能需要对这个领域中的观察值进行一些深入探索。 而对于这个领域的专家，他们可能会以墨守成规的角度去看问题，从而受困其中，他们也需要从多角度去思考数据，才能有所收获。 统计方法在问题的架构阶段有助于对数据的探索，其中包括：
2. 数据理解 数据理解意思是对变量的分布和变量之间的关系有一个更详细的理解。 这些知识其中一部分来自于这个领域的专业知识，或者需要专业知识去解释。然而，专家和新手都会从处理领域内的真实观察值中获益。 用在理解数据的统计学模型的两类主流分支是：
3. 数据清洗 一个领域中的观察值往往存在些瑕疵。 虽然数据是数字化的，但存在一些过程会降低数据的精确性，反过来，后续用到数据的过程及模型也会受其影响。 例如：
识别和修复这些问题数据的过程也叫做数据清洗。 统计方法应用于数据清洗中例子有：
4. 数据选择 在建模时，不是所有观察值或所有变量都是相关的。 减小这些元素的数据范围的操作对于做出预测值是很有用的，这个过程叫做数据选择。 应用在数据选择的两种统计学方法：
5. 数据准备 数据一般不会直接拿来建模。 为了改变数据的形状或结构，使它更适用于选定的问题架构或学习算法，需要对数据进行必要的转化。 数据准备也会用到统计模型，例如：
6. 模型评估 预测模型问题的一个重要部分是对学习方法进行评估。 对模型的能力的评估主要是对未经过训练的数据进行预测。 通常，训练过程和评估预测模型的规划过程叫作实验设计，这是统计方法的一个子领域。
作为实现实验设计的一部分，为了对可利用的数据做最合理的利用同时也为了评估模型的能力，统计学方法被用来重采样一个数据集。这两个目的代表了统计模型的子领域。
7. 模型配置 给定的机器学习算法通常有一套使学习方法能够适应特定问题的超参数。 超参数的配置通常是经验性的，而不是由分析得出的。这需要大量的实验，以评估不同超参数值对模型性能的影响。 两种统计学的子领域的方法可以用于对不同超参数配置产生的结果进行解释和比较，它们是：
8. 模型选择 给定一个预测建模问题，在众多机器学习算法中可能有一个算法最适合该问题。 选择一种方法作为解决方案的过程称为模型选择。 这可能涉及到项目参与者的自身条件以及用于评估问题的方法的估计技能能否对其给出详细解释。 与模型配置一样，可以使用两类统计方法来解释不同模型的估计技能，并用于模型选择。他们是：
9. 模型表示 一旦最终模型训练完成，可以在部署其对真实数据进行预测前先展示给相关人员查看。 展示最终模型的一个环节包括展示模型的估计技能。 估计统计领域中的方法可以通过容忍区间和置信区间对机器学习模型的评估能力的不确定性进行量化。
10. 模型预测 最后，我们可以使用最终的模型来对我们不知道其输出的新数据进行预测。 作为预测的一部分，量化预测的置信度非常重要。 就像模型表示的过程一样，我们可以使用估计统计领域的方法来量化这种不确定性，例如置信区间和预测区间。
总结 在本教程中，你已经了解了统计方法在整个预测建模项目过程中的重要性。 具体来讲你学到了：
|
扫一扫查看属于您的
黑金特权
联想账号用户注册协议
《用户注册协议》、《联想网站隐私政策》请您仔细阅读相关协议，其中有对您权利义务的特别约定等重要条款，同意后方可使用本软件。
最新更新：2024年9月12日
欢迎注册联想账户！注册联想账户将成为联想会员，即有机会参与联想的各种用户回馈、获得共享信息及其他会员专属服务（统称为“服务”）。本协议及援引的其他条款（“本协议”）构成您与联想（北京）有限公司和/或其关联公司（“联想”）就您注册和使用联想账户达成的有法律约束力的协议。
如您希望注册联想账号成为联想会员，享有本网站有关联想会员的专属权益及相关服务，请仔细阅读并确认您完全同意本协议。
请点击以上链接或联想网站下方链接阅读完整条款，同意本协议视为您确认已经了解并同意以上条款的所有内容。
1.0接受本协议
如您不同意本协议条款或无权签署本协议，请不要注册账户或使用相关服务。您注册账户或以其他方式使用服务，即表明您完全了解并接受本协议。
联想账户只能由有能力达成具有法律约束力合同的人士注册和使用。您应确保您已年满18岁并具有达成有法律约束力协议的完全行为能力。如您未达到法定成人年龄，您应确保本协议是由您的父母或监护人代表您签署确认的。如您代表他人（例如，某个公司或机构）确认接受本协议，您声明并保证您已获得了充分的授权并有资格这样做。
如您不符合上述条件，我们有权拒绝您注册和使用联想账户。
本文件包含了适用于联想账户注册和使用的基本条款。使用某些联想服务需适用某些特别条款。这些特别条款将随同相关服务说明提供，您注册或使用这些服务，这些特别条款将成为本协议的一部分。如特别条款与基本条款不一致，则仅就这些特定服务而言，特别条款将优先适用。
2.0账号注册
您申请注册联想账号时，必须向联想提供真实且准确的个人资料或企业信息，并于个人资料或企业信息发生任何变动时及时更新。若您提供任何错误、不实、过时或不完整或具误导性的信息；或者联想有理由怀疑您提供的信息是错误、不实、过时或不完整或具有误导性的，有权暂停或终止您的账号，并拒绝您使用联想网站及相关服务的全部或任何部分。
您在注册过程中输入的姓名、企业名称和证件号码将作为识别您与联想账号的一致性的首要证明资料，您应妥善保管，不得以任何方式提供给他人使用，包括但不限于出借、转让、共享或许可使用等。您理解，联想无义务核查每一账号使用的合法性，如发现对您账号任何未经授权的使用或发生其他类似安全问题，您应立即通知联想。
对他人未经授权使用您的账户，联想不承担任何责任。您应当对通过您的账号进行的以及您账号内的所有活动负责。联想不对与账户内部活动及账户所有权相关的争议进行判定。如不能确定账户的有效所有者，联想有权暂停或取消该账户。
3.0会员权益和服务
只有正确完成联想账户注册的用户方可成为联想会员并享有会员专属服务。会员账户可用于对用户的订购及服务申请信息进行管理。会员用户也可享有某些会员专属权益和服务，例如获得积分，具体见联想发布的活动计划和方案。
联想可根据会员完成联想指定活动情况为会员提供积分。积分仅在指定期限内有效。会员应自行负责不时核对其账户所享有积分的状态。会员可用指定数量的积分兑换联想可不时向会员提供优惠或特权。这些优惠或特权的性质，以及获得该等优惠或特权所需的积分数量，由联想确定并可随时更改。除用于兑换联想通过本服务提供的优惠或特权（如有）外，积分不得用于任何其他目的或用途。积分不可折抵任何现金或费用。兑换优惠可能有时间限制或只提供有限的数量。
积分仅可在指明适用的活动中使用，不能在任何其他活动中兑换或转移至会员的其他账户。会员积分不可出售或转让给其他会员或由其他会员兑换。会员因任何原因终止账户的，会员获得的所有积分均作废。
4.0费用
联想仅提供本协议约定的网络服务，除此之外与相关网络服务有关的设备（如个人电脑、手机、及其他与接入互联网或移动网有关的装置）及所需的费用（如为接入互联网而支付的电话费及上网费、为使用移动网而支付的手机费）均应由您自行负担。
联想可能提供某些收费服务。对于收费服务，联想会在您使用前明确提示，只有您确认接受相关服务条款并支付费用后，方可使用该收费服务。
5.0第三方网站
我们可允许您从第三方网站访问账户，或在联想网站上设置指向第三方网站的链接。这些第三方网站可能非由联想运营、管理和支持，联想不对这些网站的内容或功能的准确性、合法性、适当性或任何其他方面负责。这些链接或引用仅为用户方便而设置，并不表明我们对这些网站及其内容作出了任何认可、推荐或保证，或联想与这些网站的运营商有任何关联。您访问和使用这些第三方网站时，可能会适用附加或不同的条款和条件，您应仔细阅读这些适用于第三方网站的条款。
6.0使用规则
账号仅供会员用户用于获得联想产品和服务信息及相关支持。您不得将账号用于未明确允许的任何商业目的，例如，向第三方转售任何内容或信息。您应自行对您的账户、用户名或密码下发生的行为负责，包括通过账户发布或传送的任何内容。除非严格按照联想制定的和预期的要求获得积分，否则积分是无效的，您不得试图通过任何模仿符合要求的手段（包括但不限于使用任何脚本、机器人或其他自动化手段）获得积分。
在注册和使用账户及相关服务时，您应遵守我们告知的所有可适用的使用政策，遵循所有相关法律的规定，并始终符合公序良俗及良好道德规范。您不得为任何非法、欺诈、不当或滥用的目的或以任何可能妨碍其他用户或损害联想或其他用户的任何财产，以及侵犯或妨害第三方权利的方式使用账户。
您注册账号时应遵守以下规则：
（a）不得以党和国家领导人或其他社会名人的真实姓名、字号、艺名、笔名注册；
（b）不得以国家机构或其他机构的名称或其简称或商标、商号注册；
（c）不得注册不文明、不健康名字，或包含歧视、侮辱、猥亵类词语的名字；
（d）不得注册易产生歧义、引起他人误解的名字。
您在使用联想网站及相关服务过程中，应遵循以下规则：
（a）遵守中国有关的法律、法规和规范性文件；
（b）遵守所有与网络服务有关的协议、规定和程序；
（c）不得为任何非法目的而使用网络；
（d）不得利用联想网络进行任何可能对互联网或移动网正常运转造成不利影响的任何行为，包括但不限于不得传播或张贴垃圾邮件、不合理巨大文件、传销模式、连锁邮件；
（e）不得利用联想网络服务上传、储存、展示或传播任何非法的、虚假的、辱骂性的、骚扰性的、诽谤性的或其他违反社会公德的信息资料；
（f）不得从事任何侵犯其他任何第三方的专利权、著作权、商标权、名誉权、隐私权或其他任何合法权益的行为；
（g）不得利用联想网络进行任何不利于联想或危害计算机信息网络安全的行为；并且
（h）未经联想事先许可，不得利用联想网络从事任何商业广告行为。
‘
如联想基于合理判断认为您违反了本协议的任何规定，可拒绝您的注册或删除您已注册的账号，立即暂停或终止您对账户的访问。
7.0变更和终止
联想可随时修改本协议的任何条款。您应经常访问本页面以了解最新的条款。如您不同意联想对本协议的任何修改，可立即停止使用您的账号。如您在联想对本协议做出任何修改后继续使用您的账号，则视为您接受联想对本协议的修改。
联想可随时通过包括但不限于网页公告、电子邮件、短信提醒等方式做出任何声明、通知、警示。该等声明或通知视为本协议的一部分，如您在联想发出该等声明或通知后使用本网站及相关服务，视为您完全同意该等声明或通知。
联想可能因系统更新维护、业务调整变化等原因随时变更、暂停或终止部分或全部网络服务（包括收费网络服务），联想将在条件允许的情况下，尽可能事先以适当的方式通知您，但不作为联想的义务。如您的账户或行为有任何违反本协议及相关使用规则的情形，联想可随时经通知或不经通知终止用户对账户及服务全部或任何部分的访问，无需说明理由，账户终止将立即生效。
您可随时注销账户。如您的账户连续180个自然日停止活动，我们将视为您已终止账户，联想有权在经通知您后注销您的账号。账户无论因任何原因注销后，您将不再享有联想会员的相关权益。未使用的积分或其他会员权益在账户终止后失效。联想将不就账户注销或禁止访问对会员或任何第三方承担任何责任。
8.0用户数据
您在注册及使用账户及相关服务时上传、存储、传输或接受的数据，其中可能包含您的个人数据（“用户数据”）。这些用户数据所有权利均由您保留，除为向您提供本协议项下相关服务的目的而使用外，未经您的事先同意和允许，联想不会自己或允许他人使用您的用户数据。
您通过账户及服务上传、存储、传送或接收的用户数据，视为您授予联想及其服务提供商一个全球范围的许可，使联想可以作为服务的组成部分并仅为提供和改进服务的目的，复制并以加密方式存储您的数据。您应确保您拥有所有必要的权利和权力授予上述许可。
为您的用户数据提供存储不是联想的义务，我们仅为用户方便的目的提供此项服务，为此，您知道并同意，联想将不对数据无论因任何原因被删除或存储失败承担责任。本协议终止后，您的用户数据将被删除且无法恢复。您应自行负责及时和妥善地对您的用户数据进行备份。您知道并同意，我们可能会对您上传或存储的用户数据的数量和期限设置限制。
您在此陈述和保证您的用户数据：（a）均为非保密信息；（b）是合法和安全的，对您的用户数据的浏览、下载或其他使用不会导致任何损失和损害，包括但不限于侵权异议、感染病毒、遭到黑客攻击、系统瘫痪等；并且（c）已经获得相关权利人的所有必要许可。
9.0知识产权
联想通过账户及相关服务提供的所有内容和材料，包括但可能不限于文本、图片、图形、图表、软件、设计元素、音视频资料等，均受相关著作权、商标和其他知识产权法律的保护，这些内容和材料由联想和/或其许可方拥有并保留所有权利和权益。
您不得为任何未明确允许的目的获取或使用相关内容和材料。除非联想事先明确书面许可，否则您不得出售、许可、出租、修改、分发、复制、模仿、传输、展示、实施、发布、改编、编辑或以任何其他未经许可方式使用联想网站的内容和材料，或制作这些内容和材料的派生作品。
10.0无保证声明
除非联想另有明确，否则账户及服务均以“按现状”且“可用”为基础提供，无任何保证。在法律允许的最大限度内，我们明确否认任何包括但不限于有关适销性、适用于某个特定目的、权属以及不侵权在内的明示、默示及法定的保证以及任何有关安全、不中断、准确性、可靠性、及时性及服务性能的保证。如相关法律不允许排除或限制某些默示保证，则相关排除和限制将不适用于您。
11.0责任限制
在任何情况下，无论您以何种依据（包括根本违约、过失、虚假陈述或其他合约或侵权方面的索赔）而有权要求联想赔偿损失，联想的责任仅限于实际直接损害或损失，且赔偿额最高为联想基于服务向您实际收取的费用总额。在任何情况下，联想均不对下列任何一项负责：（a）第三方就其损失或损害赔偿向您提起的索赔要求；（b）您的记录或数据的丢失或损毁；和（c）任何间接性的，偶然性的或附带性的损害或利润损失。即使联想已经事先获知有发生下列事项的可能性。此限制也适用于任何联想分包商和供应商。这是联想及其服务商和供应商共同承担的最高赔偿限额。如可适用法律不允许以合同方式对某些责任进行排除或限制，则在法律禁止的最大范围内，相关责任限制或排除不适用于您。
12.0抗辩和补偿
如用户对账户及服务的使用导致了针对联想、联想关联公司及业务合作方及其各自人员的索赔、要求、调查或处罚，您同意为联想、联想关联机构及业务合作方及其各自人员提供补偿和抗辩并承担由此导致的所有损害赔偿、成本和费用（包括合理的律师费），使联想、联想关联机构及业务合作方及其各自人员不因此受到任何损失和损害。本条款在本协议终止后仍然有效。
13.0一般条款
联想延误或未能行使或强制执行本协议的任何权利或条款，不构成对该权利或条款的放弃。如本协议的任何规定被判定为无效或不可强制执行，不影响本协议其他部分的效力，本协议其他部分仍继续有效。 本协议的签署及联想根据本协议向您提供的通知、披露等均可以电子方式进行。本协议项下联想通过网页公告、电子邮件、手机短信或常规的信件传送等方式向您发出的通知自联想发送之日视为已送达。您对于联想的通知应当通过联想对外正式公布的通信地址、传真号码、电子邮件地址等联系信息向联想进行书面送达。 本协议按照中华人民共和国大陆地区（不包括香港、澳门和台湾地区）法律订立和解释。因本协议执行、解释及与此有关的一切争议均应提交北京仲裁委员会按其当时有效的仲裁规则裁决。此约定并不禁止联想为阻止或防止对本协议项下义务的违反向任何有管辖权的法院申请禁制令或其他强制措施，联想申请禁止令或其他强制措施不需要提供担保。 关联公司是指被一方控制、或控制该方、或与该方受共同控制的机构。这里“机构”指任何公司、企业或其他法律实体。在本协议中，“控制”是指直接或间接地拥有影响所提及机构管理的能力，无论是通过所有权、有投票权的股份、合同或其他方式。
同意并继续
