变量的管理ppt课件.pptx

第3章 Clementine变量的管理数据通常以变量为列、样本为行的二维表形式组织数据的基本管理包括变量管理和样本管理两大方面变量管理以变量为基本单位，实现变量说明变量值的重新计算变量类别值的调整生成新变量变量值的离散化处理生成样本集分割变量第3章 Clementine变量的管理变量管理的节点工具放置在节点工具箱的字段选项卡中，具体节点如图所示3.1 变量说明变量说明对变量取值的有效性进行限定、检查和修正指明各个变量在未来建模中的角色变量说明是确保高质量数据的有效手段，也是明确变量建模地位的重要途径通过字段选项卡中的类型节点实现以学生参加某次社会公益活动的数据Students.xls为例讲解变量说明的具体操作方法3.1 变量说明首先建立Excel节点读入Students.xls，浏览3.1 变量说明浏览数据：家庭人均年收入变量中有部分样本取$null$，为系统缺失值；还有一由于不明原因而明显错误的数据999999。应对它们进行恰当修正是否无偿献血变量值填写不规范，规范值应为Yes和No，但出现了1（表示Yes）和0（表示No）应将1替换为Yes，0替换为No3.1 变量说明为处理上述问题，选择字段选项卡中的类型节点并将其连接到数据流的相应位置上，进行参数设置下面从三个方面进行说明缺失值变量取值有效性检查和修正变量方向3.1.1 取值范围和缺失值的说明缺失值通常包括两类：系统缺失值：用$null$表示，还包括空格或空白用户缺失值：主要指取值明显不合理的数据本例中添加变量值标签以规范是否无偿献血的取值，指定用户缺失值说明家庭人均年收入的合理取值范围3.1.1 取值范围和缺失值的说明选择是否无偿献血和家庭人均年收入变量，鼠标选择图中的缺失列，出现三个选项开(*)：允许变量取用户缺失值，不进行修正（用户缺失值并不等同于正常值）关：不允许变量取用户缺失值指定：定义变量值取值范围、用户缺失值等信息3.1.1 取值范围和缺失值的说明类型：显示当前变量的类型和存储类型值：指定决定变量取值范围的方法读取数据：取决于所读的外部数据传递：忽略所读的外部数据指定值和标签：人为指定变量取值和变量值标签。根据当前变量的实际意义，指定其合理的取值，并在标签框中输入关于变量值含义的简短说明文字。3.1.1 取值范围和缺失值的说明为指示是否无偿献血的合理取值，分别在Yes和No行对应的Labels列中输入变量值标签“无偿献血”、“未无偿献血”：3.1.1 取值范围和缺失值的说明家庭人均年收入的取值范围不能直接由外部数据决定，否则Clementine将视999999（用户缺失值）为正常值。输入范围为7333.0至74460.0。3.1.1 取值范围和缺失值的说明检查选项：指定对变量值的修正方法定义空白选项：选中该选项表示视下列值为空白缺失值框：在此处输入的离散值都当空白处理范围框：在此处输入的连续区间中的值都当作空白处理无效值和空白：$null$或空格都当作空白处理3.1.1 取值范围和缺失值的说明注意：Clementine不对空白进行替补处理，因此定义空白的目的仅是将那些无需修正和替代的用户缺失值与正常值区分开，以便于后续建模。当选择了定义空白并返回窗口后，相应变量的缺失列上将自动显示，表示允许相应变量取用户缺失值3.1.1 取值范围和缺失值的说明本例中无偿献血中的1和0虽然是不合理取值，但自动修正是无意义的，因此在定义空白中说明家庭人均年收入中的999999和$null$值需要修正和替补，所以不应在定义空白中说明，仅视999999为超出取值范围的不合理取值。返回类型节点窗口后，无偿献血的缺失列上显示＊，家庭人均年收入的缺失列上没有显示。3.1.2 变量取值有效性检查和修正指定取值范围后，通常还需利用类型节点中的检查列，对超范围的不合理数据或系统缺失值进行修正3.1.2 变量取值有效性检查和修正对家庭人均年收入中的999999和$null$值进行修正和替补通常的修正处理方式如下无：不进行修正无效：用系统缺失值$null$替代强制：用一指定值替代。系统默认，Flag型变量用False对应的值替代；Set型变量用第一个变量值替代；数值型变量，大于上限的用上限替代，小于下限的用下限替代，其余值用(最大值+最小值)／2替代。3.1.2 变量取值有效性检查和修正通常的修正处理方式如下丢弃：剔除相应样本数据警告：给出警告信息中止：终止流执行3.1.2 变量取值有效性检查和修正本例中对家庭人均年收入中的系统缺失值$null$和999999进行了替换和修正处理。对于是否无偿献血中的不合理取值（1或0），根据替换规则将全部替换为No，不符合实际要求，利用类型节点无法处理。其具体处理见3.3节。3.1.3 变量角色的说明变量角色是指变量在模型