数据前期的准备
MISSING:可用于字符型和数字型变量,当变量为空时,返回1,当变量不为空时,返回0。这个前面的博文已有讲解。
NOTDIGIT(character_value) 在字符串中搜索非数字字符,若找到则返回其第一次出现的位置,在这里,notdigit(character_value)和verify(character_value,'0123456789')实现的功能相同。
3数值型数据清理
3.1 极值异常值
3.1.1 三个重要的过程步:
means过程步:得到缺失值和非缺失值个数、最大值、最小值等统计值。
proc means data=pmlr.Develop n nmiss min max maxdec=3;
var DDABal DepAmt;
run;
tabulate过程步:得到缺失值和非缺失值个数、均值、最大值、最小值等统计值
proc tabulate data=pmlr.Develop format=7.3;
var DDABal DepAmt;
tables DDABal DepAmt,
n*f=7.0 nmiss*f=7.0 mean min max / rtspace=18;
keylabel
n = 'Number'
nmiss = 'Missing'
mean = 'Mean'
min = 'Lowest'
max = 'Highest';
run;
univariate过程步:UNIVARIATE过程除了可以提供MEANS和SUMMARY所提供了基本统计数外,还提供位置特征数(如Med中位数,Mode众数)和偏度系数(Skewness)、峰度系数(Kurtosis)这些变异数。此外它还可通过FREQ选项统计变量次数及频率,通过PLOT选项给出茎叶图(Stem Leaf)和正态概率密度图(Normal Probability Plot),通过NORMAL选项进行变数正态性检验(给出W:Normal值)。
proc univariate data=pmlr.Develop plot;
var DDABal DepAmt;
run;
除了上述过程步外,还有很多过程步也可以完成相似的功能,大家可以去查阅相关文献。
数据清理数据清理 data Cleaning 技术大全及 SAS 实现 转载请注明出处:http://blog.sina.com.cn/s/blog_5d3b177c0100esmx.html 1 简介 数据清理是数据准备一个...
Cody's data cleaning techniques using sas_物理_自然科学_专业资料。SAS数据清洗技术,基本而全面,本文是是原书的读书笔记,记录的是原书的精华部分...
SAS软件在中国慢性病及其危险因素监测数据清理中的...APPLICATION OF SAS SOFTWARE IN DATA CLEANING OF ...问题的跳转规定, 可以编写相应的宏程序实现 对逻辑...
ETL 中数据清洗技术在税务系统中的应用 ETL 中数据清洗技术在税务系统中的应用 Data Cleaning Technology of ETL Tax System in the Application 王时绘 1 伍江磊...
Data Quality, Data Cleaning and Applying to ... 实现的以数据清理为主要功 能的数据加载(ETL)系统...没有良好的数据质量作后盾,再先进的数据处理技术和...
中的应用模型,最后通过实例说明数据清洗的具体实现. ...数据清洗 (data cleansing/data cleaning/data ...[11]指出,数据清洗实际就是利用有关技术如数 理...
SAS技巧(清洗、统计)_IT/计算机_专业资料。SAS 数据清洗数据清洗,即从源数据... 数据清理data Cleaning技... 14页 1下载券 数据清洗研究 5页 免费 GSM数据...
数据清理(data cleaning), 5.3.3 数据集成(data ...技术问题 5.5.3 数据挖掘应用问题 5.5.4 实施...SAS的Enterprise Miner中包含了一个可以影射为SEMMA...
——数据仓库和数据挖掘(Data Warehouse 与 Data ...产品使全部的 SAS 技术最大限度的实现了 Web-...对源数据进行清理和整合 按计划或规则进行数据仓库的...
的 Meta 分析方法及 SAS 实现张天嵩 ,熊茜 (上海市静安区中心医院科教部, 上海 200040 )〔摘要〕 目的 介绍有序数据的 Meta 分析方法及其在 SAS 软件的实现...
热门文档