R语言数据集行列互换技巧

Python010

R语言数据集行列互换技巧,第1张

R语言数据集行列互换技巧现在给大家介绍的数据处理技巧是长转宽,也就相当于Excel中的转置,不过用R语言实现的长转宽还有数据合并的功能,自然比Excel强大多了。这里给大家介绍4个函数,其中melt()、dcast()来自reshape2包,gather()、spread()来自tidyr包一、宽转长——melt()、gather()[python] view plain copymydata<-data.frame(name=c("store1","store2","store3","store4"),address=c("普陀区","黄浦区","徐汇区","浦东新区"),sale2014=c(3000,2500,2100,1000),sale2015=c(3020,2800,3900,2000),sale2016=c(5150,3600,2700,2500),sale2017=c(4450,4100,4000,3200) ) #宽转长——melt mydata1<-melt(mydata,id.vars=c("address","name"),#要保留的主字段variable.name = "Year",#转换后的分类字段名称(维度)value.name = "Sale" #转换后的度量值名称 ) 输出结果[python] view plain copy>mydata1<-melt( + mydata, + id.vars=c("address","name"),#要保留的主字段 + variable.name = "Year",#转换后的分类字段名称(维度) + value.name = "Sale" #转换后的度量值名称 + ) >mydata1 address name Year Sale 1普陀区 store1 sale2014 3000 2黄浦区 store2 sale2014 2500 3徐汇区 store3 sale2014 2100 4 浦东新区 store4 sale2014 1000 5普陀区 store1 sale2015 3020 6黄浦区 store2 sale2015 2800 7徐汇区 store3 sale2015 3900 8 浦东新区 store4 sale2015 2000 9普陀区 store1 sale2016 5150 10 黄浦区 store2 sale2016 3600 11 徐汇区 store3 sale2016 2700 12 浦东新区 store4 sale2016 2500 13 普陀区 store1 sale2017 4450 14 黄浦区 store2 sale2017 4100 15 徐汇区 store3 sale2017 4000 16 浦东新区 store4 sale2017 3200 再来看看gather()函数怎么用[python] view plain copy>#宽转长——gather >mydata1<-tidyr::gather( + data=mydata, + key="Year", + value="sale", + sale2014:sale2017 + ) >mydata1 name address Year sale 1 store1 普陀区 sale2014 3000 2 store2 黄浦区 sale2014 2500 3 store3 徐汇区 sale2014 2100 4 store4 浦东新区 sale2014 1000 5 store1 普陀区 sale2015 3020 6 store2 黄浦区 sale2015 2800 7 store3 徐汇区 sale2015 3900 8 store4 浦东新区 sale2015 2000 9 store1 普陀区 sale2016 5150 10 store2 黄浦区 sale2016 3600 11 store3 徐汇区 sale2016 2700 12 store4 浦东新区 sale2016 2500 13 store1 普陀区 sale2017 4450 14 store2 黄浦区 sale2017 4100 15 store3 徐汇区 sale2017 4000 16 store4 浦东新区 sale2017 3200 和melt()函数不同,gather()函数需要指定关键字段key,以及关键字段对应的值value,但是gather()函数更加好理解。二、长转宽——dcast()和spread()还是用上面的data1数据集,先来看看dcast()函数[python] view plain copy#长转宽——dcast dcast(data=mydata1,name+address~Year#左侧是要保留的字段,右侧是要分割的分类变量,列数等于表达式#右侧分类变量的类别个数 ) [python] view plain copy>#长转宽——dcast >dcast( + data=mydata1, + name+address~Year + #左侧是要保留的字段,右侧是要分割的分类变量,列数等于表达式 + #右侧分类变量的类别个数 + ) Using sale as value column: use value.var to override. name address sale2014 sale2015 sale2016 sale2017 1 store1 普陀区 3000 3020 5150 4450 2 store2 黄浦区 2500 2800 3600 4100 3 store3 徐汇区 2100 3900 2700 4000 4 store4 浦东新区 1000 2000 2500 3200 dcast()函数的使用规则需要琢磨下才能理解,大家好好看看注释部分,再来看看spread()[python] view plain copy#长转宽——spread tidyr::spread(data=mydata1,key=Year,value=sale ) [python] view plain copy>#长转宽——spread >tidyr::spread( + data=mydata1, + key=Year, + value=sale + ) name address sale2014 sale2015 sale2016 sale2017 1 store1 普陀区 3000 3020 5150 4450 2 store2 黄浦区 2500 2800 3600 4100 3 store3 徐汇区 2100 3900 2700 4000 4 store4 浦东新区 1000 2000 2500 3200 直接调用tidyr::spread,需要指定关键字段key和对应的值value。但是从理解上来看,我个人更喜欢tidyr包的函数,使用很清晰,大家可以根据实际情况自行选择,好啦,今天的分享结束,下次再见!

udf_async_rbind <- function(path= "D:/R/oper_key_index/data/d_data/",

name= "移网线上单" ,

Date_temp = format(Date_stemp,"%Y%m%d"), # 直接引用变量不执行,需加函数转为常量

Date_last_month_day = ymd("2021-08-31") , # 函数内变量名不要与外部变量名重复

Date_last_month_day1= ymd("2021-07-31") ,

cols=190 ){

x <- udf_DT(paste0(path,name,Date_temp,".xlsx") , 1 ,0)

y <- udf_DT(paste0(path,name,format(Date_last_month_day,"%Y%m%d"),".xlsx"),1,0)

z <- udf_DT(paste0(path,name,format(Date_last_month_day1,"%Y%m%d"),".xlsx"),1,0)

if(ncol(x)>70){

x <- x[,1:cols]

y <- y[,1:cols]

z <- z[,1:cols]}else{print("全列导入")}

setnames(y,names(x))

table <- rbind(x, y)

return(table)

}

mob_dev_2ilist <- udf_async_rbind( name = "移网线上单" )

就是把左件的值发送给右件的表达式,并作为右件表达式函数的第一个参数,就是管道函数。

例如:

anscombe_tidy <- anscombe %>%mutate(observation = seq_len(n()))

以上代码等价于:

anscombe_tidy=mutate(anscombe,observation = seq_len(n()))

扩展资料:

1、管道函数的作用

%>%来自dplyr包的管道函数,其作用是将前一步的结果直接传参给下一步的函数,从而省略了中间的赋值步骤,可以大量减少内存中的对象,节省内存。

符号%>%,这是管道操作,其意思是将%>%左边的对象传递给右边的函数,作为第一个选项的设置(或剩下唯一一个选项的设置)

2、管道函数的语法

在普通的函数中,使用dbms_output输出的信息,需要在服务器执行完整个函数后一次性的返回给客户端。如果需要在客户端实时的输出函数执行过程中的一些信息,在oracle9i以后可以使用管道函数(pipeline function)。

关键字PIPELINED表明这是一个oracle管道函数,oracle管道函数的返回值类型必须为集合,在函数中,PIPE ROW语句被用来返回该集合的单个元素,函数以一个空的RETURN 语句结束,以表明它已经完成。

例如:

create or replace type MsgType as table of varchar2(4000)

/

create or replace function f_pipeline_test return MsgType

PIPELINED as

begin

for i in 1 .. 10 loop

pipe row('Iteration ' || i || ' at ' || systimestamp)

sys.dbms_lock.sleep(1)

end loop

pipe row('All done!')

return

end

/