
R語言與格式、日期格式、格式轉化
R語言的基礎包中提供了兩種類型的時間數據,一類是Date日期數據,它不包括時間和時區信息,另一類是POSIXct/POSIXlt類型數據,其中包括了日期、時間和時區信息?;究偨Y如下:
日期data,存儲的是天;
時間POSIXct 存儲的是秒,POSIXlt 打散,年月日不同;
日期-時間=不可運算。
一般來講,R語言中建立時序數據是通過字符型轉化而來,但由于時序數據形式多樣,而且R中存貯格式也是五花八門,例如Date/ts/xts/zoo/tis/fts等等。lubridate包(后續有介紹,應用四),timeDate包,都有用。
常見的格式:
[plain] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
d<-as.character(z) #將數值向量z<-(0:9)轉化為字符向量c("0", "1", "2", ..., "9")。
as.integer(d) #將d轉化為數值向量
e <- numeric() #產生一個numeric型的空向量e
a=data.frame(a) #變成R的數據框
factor() #變成因子 可以用levels()來看因子個數
在data.frame中,是可以實現數據集重命名的,比如data.frame(x=iris,y=cars),
也可以實現橫向、縱向重命名,data.frame(x=iris,y=cars,row.names=iris)
——————————————————————————————————————————
后續加更內容
應用1——如何通過生日計算年齡
應用2——日期分組
應用三——生成按天的時間序列并進行回歸
應用四:靈活處理時間數據—lubridate包(來源TipDM)
應用五:如何在循環、函數中,輸出實時時間消耗?
——————————————————————————————————————————
時間的標準格式
mydate = as.POSIXlt(’2005-4-19 7:01:00’)
names(mydate)
默認情況下,日期之前是以/或者-進行分隔,而時間則以:進行分隔;
輸入的標準格式為:日期 時間(日期與時間中間有空隔隔開)
時間的標準格式為:時:分 或者 時:分:秒;
如果輸入的格式不是標準格式,則同樣需要使用strptime函數,利用format來進行指定。
——————————————————————————————————————————
一、日期型數據——data
1、as.Data函數
在R中自帶的日期形式為:as.Date();以數值形式存儲;
對于規則的格式,則不需要用format指定格式;如果輸入的格式不規則,可以通過format指定的格式讀入;其中以1970-01-01定義為第0天,之后的年份會以距離這天來計算。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> x<-as.Date("1970-01-01")
> unclass(x)
[1] 0
>
> unclass(as.Date("1970-02-01")) #19700201代表第31天
[1] 31
代碼解讀:unclass可以將日期變成以天來計數,比如1970-02-01輸出的31,就代表著距離1970-01-01有31天。
as.data中的參數格式:年-月-日或者年/月/日;如果不是以上二種格式,則會提供錯誤——錯誤于charTo按照Date(x) : 字符串的格式不夠標準明確;
例如這樣的數據格式,就常常報錯。
19:15.
顯示為:2011/1/1 19:15
[plain] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
as.Date('23-2013-1',format='%d-%Y-%m')
#其中這個%d%Y可以節選其中一個
#%Y%y 大寫代表年份四位數,小寫代表年份二位數,要注意
2、%d%y%m-基本格式
格式
意義
%d
月份中當的天數
%m
月份,以數字形式表示
%b
月份,縮寫
%B
月份,完整的月份名,指英文
%y
年份,以二位數字表示
%Y
年份,以四位數字表示
#其它日期相關函數
weekdays()取日期對象所處的周幾;
months()取日期對象的月份;
quarters()取日期對象的季度。
————————————————————————————————————————
二、時間型——POSIXct與POSIXlt
POSIXct 是以1970年1月1號開始的以秒進行存儲,如果是負數,則是1970-01-01年以前;正數則是1970年以后。
POSIXlt 是以列表的形式存儲:年、月、日、時、分、秒,作用是打散時間;
1、POSIXlt 格式
主要特點:作用是打散時間,把時間分成年、月、日、時、分、秒,并進行存儲。
可以作為時間篩選的一種。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> today<-Sys.time()
> unclass(as.POSIXlt(today))
$sec
[1] 53.27151
$min
[1] 38
$hour
[1] 20
$mday
[1] 6
$mon
[1] 5
$year
[1] 116
$wday
[1] 1
$yday
[1] 157
$isdst
[1] 0
$zone
[1] "CST"
$gmtoff
[1] 28800
attr(,"tzone")
[1] "" "CST" "CDT"
代碼解讀:unclass將時間打散。
2、POSIXct 格式
主要特點:以秒進行存儲。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> today<-Sys.time()
> today
[1] "2016-06-06 20:42:22 CST"
> unclass(as.POSIXct(today))
[1] 1465216942
解讀:比如今天,unclass之后,代表今天2016-06-06距離1970-01-01為1465216942秒。
#GMT代表時區,德意志時間,CST也代表時區
———————————————————————————————————————
三、時間運算
1、基本運算函數
Sys.Date() #字符串類型
typeof(Sys.Date()) #系統日期類型
2、直接加減
相同的格式才能相互減,不能加。二進列的+法對"Date"、"POSIXt"對象不適用。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> as.Date("2011-07-01") - as.Date(today)
Time difference of -1802 days
> as.POSIXct(today)-as.POSIXct(as.Date("2012-10-25 01:00:00"))
Time difference of 1320.529 days
> as.POSIXlt(today)-as.POSIXlt(as.Date("2012-10-25 01:00:00"))
Time difference of 1320.529 days
相互減之后,一般結果輸出的天數。
3、difftime函數——計算時差
不同格式的時間都可以進行運算。并且可以實現的是計算兩個時間間隔:秒、分鐘、小時、天、星期。
但是不能計算年、月、季度的時間差。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
gtd <- as.Date("2011-07-01")
difftime(as.POSIXct(today), gtd, units="hours") #只能計算日期差,還可以是“secs”, “mins”, “hours”, “days”
4、format函數——提取關鍵信息
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> today<-Sys.time()
> format(today,format="%B-%d-%Y")
[1] "六月-06-2016"
format函數可以將時間格式,調節成指定時間樣式。format(today,format="%Y")其中的format可以自由調節,獲取你想要的時間信息。
并且format函數可以識別as.Data型以及POSIXct與POSIXlt型,將其日期進行提取與之后要討論的split類型。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> today<-Sys.time()
> format(as.Date(today),format="%Y")
[1] "2016"
> format(as.POSIXlt(today),format="%Y")
[1] "2016"
> format(as.POSIXct(today),format="%Y")
[1] "2016"
但是format出來的時間不能直接做減法,會出現錯誤: non-numeric argument to binary operator
5、strptime函數
該函數是將字符型時間轉化為 "POSIXlt" 和"POSIXct"兩類。跟format比較相似。
strptime之后的時間是可以直接做減法,因為直接是"POSIXlt" 和"POSIXct"格式了。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
> strptime("2006-01-08 10:07:52", "%Y-%m-%d")-strptime("2006-01-15 10:07:52", "%Y-%m-%d")
Time difference of -7 days
> class(strptime("2006-01-08 10:07:52", "%Y-%m-%d"))
[1] "POSIXlt" "POSIXt"
———————————————————————————————————————
四、遇見的問題
1、常常報錯。
錯誤于charTo按照Date(x) : 字符串的格式不夠標準明確。這個錯誤經常出現,我本來的數據格式是
19:15.
后來換成“2011/1/1”這樣的就不會報錯了,需要數據庫自動改變。
[plain] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
#幾種錯誤匯總
dtV<-data.frame(as.POSIXct(a$b,format="%d.%m.%Y")) #錯,讀出來都是NA
as.Date(a$b, "%Y年%m月%d日") #錯,讀不出來
as.POSIXct(strptime(a$b, "%Y-%m-%d")) #讀不出來
#轉化成xts格式也讀不出來
install.packages("xts")
library(xts)
as.xts(read.zoo("time.csv",header=T))
a <- as.xts(a, descr='my new xts object')
as.xts(read.zoo("a.csv",header=T))
#錯
#轉化成數值型也不對
c=as.numeric(sales[,2])
2、excel另存為csv時發生的錯誤。
一位網友說:我以前是在excel里另存為csv格式,百度上說CSV檔如果以EXCEL開啟,由于計算機檔案數據轉換的原因,會將其CRC之數值改做科學記號方式儲存,而造成檔案中的 CRC值發生錯誤。
——————————————————————————————————————————————————
應用1——如何通過生日計算年齡
1、format函數
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
timeformat<-function(x){
format(as.POSIXct(x),format="%Y")
}
sapply(as.Date(data$birthdate),timeformat)
format只能一個一個操作,可以先寫成函數,然后計算得出年份,之后用如今的年份相減得到年齡。
2、字符型——strsplit
先轉化為字符型,然后進行分割。
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
data.frame(sapply(as.character(data$birthdate),function(x){strsplit(x,"-")[[1]][1]}))
注意,其中strsplit中的"-",根據具體時間格式情況來定義。
——————————————————————————————————————————————————
應用2——日期分組
一種按照日期范圍——例如按照周、月、季度或者年——對其進行分組的超簡便處理方式:R語言的cut()函數。
假設vector中存在以下示例數據:
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
vDates <- as.Date(c("2013-06-01", "2013-07-08", "2013-09-01", "2013-09-15")) #as.Data()函數的作用非常重要;如果沒有它,R語言會認為以上內容僅僅是數字串而非日期對象
[1] "2013-06-01" "2013-07-08" "2013-09-01" "2013-09-15"
vDates.bymonth <- cut(vDates, breaks = "month")
[1] 2013-06-01 2013-07-01 2013-09-01 2013-09-01
Levels: 2013-06-01 2013-07-01 2013-08-01 2013-09-01
Dates <- data.frame(vDates, vDates.bymonth)
來源于R語言︱數據集分組、篩選
應用三——生成按天的時間序列并進行回歸
如果是生成簡單的年度,月度數據,ts函數可以滿足,但是如果生成的是每天。因為有閏年緣故,所以zoo包可以很好地解決這個問題。
還有筆者在做一個簡單的時間序列回歸時候,疑惑:
做關于時間序列的ols最小二乘法回歸方程,按年來好說,但是如果是按天,如果進行計算呢?
1、把天變成一排規律遞增的數字來代替;
2、ts函數變化之后,也是變成一個遞增的數字。
以上兩種,做的結果都一樣,所以沒有什么太大的區別。
關于ts函數by day每一天的時間序列生成,該如何呢?
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
n=30
t<-ts(1:n,frequency=1,start=as.Date("2010-01-09"))
生成一個按天的時間序列。
——————————————————————————————————————————————————
應用四:靈活處理時間數據—lubridate包(來源TipDM)
lubridate包是由Garrett Grolemund 和 Hadley Wickham寫的,可以靈活地處理時間數據。lubridate包主要有兩類函數,一類是處理時點數據(time instants),另一類是處理時段數據(time spans)。
1、時點類函數
主要包括解析、抽取、修改。
2、時段類函數
可以處理三類對象,分別是:
interval:最簡單的時段對象,它由兩個時點數據構成。
duration:去除了時間兩端的信息,純粹以秒為單位計算時段的長度,不考慮閏年和閏秒,它同時也兼容基本包中的difftime類型對象。
period:以較長的時鐘周期來計算時段長度,它考慮了閏年和閏秒,適用于長期的時間計算。以2012年為例,duration計算的一年是標準不變的365天,而period計算的一年就會變成366天。
有了時點和時段數據,就可以進行各種計算了。
3、時區信息
lubridate包提供了三個函數:
tz:提取時間數據的時區
with_tz:將時間數據轉換為另一個時區的同一時間
force_tz:將時間數據的時區強制轉換為另一個時區
——————————————————————————————————————————————————
應用五:如何在循環、函數中,輸出實時時間消耗?
想知道循環中進行到哪里?這樣可以合理安排函數進程。那么怎么辦呢?
第一辦法:使用Rstudio 1.0版本,里面有一個Profiling with profvis,可以很好的對你函數每一步的耗時進行參看。
R︱Rstudio 1.0版本嘗鮮(R notebook、下載鏈接、sparkR、代碼時間測試profile)
當然,這個不能實時輸出內容。
第二辦法:利用difftime函數
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
t1 = Sys.time()
for (i in 1:5){
a=a+1
b=a*a
print(difftime(Sys.time(), t1, units = 'sec'))
}
先預設當前時間,然后用difftime+print方式,循環輸出。
—————————————————————————————————
應用六:因子型數據轉化為數值型
因子型轉化的時候會發現,譬如10000這個數字,會變為6,也就是因子型里面對應的次序,這樣并不是我們想要的。所以,可以先變為字符型as.character:
[html] view plain copy
print?在CODE上查看代碼片派生到我的代碼片
as.numeric(as.character(data))
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25