千鋒教育-做有情懷、有良心、有品質的職業教育機構

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領取全套視頻
千鋒教育

關注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  技術干貨  > 手把手教你使用Python繪制時間序列數據圖表!

手把手教你使用Python繪制時間序列數據圖表!

來源:千鋒教育
發布人:wjy
時間: 2022-10-09 11:07:46 1665284866

  本文在Python中用箱線圖、傅里葉變換、熵、自相關和 PCA 分析時間序列數據。數據可視化是任何數據相關項目中最重要的階段之一。根據數據可視化的對象,有:

  1.數據可視化報告結果。

  2.數據可視化來分析數據,換句話說,數據科學家內部使用的可視化來提取有關數據的信息,然后實施模型。

  本文主要關注后一種,因為它解釋了一些有助于分析時間序列數據的方法。

  什么是時間序列?

  基本數值時間序列是有序的、帶時間戳的觀測值(測量值)的集合,其中每個觀測值都是從同一測量過程中獲得的數值標量。

  什么是時間戳?

  在我們將“時間”捕獲為數據點之前,我們不會深入探討需要精確定義的許多細節(準確性、格式、日歷約定、時區等等)。我們將時間戳定義為具有所需精度的時間點的表示就足夠了。例如,這可能是根據某個日歷的日期約定(例如“08-06-2020”),或者自 1970 年以來以整數表示的毫秒數(這實際上是 UNIX 紀元約定!)

  Python類庫

  首先,這些是與 notebook 一起使用的庫。大多數代碼都圍繞 NumPy 和 Pandas庫,因為數據主要以 Pandas Dataframe 表現的 NumPy 數組。

用Python繪制時間序列數據圖表1

  導入文件

  下載數據后,運行以下代碼將其導入。

用Python繪制時間序列數據圖表2

用Python繪制時間序列數據圖表3

  正如所觀察到的,數據包含六個傳感器的傳感器數據、每個數據點的日期時間以及機器狀態。這是“BROKEN”、“NORMAL”或“RECOVERING”,但為了簡化可視化,它被分組如下:

用Python繪制時間序列數據圖表4

  在任何編程語言中使用日期時間總是具有挑戰性的,Python 也不例外。盡管處理日期時間有多種方法,但這里使用函數 pandas.to_datetime 將 datetime 列(讀取為字符串)轉換為時間戳。

用Python繪制時間序列數據圖表5

  數據預處理

  在進行可視化之前,分析了本次數據的重復值和缺失值。并且刪除重復項的函數:

用Python繪制時間序列數據圖表6

  填充缺失值的函數:

用Python繪制時間序列數據圖表7

  這是預處理階段的整個管道。此外,數據分為輸入數據和輸出數據。

用Python繪制時間序列數據圖表8

  輸入形狀:(10081, 7)

  輸出形狀:(10081, 2)

用Python繪制時間序列數據圖表9

用Python繪制時間序列數據圖表10

  數據可視化

  現在,準備開始數據可視化。這是傳感器數據和異常情況的圖。完整代碼可以在公眾號:機器學習研習院 后臺回復 時間序列可視化 獲取.

用Python繪制時間序列數據圖表11

  均值和標準

  可以更好地總結數據隨時間變化的行為的最基本圖之一是均值標準圖,我們在其中顯示按時間范圍分組的均值和標準差。這主要有助于分析指定時間范圍內的基線和噪聲。

用Python繪制時間序列數據圖表12

  箱形圖

  另一個有趣的圖表是通過箱線圖顯示的。箱線圖是一種通過四分位數以圖形方式顯示數值數據的局部性、擴散性和偏度組的方法。有兩個主要框表示從第25個百分位數到第75個百分位數的數據,兩者之間用分布的中位數隔開。除了盒子之外,還有從盒子延伸出來的晶須,表明上四分位和下四分位之外的變異性。與數據集其他部分顯著不同的異常值也被繪制為箱線圖上須之外的單獨點。

  這一個類似于平均和標準圖,因為它表明數據的平穩性。但是,它也可以顯示異常值,這有助于從視覺上檢測異常和數據之間的任何關系。

用Python繪制時間序列數據圖表13

  傅里葉變換

  快速傅里葉變換(FFT)是一種計算序列離散傅里葉變換的算法。這種類型的圖很有趣,因為它是處理時間序列時特征提取的主要方法之一。通常的做法不是用時間序列來訓練模型,而是應用傅里葉變換來提取頻率,然后訓練模型。

  為此,我們必須選擇一個滑動窗口來計算FFT。滑動窗口越寬,頻率數越高。缺點是您將得到更少的時間戳,從而丟失數據的時間分辨率。當減小窗口的大小時,我們得到了相反的結果:更少的頻率但更高的時間分辨率。然后,窗口的大小應該取決于任務。

用Python繪制時間序列數據圖表14

  FFT的滑動窗口 對于如下圖所示,我選擇了一個包含64個數據的時間窗口。因此,頻率從1 - 32hz。

用Python繪制時間序列數據圖表15

  熵

  可視化信息和熵是機器學習中的一個有用工具,因為它們是許多特征選擇、構建決策樹和擬合分類模型的基礎。

  熵的計算如下:

  歸一化頻率分布

用Python繪制時間序列數據圖表16

  計算熵

用Python繪制時間序列數據圖表17

  最低熵是針對某一隨機變量計算的,該隨機變量的單個事件的概率為1.0,即確定性。一個隨機變量的最大熵是當所有事件都是等可能的。

用Python繪制時間序列數據圖表18

  降維

  當有多個傳感器時,實現一種降維方法來獲得包含大部分信息的1、2或3個主要組件總是很有趣的。

  對于這個例子,我實現了主成分分析(PCA)。這是計算主要組件并使用它們對數據進行基礎更改的過程。

  被解釋方差比率是每一個被選擇的組成部分的方差百分比。

用Python繪制時間序列數據圖表19

  對于第一個PCA組件,可以繪制數據,并直觀地檢查異常和時間序列之間是否存在關系。

用Python繪制時間序列數據圖表20

用Python繪制時間序列數據圖表21

用Python繪制時間序列數據圖表22

  自相關

  最后,特別是對于預測任務,繪制數據的自相關性是很有趣的。這個表示給定的時間序列和它自己在連續時間間隔中的滯后版本之間的相似程度。

用Python繪制時間序列數據圖表23

  與自相關相關的是增強迪基-富勒統計檢驗,用于檢驗給定的時間序列是否平穩。

用Python繪制時間序列數據圖表24

tags:
聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
10年以上業內強師集結,手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
免費領取
今日已有369人領取成功
劉同學 138****2860 剛剛成功領取
王同學 131****2015 剛剛成功領取
張同學 133****4652 剛剛成功領取
李同學 135****8607 剛剛成功領取
楊同學 132****5667 剛剛成功領取
岳同學 134****6652 剛剛成功領取
梁同學 157****2950 剛剛成功領取
劉同學 189****1015 剛剛成功領取
張同學 155****4678 剛剛成功領取
鄒同學 139****2907 剛剛成功領取
董同學 138****2867 剛剛成功領取
周同學 136****3602 剛剛成功領取
相關推薦HOT
久久亚洲中文字幕精品一区四,亚洲日本另类欧美一区二区,久久久久久久这里只有免费费精品,高清国产激情视频在线观看
亚洲水中色Av综合在线 | 日本亚洲欧美高清专区vr专区 | 日本一区喷水精品视频 | 在线观看黄V免费网站免费 亚洲视频在线香蕉 | 亚洲成aⅴ人在线电影 | 亚洲国产日本韩国欧美mv |