[NLP] 自然語言處理觀念整理-1 (前處理與觀念)

自然語言處理觀念整理-1

評估.資料量不足作法, 原文提取與清理, 預處理, 原文表示法

[NLP] 自然語言處理觀念整理-2 (前處理範例-使用Keras)

自然語言處理觀念整理-2 

前處理範例-使用Keras

資料探索與前處理觀念

資料探索與前處理觀念

資料探索與前處理是相當複雜的步驟, 初學者常會忽略這部分的重要性, 而直接學習機器學習演算法, 正確的data對訓練model具有決定性的影響, 所以整理這篇文章

[Python][Keras] 影像前資料前處理

影像前處理可以使用CV2套件, 

這裡也把keras做影像資料增強的說明也放進來

[Pandas] 資料探索與前處理實作(2)

pandas dataframe資料探索與前處理範例二

[Spark] Dataframe資料前處理實作(使用Python)

Spark Dataframe資料前處理語法整理(使用Python)

[Pandas] 資料探索與前處理實作(1)

pandas dataframe以類似表格方式展示資料, 相當快速且方便,  也提供豐富的函式庫供資料處理分析使用, 當我們將資料從各種來源匯入後, 因為來源相當多元, 各種系統格式皆不同, 遺漏資料的狀況也屢見不鮮, 必須先對資料進行探索與前處理, 並可搭配matplotlib視覺化函式庫整合, 將探索的結果視覺化

[Spark][ML] Feature Transformers 特徵轉換器

特徵值處理是資料工程中的一個重要環節, 用來將資料轉換為MLlib需要的格式, Feature Transformers為Spark所提供相當方便的工具, 本篇是使用Dataframe格式將官網範例做個測試