學會 Python 語言和 BeautifulSoup 程式庫後，
這次以國泰世華銀行的外匯資料當作練習題目。
目前分類：未分類文章 (64)
- Jun 27 Sat 2020 19:54
抓取國泰世華銀行外匯資料
- Jun 27 Sat 2020 19:28
[R 語言] 簡單線性回歸
- Jun 26 Fri 2020 22:27
[訓練模型的前置準備] 由1維到2維儲存空間
在訓練模型的過程中常會遇到訓練資料維度不符合的問題。本文藉由觀察錯誤及尋找網路資料以克服訓練資料維度的問題。
- Jun 26 Fri 2020 19:33
[Python: Linear Regression] 簡單線性回歸
- Jun 25 Thu 2020 17:40
[網頁爬蟲] 利用 Python DataFrame 抓取銀行匯率
- Jun 24 Wed 2020 14:03
R 語言的大數據分析4：特徵值的比例調整：Feature Scaling
在數據預先處理時，特徵值的比例調整是很重要的課題。
R 語言中也可以利用內建的函數來達成比例調整。
- Jun 23 Tue 2020 01:10
使用 Flask 建置 Web Service2: 安裝 Flask 結構 Web API 到 Heroku 網站
本文介紹將 Flask 結構的 Web Service 放到真實的網站結構，並介紹部屬到 Heroku 網站的過程中如何解決中間發生的錯誤。
- Jun 21 Sun 2020 18:59
R 語言的大數據分析3：數據區分成訓練(training)與測試(test)集合
數據分析裡面，R 語言也可將資料區分成訓練(training)與測試(test)集合。本文將使用 R 語言語句完成資料切割的工作。
1. 先看程式庫
資料區分功能需要 caTools，我們可以先看 右下方 packages裡面的內容
- Jun 20 Sat 2020 19:53
R 語言的大數據分析2：類型資料(categorial data)數字化
在人類的世界裡，固定範圍的資料我們可以用數字加以區隔。
這裡我們運用 R 語言 將類型資料數字化。
- Jun 20 Sat 2020 19:06
R 語言的大數據分析1：讀取檔案和遺失值的處理
- Jun 20 Sat 2020 17:15
Python 大數據分析3：特徵值的比例調整：Feature Scaling
在數據預先處理時，特徵值的比例調整是很重要的課題。這裡我們利用 Scikit-learn 裡的 StandardScaler class來幫我們作數據預先處理。
- Jun 18 Thu 2020 19:11
Python 大數據分析2：OneHotEncoding
對於分類問題，電腦模型裡面有一種稱 OneHot Encoding的編碼方式。
其實這只是電腦工具的使用，對於數據處理的流程沒有直接關係。
- Jun 18 Thu 2020 01:46
Python 大數據分析1：缺少值填補
最近很流行數據分析。本文紀錄數據分析時遇到的
數值缺少/漏失問題，並提出 Scikit Learn SimpleImputer類別，以平均值來填補缺少數值。
- Jun 16 Tue 2020 20:33
[Python] 使用 Flask 建置 Web Service1：啟動伺服器問題排除、多個函式輸出
Flask 是 Python 開發環境中內建的安裝程式庫，適合發展簡單、輕量級的網站或網路服務。
本文紀錄第一次啟動 Flask 伺服器服務所遇到的問題，問題解決步驟，以及多個函式在一個檔案裡輸出的處理方式。
- Jun 15 Mon 2020 10:51
利用 Django 結構做出全台PM2.5 查詢 LINE Bot 機器人
功能1：使用說明
一進入機器人畫面，下方的圖文選單會顯示。按下左邊的 使用說明，會出現操作方法。圖文選單上的兩個圖片按鈕會提供全台灣 PM2.5 指數最少和最多的縣市和地點。想查看某一縣市的數值，先輸入 # 符號，再輸入縣市名稱，就會出現那個縣市內全部站臺平均後的PM2.5 指數。如果想知道更細的內容，先輸入 ^ 符號，加上縣市名稱，再輸入# 加上地點名稱，機器人程式會傳回該縣市裡面該地點的 PM2.5 指數；如果找不到，就回傳 無此縣市 或 站台。
- Jun 12 Fri 2020 16:07
MVC 設計4：加入 Controller 以讀取 model 資料
前兩篇文章中，我們將資料庫和 model 物件準備好，可以準備讀取資料。但是 MVC 的結構告訴我們所有使用者的操作都由 Controller 完成。接下來我們要修改 Controller 程式以讀取資料庫內容，最後顯示在網頁內。
- Jun 12 Fri 2020 12:35
MVC 設計3：加入 資料存取物件
- Jun 12 Fri 2020 09:56
MVC 設計2：加入 SQL 資料庫，新增表格、表格規劃
- Jun 11 Thu 2020 19:14
用 Visual Studio 2019 開發 MVC 結構：新增專案和加入時間日期
- Jun 05 Fri 2020 17:41
[自動化程式] 自動抓取網路內容，存入 mySQL 資料庫
從網路上抓取資料，再存放到公司資料庫 是 MIS 工程師常見的工作。首先要找到資訊的網站，經過整理找出資料型態。接下來要到資料庫裡建立新的表格(Table)，設定資料欄位和資料型態，最後再把資料一筆一筆地放進資料庫。這樣重複性高的工作其實不少，也耗費了許多人工時間。
