### Python量化資料倉儲搭建系列1：資料庫安裝與操作

```
本系列教程為量化開發者，提供本地量化金融資料倉儲的搭建教程與全套原始碼。我們以恆有數(UDATA)金融資料社群為資料來源，將金融基礎資料落到本地資料庫。教程提供全套原始碼，包括歷史資料下載與增量資料更新，資料更新任務部署與日常監控等操作。
```

### 一、資料倉儲

資料倉儲（Data Warehouse）簡稱DW或DWH，資料倉儲顧名思義，是一個很大的資料儲存集合。是資料庫的一種概念上的升級，輸入方是各種各樣的資料來源，最終的輸出用於資料分析、量化分析、資料探勘、資料包表等方向，從邏輯上講資料倉儲和資料庫是沒有什麼區別的。

### 二、資料庫選型

目前常用的開源免費資料庫有MySQL、MongoDB 、Postgresql 和 SQLite （Python自帶）。在2020-2021年DB-Engines 排行榜前十的見下圖，各個資料庫有各自的特點和適用場景。具體選用哪一個作為量化投資的資料庫，取決於儲存的資料特點、效能要求和成本。對於個人來說，硬體水平、技術水平、費用成本和學習時間成本等因素都相當重要。

![](https://oscimg.oschina.net/oscnet/up-7e230e3bdbb365dfce6113ce90b506d73d3.png)

本系列教程，選用MySQL資料庫為例，講解資料倉儲的搭建過程。其他資料庫相關教程，也將會陸續推出，敬請期待。

MySQL資料庫是當今最流行的開放原始碼資料庫之一，為使用者提供了一個相對簡單的解決方案，適用於廣泛的應用程式部署。MySQL Community Server是MySQL資料庫的免費開源版，對個人使用者非常友好。

### 三、資料庫安裝

#### 1、MySQL Community Server安裝包下載

安裝包下載網頁為：https://dev.mysql.com/downloads/mysql/，選擇對應的作業系統，點選下載，例如下圖為下載64位Windows系統MySQL Community Server安裝包：

![](https://oscimg.oschina.net/oscnet/up-145ea87f199999b7c5affa189e336fc91d9.png)

#### 2、軟體安裝

A、雙擊安裝包，進行安裝；

B、Choosing a Setup Type頁面，選擇Developer Default，點選next進入下一步；

C、Path Conflicts頁面，確認安裝路徑與資料存放路徑，點選next進入下一步；

D、Check Requirements頁面，檢查安裝條件，直接點選next進入下一步；

E、Installation頁面，點選execute執行（此處等待時間較久），執行完後點選next進入下一步；

F、Product Configuration頁面，點選next進入下一步；

G、Type and Networking頁面，點選next進入下一步；

H、Authentication Method頁面，點選next進入下一步；

I、Accounts and Roles頁面，設定Root密碼，點選next進入下一步；

J、Windows Service頁面，點選next進入下一步；

K、Apply Configuration頁面，點選execute執行，點選Finish；

L、Product Configuration頁面，點選next進入下一步；

M、MySQL Router Configuration頁面，點選Finish；

N、Product Configuration頁面，點選next進入下一步；

O、Connect To Server頁面，填寫並check一下root密碼，點選next進入下一步；、

P、Apply Configuration頁面，點選execute執行，點選Finish；

Q、Product Configuration頁面，點選next進入下一步；

R、Installation Complete頁面，點選Finish；

完成上述步驟，即可完成安裝。

### 四、MySQL基本使用教程

#### 1、建立資料庫

`create database ;`

在MySQL Workbench介面中，建庫操作如下圖：

![](https://oscimg.oschina.net/oscnet/up-e0defee23a982ae34d2bbd341187514c4d6.png)

#### 2、刪除庫

`drop database ;`

#### 3、建立表

`create table table_name(column_name column_type);`

以股票列表為例，建表程式碼如下：

```sql
/*
引數名         型別     長度   說明        備註
secu_code      String   20     證券程式碼
hs_code        String   20     HS程式碼
secu_abbr      String   20     證券簡稱
chi_name       String   20     中文名稱
secu_market    String   20     證券市場
listed_state   String   20     上市狀態
listed_sector  String   20     上市板塊
*/
CREATE TABLE udata.TB_Stock_List (
                        secu_code CHAR(20),
                        hs_code CHAR(20),
                        secu_abbr CHAR(20),
                        chi_name CHAR(40),
                        secu_market CHAR(20), 
                        listed_state CHAR(20),
                        listed_sector CHAR(20),
                        updatetime CHAR(20));
```

#### 4、刪除表

`drop table table_name;`

#### 5、修改表名

`alter table old_name rename to new_name或rename table old_name to new_name;`

#### 6、增加欄位

`alter table table_name add column_name column_type;`

#### 7、修改欄位

`alter table table_name change column_name new_column_name new_column_name_type;`

#### 8、刪除欄位

`alter table table_name drop column_name;`

#### 9、插入資料

```sql
INSERT INTO table_name ( field1, field2,...fieldN )
						VALUES
                       ( value1, value2,...valueN );
```

#### 10、查詢資料

```sql
SELECT column_name1,column_name2
FROM table_name
[WHERE Clause]
[LIMIT N]
```

A、查詢語句中，可以使用一個或者多個表，表之間使用逗號分割，並使用WHERE語句來設定查詢條件；

B、SELECT 命令可以讀取一條或者多條記錄；

C、可以使用星號（*）來代替其他欄位，SELECT語句會返回表的所有欄位資料；

D、可以使用 WHERE 語句來包含任何條件；

E、可以使用 LIMIT 屬性來設定返回的記錄數

#### 11、WHERE用法

```sql
SELECT field1, field2,...fieldN FROM table_name1, table_name2
WHERE condition1 AND condition2
```

A、使用 AND 或者 OR 指定一個或多個條件；

B、WHERE 子句也可以運用於 SQL 的 DELETE 或者 UPDATE 命令；

C、WHERE 子句類似於程式語言中的 if 條件；

#### 12、UPDATE用法

```sql
UPDATE table_name SET field1=new-value1, field2=new-value2
[WHERE Clause]
```

A、可以同時更新一個或多個欄位；

#### 13、DELETE用法

```sql
DELETE FROM table_name [WHERE Clause]
```

A、如果沒有指定 WHERE 子句，MySQL 表中的所有記錄將被刪除；

#### 14、排序

```sql
SELECT field1, field2,...fieldN FROM table_name1, table_name2...
ORDER BY field1 [ASC [DESC][預設 ASC]], [field2...] [ASC [DESC][預設 ASC]]
```

A、可以設定多個欄位來排序；

B、可以使用 ASC 或 DESC 關鍵字來設定查詢結果是按升序或降序排列。 預設情況下，它是按升序排列；

#### 15、其他

UNION、LIKE、GROUP BY、JOIN、NULL、索引、臨時表等等，更多用法可參考專業教程系統學習。

下一節《Python量化資料倉儲搭建系列2：Python運算元據庫》

Python量化資料倉儲搭建系列1：資料庫安裝與操作

相關文章