## 簡介

本場景將提供日誌服務SLS Project和物件儲存OSS。透過本教程的操作，您可以使用日誌服務接入NGINX模擬資料，透過資料加工對資料進行清洗並歸檔至OSS中進行儲存。

## 雲起實驗室日誌服務體驗

（活動期完成有機會參與100%中獎）：https://developer.aliyun.com/adc/series/activity/sls-1

## 背景知識

本場景主要涉及以下雲產品和服務：
● 日誌服務（SLS）
日誌服務SLS是雲原生觀測與分析平臺，為Log、Metric、Trace等資料提供大規模、低成本、實時的平臺化服務。日誌服務一站式提供資料採集、加工、查詢與分析、視覺化、告警、消費與投遞等功能，全面提升您在研發、運維、運營、安全等場景的數字化能力。
● 物件儲存OSS
阿里雲物件儲存服務（Object Storage Service，簡稱OSS）是阿里雲提供的海量、安全、低成本、高可靠的雲端儲存服務。其資料設計永續性不低於99.999999999%，服務設計可用性不低於99.99%。具有與平臺無關的RESTful。

## 接入NGINX模擬資料
本步驟將指導您如何使用日誌服務接入NGINX模擬資料。

1. 雙擊開啟虛擬桌面的**Firefox ESR瀏覽器**。
2. 在RAM使用者登入框中單擊**下一步**，並複製貼上頁面左上角的**子使用者密碼**到**使用者密碼輸入框**，單擊**登入**。
3. 複製下方地址，在Firefox ESR瀏覽器開啟新頁籤，貼上並訪問日誌服務控制檯。

```
https://sls.console.aliyun.com/
```

4. 在**日誌服務控制檯**下方的**Project**列表中，選擇Project資源所在地域，然後單擊Project名稱。

**說明** ：您可以在**雲產品資源**列表中檢視Project資源所在地域和Project名稱。

![img](https://img-blog.csdnimg.cn/img_convert/47fb627882fa1451a21902720dd1d7c6.png)

5. 在日誌儲存頁面左側，單擊**日誌庫**下的![img](https://img-blog.csdnimg.cn/img_convert/0c2ef654b3b58445b3e0de9cbec76080.png) 圖示。

![img](https://img-blog.csdnimg.cn/img_convert/aeaeac1495360ae782e7a0e282d43c78.png)

6. 在**建立Logstore**對話方塊中，輸入**Logstore名稱**，開啟**WebTracking**開關，然後單擊**確定**。

引數說明：

- **Logstore名稱**：輸入target。
- **WebTracking**：開啟**WebTracking**開關，您可以透過WebTracking從HTML、H5、iOS或Android上採集資料到日誌服務。

![img](https://img-blog.csdnimg.cn/img_convert/e9a48f40e208c8bc157eefc8ca4781aa.png)

7. 在**建立成功**對話方塊中，單擊**取消**。

![img](https://img-blog.csdnimg.cn/img_convert/295ba4b3c91d016043a6f52300b91f6f.png)

8. 在日誌儲存頁面左側，選擇**日誌庫>target>資料接入>模擬接入**，然後單擊![img](https://img-blog.csdnimg.cn/img_convert/4e38eb0c0d08dc73bf77b44a589cebac.png) 圖示。

![img](https://img-blog.csdnimg.cn/img_convert/39aa0f7d4bc288b1c15c12fbd2696926.png)

9. 在**快速接入**皮膚中，單擊**NGINX訪問日誌**下的**模擬**。

![img](https://img-blog.csdnimg.cn/img_convert/ec892d6ac992e3eaa2d6193d21722ea1.png)

10. 在**模擬接入**頁面，單擊**開始匯入**。

![img](https://img-blog.csdnimg.cn/img_convert/7993fbfc6c6ee6e043d0d390255181e8.png)

11. 在**模擬接入**頁面，等待大約一分鐘，模擬資料生成後，單擊**開始使用**。

![img](https://img-blog.csdnimg.cn/img_convert/033764bf8b7d25c82af706d4005547db.png)

返回如下頁面，您可以看到生成的NGINX模擬資料。

![img](https://img-blog.csdnimg.cn/img_convert/8e8bfa28eecc5d9b91dd6e728ee8b4c4.png)

## 建立資料加工
本步驟將指導您如何建立資料加工，將status欄位不為200的請求日誌儲存到目標庫中，並檢視目標庫日誌。

1. 在日誌儲存頁面左側，單擊**日誌庫**下的![img](https://img-blog.csdnimg.cn/img_convert/43a673ce07727428cb40e5724ff1e8b0.png) 圖示。

![img](https://img-blog.csdnimg.cn/img_convert/65c01f45d89be2220e340551e8f10449.png)

2. 在**建立Logstore**對話方塊中，輸入**Logstore名稱**，開啟**WebTracking**開關，然後單擊**確定**。

**說明 ：**該Logstore用來status欄位不為200的請求日誌。

引數說明：

- **Logstore名稱**：輸入target-1。
- **WebTracking**：開啟**WebTracking**開關，您可以透過WebTracking從HTML、H5、iOS或Android上採集資料到日誌服務。

![img](https://img-blog.csdnimg.cn/img_convert/e9ea9abab258b43ef3e8403b11e7082d.png)

3. 在**建立成功**對話方塊中，單擊**取消**。

![img](https://img-blog.csdnimg.cn/img_convert/244b42fa711a8016ef1507c5ec5d20d7.png)

4. 在日誌儲存頁面左側，單擊**target-1**。

![img](https://img-blog.csdnimg.cn/img_convert/2a915ccdf5ea048c3b4e47f610632e44.png)

5. 在**錯誤**對話方塊中，單擊**確定**。

![img](https://img-blog.csdnimg.cn/img_convert/c9896f9d8289f373e423128a57937024.png)

6. 在**target-1**頁籤右上方，單擊**開啟索引**。

![img](https://img-blog.csdnimg.cn/img_convert/3ac75c8d79a2c6f384ddd6045b50dd3e.png)

7. 在**查詢分析**皮膚中，開啟**全文索引**，單擊**確定**。

![img](https://img-blog.csdnimg.cn/img_convert/07687fdd09104bdec87fad6412335fa0.png)

8. 在**查詢分析設定**對話方塊中，單擊**確認**。

![img](https://img-blog.csdnimg.cn/img_convert/1f59b42e8a29b76aae15cafc2b04e0a4.png)

9. 在**target-1**頁籤左側，單擊**target**。

![img](https://img-blog.csdnimg.cn/img_convert/07b21c7140207e56f89c53428803062e.png)

10. 在**target**頁籤，單擊**資料加工**。

![img](https://img-blog.csdnimg.cn/img_convert/457757c79d59ea7586b821fb5de9d98f.png)

11. 在**target**資料加工頁籤，輸入如下加工語句，單擊**儲存資料加工**。

```
e_drop(e_search("status:200"))
```

![img](https://img-blog.csdnimg.cn/img_convert/937f29d568003c5156cd79b12123b078.png)

12. 在**建立資料加工規則**皮膚，輸入**規則名稱**，單擊**新增**，然後配置**儲存目標**，時間**範圍**選擇為某時間，單擊**確定**。

引數說明：

- **規則名稱**：自定義規則名稱，例如nginx-data-cleaning。
- **目標名稱**：儲存目標的名稱，輸入target-1。
- **目標Region**：選擇您的Project資源所在地域。
- **目標Project**：選擇您的Project名稱。
- **目標庫**：選擇target-1。
- **時間範圍**：選擇某時間開始。

![img](https://img-blog.csdnimg.cn/img_convert/ae7c218326be39caa2027c812ca16b3a.png)

![img](https://img-blog.csdnimg.cn/img_convert/c12db591e1e2003a5a5d83b8f5912152.png)

13. 在**建立結果**對話方塊中，單擊**確認**。

![img](https://img-blog.csdnimg.cn/img_convert/50b5314d626ebe64659d2140cb328850.png)

14. 在**target**頁籤左側，單擊**target-1**。

![img](https://img-blog.csdnimg.cn/img_convert/202a60a304f8507d5f132f4ee215921d.png)

15. 在**target-1**頁籤右上方，單擊**查詢/分析**。

![img](https://img-blog.csdnimg.cn/img_convert/0cf06226cced5428312722fe5cd0d704.png)

返回如下頁面，您可以看到在目標庫target-1中的日誌，只有status欄位非200的日誌。

![img](https://img-blog.csdnimg.cn/img_convert/beb080c272952a7cc2837951b406d37f.png)

## 日誌投遞
本步驟將指導您如何將資料加工後的日誌投遞到物件儲存OSS。

1. 在**target-1**頁籤頁面左側，選擇**日誌庫>target-1>資料處理>匯出>OSS（物件儲存）**。

![img](https://img-blog.csdnimg.cn/img_convert/39d4e6a610aa739be111e13268717ea4.png)

2. 在**OSS投遞管理**頁籤，單擊**開啟投遞**。

![img](https://img-blog.csdnimg.cn/img_convert/c81a79d526add3eb1eb5751b4bfb3d47.png)

3. 在**投遞提示**對話方塊中，單擊**直接投遞**。

![img](https://img-blog.csdnimg.cn/img_convert/3981705a263616d207f26ba77ee39c74.png)

4. 在**OSS投遞功能**對話方塊中，參考如下配置，其他配置保持預設即可，單擊**確定**。

引數說明：

- **OSS投遞名稱**：自定義OSS投遞名稱，例如test。
- **OSS Bucket**：輸入Bucket Name。您可以在**雲產品資源**列表中檢視到Bucket Name。

![img](https://img-blog.csdnimg.cn/img_convert/002c063c25ffe995a0b7af707b5459c1.png)

5. 在**投遞提示**對話方塊中，單擊**確認**。

![img](https://img-blog.csdnimg.cn/img_convert/37d14f716eae6a408b145a082f6a8f5c.png)

6. 在**OSS投遞管理器**頁籤，稍等三分鐘並重新整理頁面，您可以看到如下圖頁面，表示您已成功將資料加工後的日誌投遞到物件儲存OSS。

![img](https://img-blog.csdnimg.cn/img_convert/f520ce516ce7b88783ac4d82a1db0377.png)

7. 複製下方地址，在Firefox ESR瀏覽器開啟新頁籤，貼上並訪問物件儲存OSS控制檯。

```
https://oss.console.aliyun.com/overview
```

8. 在左側導航欄中，單擊**Bucket列表**。

![img](https://img-blog.csdnimg.cn/img_convert/3d2e62bc6e70da56063804111078d612.png)

9. 在**Bucket列表**頁面，找到您的Bucket名稱，單擊**Bucket名稱**。

![img](https://img-blog.csdnimg.cn/img_convert/6eaa0d114a7c7bd9a23c0b2d3097cab6.png)

返回如下頁面，您可以看到您的Bucket中有一個資料夾，資料夾中就儲存著資料加工後的日誌。

![img](https://img-blog.csdnimg.cn/img_convert/6e1e1155e937b365c2715bbcfa583cf1.png)

![img](https://img-blog.csdnimg.cn/img_convert/db773c323fe14cd0f89f17a43bc01c79.png)

日誌服務之資料清洗與入湖

相關文章