租期14天
今日租書可閱讀至2024-09-28
Python 大數據專案 X 工程 X 產品 資料工程師的升級攻略
本書獨家解析知名大數據專案,FinMind,帶你一窺大數據產品的發展過程,打造專屬個人的大數據 side project、作品、產品。讀完本書,你將學會分散式爬蟲、rabbitmq、api、MySQL 資料庫、壓力測試、docker、CICD、雲端、traefik、redash 視覺化等,本書是一本集大成的作品。
分享在 Github 獲得 1,500 stars 的大數據 side project,並幫助讀者從 0 開始,打造專屬個人的大數據 side project。
● 資料工程
○ 使用分散式技術,rabbitmq、flower、celery,收集證交所、櫃買中心、期交所等股市資訊。
○ 使用 docker、fastapi 架設 RESTful API 服務。
○ 使用 docker swarm 架設分散式服務,包含爬蟲、api、資料庫 MySQL、rabbitmq 等服務。
○ 使用雲端服務,一個月 5 美金,且免費提供 100 美金額度。
○ 一站式管理多台分散式機器。
● 產品迭代
○ 單元測試 unit test 介紹,包含爬蟲、api 測試範例。
○ 使用 CICD 做持續性整合、部屬,並以 gitlab-ci 搭配 API 服務做為範例。
● API 產品上線
○ 免費網址申請教學,No-IP。
○ 免費 SSL 憑證教學,Let's Encrypt。
○ 一站式管理多服務網址,容器化反向代理工具 Traefik。
● 業界資料視覺化工具
○ 使用 Redash 建立個人化、股市分析儀表板。
○ 使用分散式技術,rabbitmq、flower、celery,收集證交所、櫃買中心、期交所等股市資訊。
○ 使用 docker、fastapi 架設 RESTful API 服務。
○ 使用 docker swarm 架設分散式服務,包含爬蟲、api、資料庫 MySQL、rabbitmq 等服務。
○ 使用雲端服務,一個月 5 美金,且免費提供 100 美金額度。
○ 一站式管理多台分散式機器。
● 產品迭代
○ 單元測試 unit test 介紹,包含爬蟲、api 測試範例。
○ 使用 CICD 做持續性整合、部屬,並以 gitlab-ci 搭配 API 服務做為範例。
● API 產品上線
○ 免費網址申請教學,No-IP。
○ 免費 SSL 憑證教學,Let's Encrypt。
○ 一站式管理多服務網址,容器化反向代理工具 Traefik。
● 業界資料視覺化工具
○ 使用 Redash 建立個人化、股市分析儀表板。
- 第 1 篇 資料工程 ETL(第ix頁)
- 01 本書介紹(第1-1頁)
- 02 開發環境(第2-1頁)
- 03 Docker(第3-1頁)
- 04 雲端(第4-1頁)
- 05 資料收集(第5-1頁)
- 06 資料提供 — RESTful API 設計(第6-1頁)
- 07 容器管理工具 Docker(第7-1頁)
- 第 2 篇 產品迭代-- 測試運維(第7-63頁)
- 08 自動化測試(第8-1頁)
- 09 CICD 持續性整合、部屬(第9-1頁)
- 第 3 篇 API 產品上線(第9-41頁)
- 10 API 服務網址(第10-1頁)
- 第 4 篇 資料視覺化(第10-19頁)
- 11 視覺化工具(第11-1頁)
- A 結論(第12-1頁)
紙本書 NT$ 700
單本電子書
NT$
490
點數租閱
20點
租期14天
今日租書可閱讀至2024-09-28
今日租書可閱讀至2024-09-28
同分類熱門書