PDF JPG
本書有DRM加密保護,需使用HyRead閱讀軟體開啟
  • Python 大數據專案 X 工程 X 產品 資料工程師的升級攻略
  • 點閱:277
    268人已收藏
  • 作者: 林子軒著
  • 出版社:深智數位
  • 出版年:2023
  • ISBN:9786267273739
  • EISBN:9786267273869 PDF
  • 格式:PDF,JPG
  • 頁數:596
  • 附註:電子書附件請至封面連結下載
租期14天 今日租書可閱讀至2025-02-25

  ★☆★☆★ 獨家解析知名大數據專案,FinMind,帶你一窺大數據產品的發展過程,打造專屬個人的大數據 Side Project、作品、產品 ★☆★☆★

  本書承襲第一版的精彩內容,分享在 Github 獲得 1,900 stars 的大數據 Side Project,並幫助讀者從 0 開始,打造專屬個人的大數據 Side Project。

  精彩收錄:

  【資料工程】
  ○ 使用分散式技術,RabbitMQ、Flower、Celery,收集證交所、櫃買中心、期交所等股市資訊。
  ○ 使用 Docker、FastAPI 架設 RESTful API 服務。
  ○ 使用 Docker Swarm 架設分散式服務,包含爬蟲、RESTful API、資料庫 MySQL、RabbitMQ 等服務。
  ○ 使用雲端服務,一個月 5 美金,且免費提供 100 美金額度。
  ○ 一站式管理多台分散式機器。
  ○ 使用業界等級的,分散式 Airflow。

  【產品迭代】
  ○ 單元測試 Unit Test 介紹,包含爬蟲、API 測試範例。
  ○ 使用 CICD 做持續性整合、部屬,並以 Gitlab-CI 搭配 API 服務做為範例。

  【API 產品上線】
  ○ 免費網址申請教學,No-IP。
  ○ 免費 SSL 憑證教學,Let's Encrypt。
  ○ 一站式管理多服務網址,容器化反向代理工具 Traefik。

  【業界資料視覺化工具】
  ○ 使用 Redash 建立個人化、股市分析儀錶板。

  【監控系統】
  ○ 使用最知名的監控工具,Prometheus、Grafana,同時監控所有服務。

  讀完本書,你將學會分散式爬蟲、RESTful API、MySQL 資料庫、壓力測試、Docker Swarm、CICD、雲端、Traefik、Redash 視覺化、分散式 Airflow、監控系統 Prometheus、Grafana 等,本書是一本集大成的作品。

  ※本書程式實例可至深智官網下載deepwisdom.com.tw

作者簡介

林子軒

  Sam,目前任職 17 LIVE 資料工程師。擅長資料工程、資料分析,希望對Python 社群、大數據領域,提供一份心力。


  【經歷】
  ●17 LIVE 資深資料工程師。
  ●曾任職永豐金證券,軟體工程師。
  ●曾於 Open UP Summit 2019,擔任 Speaker。
  ●曾任職 Tripresso,資料工程師。
  ●東華研究所,應用數學碩士。

  【FinMind】
  ●github.com/FinMind/FinMind
  ●finmindtrade.com/

  【個人 GitHub】
  ●github.com/linsamtw

  【Email】
  ● samlin266118@gmail.com

  如對本書有疑問,歡迎寄信到以上信箱。筆者除了本書內容外,GitHub 上也有寫文章介紹,兩篇 Kaggle 競賽經驗,分別是生產線分析、庫存需求預設,如對以上有興趣,也可寄信到以上信箱。
  • 第 1 篇 資料工程 ETL(第xi頁)
    • 01 本書介紹(第1-1頁)
    • 02 開發環境(第2-1頁)
    • 03 Docker(第3-1頁)
    • 04 雲端(第4-1頁)
    • 05 資料收集(第5-1頁)
    • 06 資料提供 — RESTful API 設計(第6-1頁)
    • 07 容器管理工具 Docker(第7-1頁)
  • 第 2 篇 產品迭代 -- 測試運維(第7-65頁)
    • 08 自動化測試(第8-1頁)
    • 09 CICD 持續性整合、部屬(第9-1頁)
  • 第 3 篇 API 產品上線(第10-1頁)
    • 10 API 服務網址(第10-1頁)
  • 第 4 篇 資料視覺化(第10-19頁)
    • 11 視覺化工具(第11-1頁)
  • 第 5 篇 排程管理工具(第11-49頁)
    • 12 排程管理工具 - Apache Airflow(第12-1頁)
    • 13 Redis 介紹(第13-1頁)
  • 第 6 篇 監控系統(第13-7頁)
    • 14 監控工具介紹(第14-1頁)
    • 15 結論(第15-1頁)
紙本書 NT$ 780
單本電子書
NT$ 546

點數租閱 20點
租期14天
今日租書可閱讀至2025-02-25
還沒安裝 HyRead 3 嗎?馬上免費安裝~
QR Code