0%

隨著工作上資料量、流程複雜度持續的增加,使用 Crontab 管理自動更新排程,已無法順利進行資料更新。
容易遇到前一個工作尚未進行完,下一個工作又要開始執行,且下一個工作需要使用上一個工作所產生的資料;
若繼續使用 Crontab 則會遇到資料量持續增加,而打亂自動更新排程,要常常調整排程時間設定來緩解這個情形,
因此,這次透過導入 Airflow 來解決此問題。

Airflow 介紹

Airflow 是一個工作流程管理系統(Workflow Management System),將有相關的工作整合為一個有向無循環圖 DAG (Directed Acyclic Graph),並提供多種 Operator,例如 Bash Operator、Python Operator 等,甚至可直接對 GCP、S3、Slack 等進行操作;DAG 是一個 Python 程式,可達到 Infrastructure as code,減少維運上的複雜度。

圖片來源:3LexW
閱讀全文 »

推薦系統就像是一種 “訊息過濾系統”,會依照特定的規則進行過濾,並預測用戶對商品的評分或偏好
透過推薦系統能夠降低消費者的選擇時間,提高衝動購買的機率,幫助用戶找到最適合自己、最感興趣的商品。

推薦系統的演算法發展至今,Python、R 等許多程式都有提供相關套件進行推薦系統的演算法運算,
因此就目前而言,不是著重於如何實現這些演算法運算,而是透過哪個演算法才能夠解決當下的問題。

閱讀全文 »

近年來投資市場越來越熱絡,
或許是因為多數人的理財觀念有所提升,知道把錢存在銀行會因為通貨膨脹而越變越薄;
又或是從過去的經驗來看把錢投入股市,長期而言,
股市將會不斷的上漲,即便跌得再深都有漲回來的一天。
(會不會每次都漲回來我自己持保留態度,後續有機會再探討這個議題)

本系列希望講述一些投資相關基本知識以及我個人認為投資中最重要的事,
第一篇就先以交易模式作為主要介紹內容。

學投資的第一步應該要做什麼?

看到這個標題很多人會直覺回答:當然是學怎麼賺錢囉~

閱讀全文 »

上一篇介紹有關如何透過Hexo與Github架設Blog網站
這一篇來介紹NexT主題設定、實際使用Hexo及Hexo其他常用套件

Theme:NexT

主題的部分,Hexo官網上有許多主題可供大家下載,
建議可以找近期還有在維護的主題,
本篇以許多人選擇的NexT主題為例。
(因為我喜歡乾淨整潔的畫面私心推薦XD)

閱讀全文 »

趁著剛架好網站,印象深刻的時候把這篇寫一寫 XD

當我想要架設這個Blog的時候,
比較過許多Blog網站,
例如:痞客邦、Blogger、WordPress、Medium等攥寫Blog的網站,
其中WordPress太過商業化,
想要有炫炮好看的頁面、功能外掛都需要付費…;
原本想要使用Medium(介面乾淨、整齊是主因),
但因不支援Markdown、沒有掌握權等原因作罷。

為什麼最後選擇透過Hexo與Github架設Blog網站,

閱讀全文 »

終於架好這個網站了!!
架完之後第一件事情就是想著第一篇文章要寫什麼 XD

本來想直接寫架這個網站的過程,
但感覺好像會太枯燥 XD

只好先來聊聊為什麼會開始寫Blog ~

閱讀全文 »