Open in app

Sign In

Write

Sign In

vgod's blog
vgod's blog

3.2K Followers

Home

Lists

About

Feb 26

機器學習工程和MLOps的典範轉移

我在五年前開始幫我們公司搭建一個機器學習平台,幫助ML工程師快速開發和部署模型。這整套流程「搜集資料 -> 特徵工程 -> 訓練模型 -> 最佳化參數 -> 部署模型」和相關的基礎建設被稱為MLOps,基本上矽谷每個有用到ML的中大型公司都有團隊在開發和維護這類的系統和工具。 雖然我自己平日工作不開發ML模型,但為了開發好用的工具和平台給ML工程師用,我一直很關注他們的需求和日常開發流程。從去年(2022)開始,我發現整個ML開發流程默默地開始進行「典範轉移」。傳統的開發流程逐漸變得不再適用於新的AI時代。 這個改變來自於科技巨頭們和Hugging Face (ML界的Github)上公開的「預訓練模型 」(pre-trained models)。這些模型是用大量公開資料訓練出來的模型,可以很好地處理各種基礎任務,像是語音辨識、翻譯、自然語言、視覺辨識等。像GPT-3這樣的大型語言模型 (LLM),一個就可以做到以往需要十幾個專用模型才能做的事。有了這些已經訓練好的模型,要開發ML應用,ML工程師可以直接跳過MLOps前面所有步驟,直接進入最後一步的「部署模型」。如果用外部API,甚至連部署和ML工程師都省了,找個後端工程師接上API就可以運作了。

AI

5 min read

機器學習工程和MLOps的典範轉移
機器學習工程和MLOps的典範轉移
AI

5 min read


May 2, 2022

軟體工程師的修煉與成長 (10) — 四維的技術能力

成為工程師真的有這麼容易嗎?一個大學CS學位和bootcamp產生出來的工程師技術能力到底會差在哪裡?

軟體工程師的修煉與成長

10 min read

軟體工程師的修煉與成長 (10) — 四維的技術能力
軟體工程師的修煉與成長 (10) — 四維的技術能力
軟體工程師的修煉與成長

10 min read


Apr 18, 2022

軟體工程師的修煉與成長 (9) — 選擇適合自己的公司

千奇百怪的矽谷公司們

軟體工程師的修煉與成長

10 min read

軟體工程師的修煉與成長 (9) — 選擇最適合自己的公司
軟體工程師的修煉與成長 (9) — 選擇最適合自己的公司
軟體工程師的修煉與成長

10 min read


Apr 4, 2022

軟體工程師的修煉與成長 (8) — 讓自己可以被取代

讓自己可以被取代

軟體工程師的修煉與成長

6 min read

軟體工程師的修煉與成長 (8) — 讓自己可以被取代
軟體工程師的修煉與成長 (8) — 讓自己可以被取代
軟體工程師的修煉與成長

6 min read


Mar 21, 2022

軟體工程師的修煉與成長 (7) — 如何突破資深工程師的天花板

Manager or Leader?

軟體工程師的修煉與成長

13 min read

軟體工程師的修煉與成長 (7) — 如何突破資深工程師的天花板
軟體工程師的修煉與成長 (7) — 如何突破資深工程師的天花板
軟體工程師的修煉與成長

13 min read


Mar 14, 2022

軟體工程師的修煉與成長 (6) — 換團隊 x 2

換團隊與成為Tech Lead

軟體工程師的修煉與成長

8 min read

軟體工程師的修煉與成長 (6) — 換團隊 x 2
軟體工程師的修煉與成長 (6) — 換團隊 x 2
軟體工程師的修煉與成長

8 min read


Mar 6, 2022

軟體工程師的修煉與成長 (5) — 1:1該談什麼才能讓職涯起飛?

與manager直球對決

Careers

8 min read

軟體工程師的修煉與成長 (5) — 1:1該談什麼才能讓職涯起飛?
軟體工程師的修煉與成長 (5) — 1:1該談什麼才能讓職涯起飛?
Careers

8 min read


Feb 27, 2022

軟體工程師的修煉與成長 (4) — Product vs Infrastructure

Product vs Infrastructure

軟體工程師的修煉與成長

6 min read

軟體工程師的修煉與成長 (4) — Product vs Infrastructure
軟體工程師的修煉與成長 (4) — Product vs Infrastructure
軟體工程師的修煉與成長

6 min read


Feb 20, 2022

軟體工程師的修煉與成長 (3) — Oncall的挑戰

Oncall的挑戰

軟體工程師的修煉與成長

6 min read

軟體工程師的修煉與成長 (3) — Oncall的挑戰
軟體工程師的修煉與成長 (3) — Oncall的挑戰
軟體工程師的修煉與成長

6 min read


Feb 15, 2022

追求神乎其技的程式設計之道 — 2022重編版

追求神乎其技的程式設計之道 — 2022重編版 在2022回顧「 追求神乎其技的程式設計之道」 「追求神乎其技的程式設計之道」是我從2008年開始在我的個人blog上連載的一系列文章。當初只是因為想回答一位讀者問到關於如何學習寫程式的方法和經驗才開始撰寫的,沒想到後來就一連寫了三年,共有十二篇文章。 現在已經2022了,我決定開始一個新系列的文章「軟體工程師的修煉與成長」,所以就順便把舊文章從雜草叢生的舊blog整理一下搬來Medium,讓想要 …

Programming

66 min read

追求神乎其技的程式設計之道 — 2022重編版
追求神乎其技的程式設計之道 — 2022重編版
Programming

66 min read

vgod's blog

vgod's blog

3.2K Followers

Software Engineer, San Francisco

Following
  • Liang-Bin Hsueh aka hlb

    Liang-Bin Hsueh aka hlb

  • Cheng-Wei Hu | 胡程維

    Cheng-Wei Hu | 胡程維

  • Louis

    Louis

  • Felix Chern

    Felix Chern

  • Denny

    Denny

See all (56)

Help

Status

Writers

Blog

Careers

Privacy

Terms

About

Text to speech