#就地避難在家鍛鍊寫作能力
軟體工程師系統設計面試準備指南
當你有了幾年的工作經驗以後,在找工作時一定會遇到系統設計的面試,有鑒於大部分的面試心得都是針對演算法以及資料結構的程式面試 (包括我之前寫的美國軟體工程師求職心得),對於系統設計的準備資源還真的不多,本篇要來剖析系統設計面試,介紹面試的流程、正確的心態以及準備的方向,讓大家再也不怕系統設計面試!
Medium 好讀版:https://medium.com/jktech/%E8%BB%9F%E9%AB%94%E5%B7%A5%E7%A8%8B%E5%B8%AB%E7%B3%BB%E7%B5%B1%E8%A8%AD%E8%A8%88%E6%BA%96%E5%82%99%E6%8C%87%E5%8D%97-acf6ab1f502f?source=friends_link&sk=ca40acf60b749cb1b32c17a868b0c1a3
#為什麼系統設計很重要?
在程式面試表現優異,可以讓你順利拿到 Offer;但是系統設計會決定你加入公司的職等!這也就是為什麼有些人有十年經驗只能拿到 Mid-Level (L4) 的 Offer,而有些人只有五年經驗卻可以拿到資深工程師以上 (L5+) 的 Offer。
另外,如果你是面試 Staff 或是 Principal 級別以上的話,除了系統設計以外,有些公司還會有 Technical Leadership 的面試,來判斷你是否有能力可以跟不同的部門合作、解決問題的不確定性、帶領資淺的人然後推動並且完成一個跨部門的大型技術專案。
簡單來說,系統設計用來判斷你是 L4 或是 L5+,Technical Leadership 面試用來判斷是 L5 或是 L6+。
#為什麼系統設計很難準備?
大多數應徵者在準備的時候會過度偏重於程式面試,原因也不難理解,程式問題的定義很清楚,有給定的輸入以及預期的輸出,就算你真的想不出來,LeetCode 上的討論區也有參考答案;這種有考古題可以參考的面試,對於台灣教育出來的人來說相對好準備,隨著你解的問題多了,你也會更有信心,不知不覺甚至還會刷上癮了呢!但系統設計卻非如此。
系統設計面試的問題描述通常很模糊 (這是刻意的),沒有給定的輸入與輸出,比較沒有既定規則可以遵循,然後也沒有一個標準答案,針對不同系統你需要提出不同的解法然後分析優缺點,一樣的問題,面試官也會針對你過去經驗往不同的方向問,有些問題你工作上沒有碰過還真的回答不出來,這也就是為什麼很多人看到系統面試就怕了。
#到底要怎麼準備?
首先我們要先建立一個觀念:沒有任何一個人可以知道所有的技術細節
不管你的面試官有多少年經驗,不管他們再怎麼資深,在變化快速的軟體產業,沒有人可以知道所有事情,一定有你知道而他們沒聽過的事情!
請把系統設計當成分享你過去所學的面試,這個面試的目的在於展示你對於軟體架構能力的廣度跟深度,你必須可以給出大方向的架構,知道有哪些元件 (廣度),同時針對你熟悉的領域深入探討更多細節 (深度),並且提出幾個解決方案,分析優缺點,並且針對系統需求選擇合適的解法。
大方承認自己對某些領域的細節不熟,也是完全沒問題的,只要讓面試官了解你知道這個東西,如果要深入了解的話你知道有哪些方向要努力,這樣就夠了,因為在大型的軟體專案裡,一定是高度分工的,不會有人同時精通手機端、前端、後端、Infra 以及嵌入式或是硬體的。
講到這裡,相信你也知道如果真的要準備是準備不完的,這些知識是透過平常工作以及閱讀技術文章長期累積的成果,比較沒辦法臨時抱佛腳。
#具體來說會問什麼問題
舉例來說,一個系統設計的問題會像是這樣:如何設計 Facebook?
這類問題的描述通常會很大而且模糊,面試官不預期而且你也不可能在 45 分鐘內就設計出這些公司花了好幾年這麼多人力設計出來的產品,所以第一步要做的事情是確認需求:是要設計動態牆、Messenger、廣告系統還是推薦系統?流量跟資料量為多少?需要支援全球的使用者嗎?
確認完需求以後,會針對最重要的幾個使用場景設計你的 Data model 以及 API,接著畫出大的系統架構圖,大致上會包含客戶端 (手機版/桌面版)、Load Balancer (Reverse Proxy)、App Servers 以及資料庫,接著可以針對細節下去討論,這邊開始就很自由了。
如果你是專精在資料庫,可以討論要用什麼資料庫以及資料要怎麼存可以讓特定使用場景的讀取以及寫入效能比較好,要怎麼做資料庫的 Replication 跟 Sharding 來服務更多的使用者?
如果講到快取,哪些地方可以加快取呢 (瀏覽器前端, CDN, App Server, 資料庫)?具體來說寫入快取有哪些方式以及優缺點 (write-through, write-around, write-back)?什麼時候要失效?要讓哪些資料失效?
如果聊到微服務器架構跟 Service Mesh,不同的服務怎麼跟其他的服務溝通? control plane 要怎麼更新 data plane 的設定?如果 control plane 掛了怎麼辦?要怎麼做 service discovery? 哪一種 Load Balancing 策略比較好 (round robin, random, least connection, ring hash, or maglev)?有些服務掛了影響到整個系統怎麼辦?什麼時候需要 circuit breaker ?
如果你是手機開發者,怎麼實現離線瀏覽?手機要有資料庫嗎?要怎麼以及多常跟伺服器同步?API 要怎麼設計?如何實現 Infinite Loading?剛 Po 文以後要怎麼樣在自己手機上馬上看到?
這些問題真的列舉不完,總之看到這裡你會了解為什麼我說這個面試是沒有範圍而且也準備不完的,重點應該放在跟面試官的討論,展現你在技術方面的廣度跟深度,讓面試結束的時候能夠有一個你們兩個人都同意的設計!
#準備材料
系統設計的資源比較分散,以下是我篩選過後覺得有用的資料,按照素材的類型作分類,也歡迎大家留言補充!
#入門影片
針對完全沒有概念的新手,我建議可以先從哈佛的 CS75 Lecture 9 Scalability 開始,裡面講到的很多基礎觀念都相當重要,值得一再複習,這些概念先有了以後再閱讀其他的材料會比較有感覺:
如果你看完這篇文章後還想再多了解系統面試的形式,也可以看一個前 Facebook 工程師分享的影片:
Distributed Systems in One Lesson 也很推,裡面提到不少業界在使用的設計模式:
有一個需要付費的資源是 SystemsExpert,每個影片會講解一個系統設計重要的概念,我個人覺得內容有點淺所以沒有買,但是整理地還算不錯,如果你看完他們免費的影片有興趣還是可以參考一下。
#閱讀文章
影片是一個讓你很好理解大方向概念的方式,但是如果你要深入理解背後的原理還有怎麼運作的細節,還是得透過大量以及深度的閱讀來吸收呀!
system design primer 整理了很多系統設計的資源,資料量很夠, 個人的建議是先快速過一遍,不要細讀,先知道總共有哪些元件,大概是做什麼用的就好,接著針對有興趣的部分在深入研究,建立自己的知識庫。
Grokking the System Design Interview 也是很多人推薦的材料,主要是針對系統設計的問題提供範例解答,他們的答案可以當作一個參考,但面試的時候不要完全照著回答,還是得看跟面試官討論的結果來進行,但這個是需要付費的,有興趣可以用我的推薦碼註冊購買。
如果你不想花錢或是不確定 Grokking 的文章你喜不喜歡,有一個類似的網站 Crack the System Design Interview 整理得也還不錯。
#書籍
唸書是一個有系統性學習的方法,如果你只想選一本書來看,就選這本大家都推的系統設計聖經 — Designing Data-Intensive Applications,簡稱 DDIA,這本書適合的對象是想要長期準備系統設計或是分散式系統的人,裡面舉的例子都是實際上業界遇到的問題,不會有以前讀教科書那種工作又用不到的感覺;但也因為是書,花了一些篇幅在講解背景知識,包含以前的系統是怎麼設計的以及如何演進到現在,對短期要準備面試的人效率會有點低,所以不適合有時間壓力的人。
這本書我目前讀了一半,最大的收獲是它解釋了很多為什麼現代的系統要做這樣的設計,我們針對不同的系統要求可以有哪些解法,這些解法各有什麼優缺點,總之分散式系統就是我們解決了一個問題,但又會產生更多要考量的點,一切都是 trade-off。
但這本書也不是沒有缺點的,首先我覺得是本書的英文沒有很好讀,我常常一段看了好幾遍才知道他想表達的重點是什麼,而且,有些很重要的觀念常常藏在一段文字裡用一句話帶過,但是不太重要的觀念卻使用 Bullet Point 表達;另外這本書話常常講一半,一些觀念提到了一點卻說我們後面再聊,也因為這樣,我在考慮要不要幫大家整理每一個章節的重點,翻成中文分享給大家,有興趣的朋友麻煩拍手留言告訴我!
除此之外,Google 的 SRE Books 內容也很實在,但是每一個章節的內容是獨立的,建議大家選擇想研究的章節跳著看就好。
最後,Distributed systems for fun and profit 的內容也很好,以分散式系統的理論為主,比較沒那麼針對系統設計面試。
#還想閱讀更多嗎?
我知道光是上面的資源就已經讀不完了,但是行有餘力的話,平時也可以多看看各大公司的技術部落格或是訂閱技術週刊如 TechBridge (台灣) 、HackerNews 以及 InfoQ 等等。
此外,參考別人的經驗也是很好的方式,最近剛好幾個朋友剛找完工作,他們分享的矽谷找資深工程師工作心得分享以及2020 上半年軟工找工經驗分享也都很值得看!
最後,在工作上使用到的技術,除了會用以外,最好也要花時間去研讀技術文件,了解他們設計的考量以及支援的場景,大部分這類型針對開發者的文件寫得會比較深入,所以也是相當好的學習素材;我自己過去一年因為工作上需要整合 Envoy 到我們公司的 Traffic Infrastructure,從他們的文件中學到很多 Service Mesh 跟微服務器的重要概念,學習的深度都是其他資源無法提供的。
#總結
這篇文章我們整理了很豐富的系統設計資源,希望大家不要被這滿滿的資訊量嚇跑。
請記得,我們永遠有各種方法在短期內針對面試做準備,提升面試的表現,但這都只是一時的,沒辦法讓你一夕之間就成為專家;如果想要追求長期的持續成長,那麼沒有捷徑 — 就是養成每天學習以及閱讀的習慣,一開始真的很難看到效果,但是當你持續一週、一個月甚至是一年以後,你會明顯感受到自己的成長,這些投入的時間都是騙不了人的。
如果這篇文章對你有幫助,請拍手留言加訂閱,並且分享給更多有需要的人知道!
同時也有10000部Youtube影片,追蹤數超過62萬的網紅Bryan Wee,也在其Youtube影片中提到,...
app系統架構圖 在 Y道理 Facebook 八卦
/ Computex -3。你的價值主張是什麼?/ (16-557)
.
我2008入行,2009開始看Computex (...明年你可能會再聽我覆誦一次..),你問我心得如何?我會這麼說吧:「我覺得今年整體來講比去年好多了。」
那如果再撇去我是IT產業一員、當過法人研究員的身份,純以看展者的角度 (看門道,不是看熱鬧的小專家),我的心得又是什麼。
.
「就 ... 蠻無聊。大概有 90%都很無聊!」
.
待我說明。
.
台廠很少做出明確、有自我意識的價值主張。如果你問一個台廠什麼是對的?通常會回到「市場」或「客戶」這兩個指標。這一點都沒有錯。只是說,當你這麼做時,你永遠在追隨落後指標。
.
因為市場一定是被「願意失敗的領先者」,一個接著一個,前仆後繼帶出來。那些領先者不是因為別人覺得是對的,所以做;也不會覺得自己不會被市場肯定,所以不做。
.
因為他們想試試看。他們心裡有個地方需要被填補,而勇氣跟企圖推動他們前進。
.
請台廠去「落實」自己的信仰好嗎(..當然你要先擁有可明確勾勒的價值觀)?雖然這不太實際。而且失敗率很高。我說的信仰不是「議題」式的,而是發自內心相信的事。
.
你可能會說:今年不是出現很多有趣的產品?對啊。而且剛剛這些有趣的事「剛好謂為風潮... Gaming, VR, Robot, IoT...」那你再細細的檢視這些產品,幾乎毫無想法。很明顯的是在跟議題跟市場風所造就的現象,缺乏靈魂。我無法跟你說這是「對」或「錯」,因為這是一個被肯定的商業事實。
.
只是,我好期待台廠能夠用「獨特性」來獲得市場定位。
.
這樣講當然還是很模糊。請原諒我,這就只能請你細細體會。自然你會認同或不認同...由於缺乏明確的論述事實,我也很難進一步明確的討論。但避免陷入針對性的討論,我盡可能的舉個例子,但不談明確的廠商。
.
舉例來說:今年出現了「很多」智慧家庭的硬體解決方案。我在現場真是 ... 邊看邊苦笑。兩年前大家在喊的智慧家庭 solution... ,今年一堆廠商做出來。從 Gateway、燈、感應器、鎖、溫度、消防、煙霧 ... 好個 total solution
.
那,所以哩?用手機聯 Gateway,控制整個家庭的電器了!?耶!公司有智慧家庭 Solution 惹~ 可是為什麼今年大家都展了很類似的 Solution ?研究單位不是說這個是趨勢嗎?可是我做出來了,大家也都做出來了 ... 那我要怎麼勝過別人?
.
疑?為什麼Google Home / Amazon Echo用語音控制?啊?不是用手機 app 聯 gateway 就可以了嗎?那假設他們才是對的,那我們公司怎麼勝過 google / Amazon?
.
我怎麼知道你要怎麼勝過別人 (苦笑)。你攤開來的系統架構圖,我看連比效能的機會都沒有,只能比價格啊。你當初就覺得用手機控制家是最好的方案嗎?那為什麼 Google / Amazon 看來別有想法呢?那你的想法是什麼呢?
.
你說:是不是剛好台廠們對願景的「信仰」都一樣,才會變成這個樣子?大家一片跟風。我認為,問題並不在於「有一樣的信仰」,而在於大家都不知道要做什麼,只好打聽最近客戶想要什麼?報告上寫些什麼趨勢?供應商給些什麼晶片?競爭對手在推出什麼產品。
.
「啊?魚君你在說什麼?科技產業本來就是這樣啊。」
.
有一樣的結果,不代表過程都是一樣的。就好像一樣能讓人吃飽,有的飯只是堪能入口、有的卻是廚師用心之作 - 不斷的去瞭解市場、技術,不斷的去測試跟實驗。
.
台灣已經很擅長吃粗飽。我們其實有很棒的文化跟價值觀,其實可以想辦法把辦桌弄得更有大菜的水準水平,而不是只是一直把客人塞飽就好。
.
講的有點隱諱。不過這就是我對 Computex 2016的心得,以及來年的期待。
app系統架構圖 在 Bryan Wee Youtube 的評價
app系統架構圖 在 Travel Thirsty Youtube 的評價
app系統架構圖 在 スキマスイッチ - 「全力少年」Music Video : SUKIMASWITCH / ZENRYOKU SHOUNEN Music Video Youtube 的評價
app系統架構圖 在 APP系統架構方面的設計 - 程式人生 的相關結果
APP 的大概介面構思和設計,大功能模組程式碼編寫。正式進入產品的原型設計階段。UI、UE開始設計,形成初步的效果圖。在經過確認後介面的效果圖正式設計 ... ... <看更多>
app系統架構圖 在 應用程式架構指南 的相關結果
接著,Android作業系統會根據這個檔案決定如何將您的應用程式整合至裝置的整體使用者體驗。假設一般的Android應用程式 ... 圖1典型應用程式架構圖。 ... <看更多>
app系統架構圖 在 網站或APP架構圖是什麼? - 山川久也 的相關結果
網站或APP架構圖是什麼? 一般來說,我們會將網站每個按鈕點擊之後出現的頁面視為一頁。 用這樣的概念去將網站頁面的結構產生出來。 架構圖參考範例如下(文字列表方式) ... ... <看更多>