電商治理二面拷麻了持續(xù)記錄！#面試問題記錄#

萬萬沒想到系列，本來最不抱希望的反而一周速通了。分享個(gè)Timeline，后續(xù)再補(bǔ)充面經(jīng)。4.14 一面4.16 二面4.17 三面4.21 hr面21 號(hào)當(dāng)晚oc24號(hào)帶薪offer郵件開得挺滿意的，接了，春招結(jié)束，不等騰訊和理想了(理想的池子都要泡發(fā)了)再見了團(tuán)子，感謝秋招收留，以后點(diǎn)外賣只用你

已掛，開個(gè)帖子攢點(diǎn)人品。bg：雙2，本科非科班，碩士計(jì)科，無實(shí)習(xí)。兩個(gè)非大模型項(xiàng)目，模型壓縮和模型微調(diào)相關(guān)。百度一面：1、自我介紹2、項(xiàng)目介紹3、解釋項(xiàng)目方法原理（項(xiàng)目用到了個(gè)小眾的方法）4、怎么保證模型在更高壓縮率下的性能5、項(xiàng)目方法能和GPU并行結(jié)合使用嗎6、項(xiàng)目有使用TB并行嗎7、如果在多卡上實(shí)現(xiàn)項(xiàng)目方法，需要如何考慮卡間通信8、如何降低KV cache9、講講DeepSeek中的MLA10、對(duì)模型的量化壓縮方法有哪些了解11、Linux常用命令有哪些，如何用Linux命令在兩服務(wù)器間傳數(shù)據(jù)12、手撕：查看一顆二叉樹的右視圖百度二面：1、自我介紹2、講講最開始的自注意力機(jī)制發(fā)展到當(dāng)今的一個(gè)優(yōu)化路線3、對(duì)Flash Attention的了解4、講講優(yōu)化訪存時(shí)會(huì)遇到的數(shù)據(jù)局部性問題5、手撕：二維矩陣乘積6、手撕：有向無環(huán)圖存儲(chǔ)神經(jīng)網(wǎng)絡(luò)，并根據(jù)網(wǎng)絡(luò)執(zhí)行的拓?fù)渑判蜻M(jìn)行遍歷#聊聊我眼中的AI# #我的失利項(xiàng)目復(fù)盤# #百度求職進(jìn)展匯總# #面試問題記錄# #我的實(shí)習(xí)日記# #?？虯I配圖神器#

4.21 投簡(jiǎn)歷4.23 約后天一面4.25 一面無手撕，上來先拷打論文，其中有個(gè)地方用了rag，面試官問我這里是怎么把文本轉(zhuǎn)換成向量?jī)?chǔ)存的。(我以為是問我工程上的實(shí)現(xiàn)，這是去年做的一個(gè)小模塊，回憶了半天細(xì)節(jié)，答得支支吾吾，面完了之后結(jié)合下一個(gè)問我才意識(shí)到其實(shí)是問我embedding過程)看我支支吾吾就直接問transformer是怎么把token處理成向量的。transformer的self-attention和cross self-attention區(qū)別在哪里。pre-norm和post-norm的區(qū)別？進(jìn)一步，為什么現(xiàn)在主流大模型都用post-norm。lora的實(shí)現(xiàn)過程。大模型用的Lo...