国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

更新于 9月5日

推理加速高級算法工程師

1-2萬
  • 天津南開區(qū)
  • 10年以上
  • 本科
  • 全職
  • 招1人

職位描述

RustSYCLTensorFlowGPU利用率分析算子耗時(shí)可視化OpenCL大模型實(shí)戰(zhàn)經(jīng)驗(yàn)硬件適配經(jīng)驗(yàn)
職位描述:
1. 引領(lǐng)大模型推理性能優(yōu)化:負(fù)責(zé)全球領(lǐng)先的大規(guī)模語言模型(LLM)推理性能優(yōu)化,挑戰(zhàn)世界級技術(shù)難題,顯著降低推理時(shí)延,提升吞吐量,并大幅降低推理成本,推動(dòng)AI技術(shù)的邊界。
2. 深度參與前沿技術(shù)研發(fā):探索并實(shí)現(xiàn)推理優(yōu)化技術(shù),如FlashAttention、PageAttention、Continuous Batching、Speculative Decoding等,確保我們的推理引擎在全球范圍內(nèi)保持技術(shù)領(lǐng)先地位。
3. 跨硬件平臺的極致優(yōu)化:針對不同硬件架構(gòu)(如GPU、TPU等),設(shè)計(jì)并實(shí)現(xiàn)高效的推理加速方案,結(jié)合剪枝、量化、分布式推理等技術(shù),最大化硬件利用率,提升系統(tǒng)整體性能。
4. 推動(dòng)AI推理引擎的創(chuàng)新:深入理解并優(yōu)化主流推理引擎(如vLLM、sglang),結(jié)合CUDA/Cutlass等底層開發(fā)工具,打造高性能、低延遲的推理框架,為全球用戶提供極致的推理體驗(yàn)。
職位要求:
1. 深厚的模型架構(gòu)理解:熟悉Transformer、LLaMA、DeepSeek等主流大模型架構(gòu),能夠深入理解并優(yōu)化其推理過程。
2. 前沿推理技術(shù)掌握:精通LLM推理引擎(如vLLM、sglang),熟悉MLA、FlashAttention、PageAttention、Continuous Batching、Speculative Decoding等推理優(yōu)化技術(shù),具備實(shí)際應(yīng)用經(jīng)驗(yàn)。
3. 豐富的推理優(yōu)化經(jīng)驗(yàn):具備AI模型推理優(yōu)化的實(shí)戰(zhàn)經(jīng)驗(yàn),熟悉剪枝、量化、分布式推理等加速技術(shù),能夠根據(jù)不同場景和硬件平臺進(jìn)行針對性優(yōu)化。
4. 硬件與底層開發(fā)能力:熟悉GPU硬件架構(gòu),具備CUDA/Cutlass開發(fā)與優(yōu)化經(jīng)驗(yàn),能夠深入底層進(jìn)行性能調(diào)優(yōu)。
5. 全球視野與創(chuàng)新精神:具備強(qiáng)烈的技術(shù)好奇心與創(chuàng)新意識,愿意挑戰(zhàn)世界級難題,推動(dòng)AI推理技術(shù)的全球突破。

工作地點(diǎn)

天津市南開區(qū)研究院集群產(chǎn)業(yè)園

職位發(fā)布者

張女士/經(jīng)理

昨日活躍
立即溝通
公司Logo安徽提爾液冷科技有限公司
安徽提爾液冷科技有限公司成立于2024年1月,公司致力于為全球用戶提供先進(jìn)、低碳、綠色數(shù)字基礎(chǔ)設(shè)施及智算力運(yùn)營。公司主要業(yè)務(wù)為單相浸沒液冷數(shù)據(jù)中心設(shè)備銷售、數(shù)據(jù)中心建設(shè)與算力運(yùn)營。公司擁有的浸沒液冷全棧一體化解決方案可以通過儲能方式讓智算集群消納綠電并低成本回收余熱,實(shí)現(xiàn)數(shù)據(jù)中心的負(fù)碳運(yùn)行。
公司主頁