|
|
流式計(jì)算 實(shí)習(xí)研發(fā)工程師 JD
職位描述
團(tuán)隊(duì)簡(jiǎn)介
流式計(jì)算團(tuán)隊(duì)負(fù)責(zé)公司內(nèi)部流式計(jì)算應(yīng)用場(chǎng)景, 支撐了AML/推薦/數(shù)倉(cāng)/搜索/廣告/流媒體/安全和風(fēng)控等眾多核心業(yè)務(wù)。當(dāng)前流式計(jì)算主要以 Flink 計(jì)算引擎為主,面臨的挑戰(zhàn)是超大單體作業(yè)(千萬(wàn)級(jí)別 QPS),超大集群規(guī)模(上萬(wàn)臺(tái)機(jī)器)的應(yīng)用場(chǎng)景,在 SQL, State&Checkpoint, Runtime 都有深度優(yōu)化。
崗位職責(zé):
1、構(gòu)建高效,實(shí)時(shí),穩(wěn)定的流式計(jì)算引擎,支撐字節(jié)跳動(dòng)公司內(nèi)數(shù)十個(gè)產(chǎn)品線的推薦和廣告業(yè)務(wù)。
2、構(gòu)建高性能,高易用的 SQL 引擎,支撐特殊場(chǎng)景 SQL 語(yǔ)法,優(yōu)化 Streaming SQL 任務(wù)性能。
3、構(gòu)建基于 SQL 的批流統(tǒng)一計(jì)算引擎,支撐部分核心業(yè)務(wù)實(shí)時(shí)/離線統(tǒng)一的應(yīng)用場(chǎng)景。
4、構(gòu)建穩(wěn)定高效的全圖離線計(jì)算引擎,支撐上萬(wàn)億邊的超大規(guī)模圖應(yīng)用場(chǎng)景。
4、探索流式計(jì)算在新興硬件,實(shí)時(shí)數(shù)倉(cāng),機(jī)器學(xué)習(xí),圖計(jì)算,準(zhǔn)實(shí)時(shí)交互式查詢等技術(shù)解決方案。
職位要求
1、自認(rèn)為是技術(shù)Geek,具備很強(qiáng)的問(wèn)題解決能力;
2、熟悉Java/C++/Go等編程語(yǔ)言之一或多個(gè);
3、熟悉計(jì)算機(jī)理論基礎(chǔ), 數(shù)據(jù)結(jié)構(gòu)及算法;
4、了解并行計(jì)算或者分布式計(jì)算原理;
5、了解高并發(fā)、高穩(wěn)定性、可線性擴(kuò)展、海量數(shù)據(jù)的系統(tǒng)特點(diǎn)和技術(shù)方案;
6、對(duì)開(kāi)源計(jì)算框架 Flink/Calcite/Storm/Kafka/Yarn/Hive/Spark/Kubernetes 有一項(xiàng)或多項(xiàng)了解和相關(guān)經(jīng)驗(yàn)者優(yōu)先; 對(duì)機(jī)器學(xué)習(xí),迭代計(jì)算,圖計(jì)算,OLAP 有了解者優(yōu)先。
7、長(zhǎng)期實(shí)習(xí)者優(yōu)先。
8、北京杭州兩地都可以。
投遞方式
郵箱:xiaodai1988@163.com
|
|