|
|
流式計算 實習研發(fā)工程師 JD
職位描述
團隊簡介
流式計算團隊負責公司內(nèi)部流式計算應用場景, 支撐了AML/推薦/數(shù)倉/搜索/廣告/流媒體/安全和風控等眾多核心業(yè)務。當前流式計算主要以 Flink 計算引擎為主,面臨的挑戰(zhàn)是超大單體作業(yè)(千萬級別 QPS),超大集群規(guī)模(上萬臺機器)的應用場景,在 SQL, State&Checkpoint, Runtime 都有深度優(yōu)化。
崗位職責:
1、構(gòu)建高效,實時,穩(wěn)定的流式計算引擎,支撐字節(jié)跳動公司內(nèi)數(shù)十個產(chǎn)品線的推薦和廣告業(yè)務。
2、構(gòu)建高性能,高易用的 SQL 引擎,支撐特殊場景 SQL 語法,優(yōu)化 Streaming SQL 任務性能。
3、構(gòu)建基于 SQL 的批流統(tǒng)一計算引擎,支撐部分核心業(yè)務實時/離線統(tǒng)一的應用場景。
4、構(gòu)建穩(wěn)定高效的全圖離線計算引擎,支撐上萬億邊的超大規(guī)模圖應用場景。
4、探索流式計算在新興硬件,實時數(shù)倉,機器學習,圖計算,準實時交互式查詢等技術(shù)解決方案。
職位要求
1、自認為是技術(shù)Geek,具備很強的問題解決能力;
2、熟悉Java/C++/Go等編程語言之一或多個;
3、熟悉計算機理論基礎(chǔ), 數(shù)據(jù)結(jié)構(gòu)及算法;
4、了解并行計算或者分布式計算原理;
5、了解高并發(fā)、高穩(wěn)定性、可線性擴展、海量數(shù)據(jù)的系統(tǒng)特點和技術(shù)方案;
6、對開源計算框架 Flink/Calcite/Storm/Kafka/Yarn/Hive/Spark/Kubernetes 有一項或多項了解和相關(guān)經(jīng)驗者優(yōu)先; 對機器學習,迭代計算,圖計算,OLAP 有了解者優(yōu)先。
7、長期實習者優(yōu)先。
8、北京杭州兩地都可以。
投遞方式
郵箱:xiaodai1988@163.com
|
|