職責：
設計、開發(fā)和優(yōu)化 ETL（Extract，Transform，Load，即數(shù)據(jù)提取、轉(zhuǎn)換和加載）流程，以支持數(shù)據(jù)分析、數(shù)據(jù)可視化和商業(yè)智能。
與數(shù)據(jù)科學家、分析師及其他相關方協(xié)作，了解數(shù)據(jù)需求并提供解決方案。
實施和管理數(shù)據(jù)倉庫解決方案，確保數(shù)據(jù)的完整性和安全性。
開發(fā)和維護數(shù)據(jù)模型及數(shù)據(jù)庫架構。
監(jiān)控數(shù)據(jù)工程相關的性能和可靠性，并進行故障排除。
及時了解數(shù)據(jù)工程領域的最新行業(yè)趨勢和技術。
要求：
計算機科學、工程或相關領域的學士或碩士學位。
1年以上數(shù)據(jù)工程或相關崗位經(jīng)驗。
豐富的現(xiàn)代數(shù)據(jù)工程經(jīng)驗。
熟練掌握 Python 編程，具備使用 Pandas、NumPy 和 PySpark 等庫的經(jīng)驗。
深入理解數(shù)據(jù)結(jié)構、算法和軟件設計原則。
擁有 Hadoop、Spark 或 Kafka 等大數(shù)據(jù)技術的使用經(jīng)驗。
具備數(shù)據(jù)預處理、SQL 和 NoSQL 數(shù)據(jù)庫以及向量存儲（如 Postgres、Elasticsearch/OpenSearch、Solr 等）方面的經(jīng)驗。
熟悉 AWS、Azure 或谷歌云等云平臺。
具備出色的問題解決能力，注重細節(jié)。
具備較強的溝通和協(xié)作能力。
熟悉 Tableau 或 Power BI 等數(shù)據(jù)可視化工具。
熟悉包括 Scrum、看板和敏捷在內(nèi)的軟件開發(fā)方法。
擁有數(shù)據(jù)治理和數(shù)據(jù)質(zhì)量框架方面的經(jīng)驗。
了解人工智能（機器學習 / 深度學習 / 大語言模型）概念。
具備良好的英語寫作能力，英語口語能力佳者優(yōu)先。
有與數(shù)據(jù)科學家合作的經(jīng)驗者優(yōu)先。