多里安·馬丁，GetGoodgrade

你想涉足數據工程嗎？

好主意.

很多公司都在尋找數據工程師--如果你在LinkedIn上搜索“數據工程師”，僅在美國就會得到88，000多個好的職位。每個人都可以使用遠程工作選項，您可以在任何公司找到工作。但是，首先，你需要有必要的技能來成為一個好的應聘者，并被邀請參加面試。

在這篇文章中：

• 成為數據工程師的九項必備技能
• 獲得九大技能的技巧+職業建議。

1.SQL

數據工程師四處移動大量數據，因此他們每天都要使用數據庫。用于數據庫的數據庫技術有兩種主要類型：SQL和NoSQL（下一節將詳細介紹NoSQL）。

強大的SQL技能允許使用數據庫構建數據倉庫，將它們與其他工具集成，并為業務目的分析數據。有幾種SQL類型可能是數據工程師在某個時候專門關注的（高級建模、大數據等），但要達到這些類型需要學習這種技術的基礎知識。

這就是為什么所有的公司，從蘋果這樣的巨頭到小企業，都需要他們的數據工程師是使用SQL的專家。

2.NoSQL

這是一種變得越來越流行的分布式數據存儲的不同類型。簡單地解釋，“NoSQL”這個名稱意味著基于不同于SQL的技術。

NoSQL的例子包括Apache River、BaseX、Ignite、Hazelcast、Coherence等。在你的數據工程師求職過程中，你肯定會遇到它們，所以知道如何使用它們將是一個巨大的優勢。

3.Python

Python是需求仍然很高的核心編程語言（事實上，它是程序員第三喜歡的語言）。數據工程師應該精通Python以便能夠編寫可維護、可重用和復雜的函數。這種語言高效、通用，非常適合文本分析，并為大數據支持提供了合法的基礎。

學習Python很容易，這要歸功于各種技能級別的可用資源。對于初學者，請隨意查看以下內容：

• 7成為數據工程師的資源。一系列有用的在線課程，包括對初學者友好的Python介紹
• 面向初學者的10個Python技巧。從事數據科學和工程的程序員的基本Python技能列表
• 探索Python基礎知識。[內容由Python軟件基金會現任主席Naomi Ceder親自挑選]。這是一本免費的電子書，它描述了Python編程的基礎知識、特性和語法，以及使用Python進行數據建模和生成準確的預測。

4.亞馬遜網絡服務(AWS)

AWS是一個流行的云平臺，大多數程序員使用它來變得更加敏捷、創新和可伸縮性。數據工程團隊在AWS上回復設計自動化數據流，因此您需要了解使用該工具設計和部署基于云的數據基礎設施。

如果你對學習AWS感興趣，你可能想試試在線課程或亞馬遜自己的教程（就像這篇關于AWS和大數據的教程）。然后，你可以嘗試一下你的知識，從亞馬遜獲得官方證書--這是脫穎而出成為專業人士的好方法。

5.卡夫卡

Kafka是一個用于處理實時數據提要的開源處理軟件平臺。這意味著你可以用它來構建實時流媒體應用程序，這是企業所需要的?？ǚ蚩寗拥膽贸绦蚩梢詭椭l現和應用趨勢，并幾乎實時地對客戶需求做出反應。

這就是為什么60%的財富100強公司在他們的應用程序中使用卡夫卡。其中包括LinkedIn、Microsoft、Netflix、愛彼迎和Target。例如，《紐約時報》使用卡夫卡來存儲和分發已發布的內容到應用程序中，以使讀者能夠獲得這些內容。

6.Hadoop

Apache Hadoop是數據工程師用來存儲和分析大量信息的開源框架。Hadoop不是一個單一的平臺，而是許多支持數據集成的工具。這就是為什么它對大數據分析很有用。

如果您成為一名數據工程師，那么您將有機會使用Kafka和Hadoop進行實時數據處理、監控和報告。

7.文字清晰簡潔

寫作是這份清單上的第一項軟技能。這是許多有抱負的數據工程師往往忽視的東西，結果剝奪了他們自己更好的職業機會。以下是寫作對數據工程師最重要的好處：

• 鞏固你的知識。蘋果公司的數據工程師伊恩·古德費洛在接受吳恩達采訪時說，寫博客有助于鞏固和鞏固對復雜專業概念的理解
• 向他人解釋復雜的數據。您可能會參與向經理、團隊成員和相關方報告數據和結果，這需要有清晰簡潔的書寫能力。

從使用免費工具如Grammarly檢查你的寫作開始。它會發現復雜的句子，不必要的單詞，并產生建議，使寫作更加連貫和清晰。

8.人際交往

數據工程師是一個經常與不同利益相關者交流的人，包括數據分析師、首席技術提供商、開發人員、設計師、客戶、機器學習工程師和其他人。

LinkedIn的研究發現，溝通--包括人際溝通--是雇主最想要的軟技能。無論你是一個內向的人還是沒有足夠的人際溝通技巧，你都必須學習它們。

考慮從這些領域入手：

• 反饋--要求并向他人提供反饋（包括書面和口頭）
• 主動傾聽--用主動傾聽來理解他人的觀點，更多地參與對話
• 肢體語言--學習姿勢、面部表情和手勢如何讓別人在與你交流時更舒服。

9.時間管理

一個擁有優秀時間管理技能的數據工程師可以改進他們工作的每一個方面。在這個職業中，有很多事情會讓你晚上睡不著，所以有能力規劃工作日并堅持時間表是一個驚人的優勢。

讓數據工程師更快樂的時間管理的好處：

• 壓力和焦慮較少
• 更好地平衡工作與生活
• 項目按時交付
• 有更多時間進行個人項目或娛樂活動
• 減少拖延。

好的是你可以學會時間管理。有一些有用的應用程序，如Forest和HabitMinder（它們非常有助于學習規劃和遵守時間表），以及許多你可以使用的書籍。