2019數據科學家最需要的技能盤點，Python大火，Pytorch職位需求翻番

作者：大數據文摘 2019-12-24 13:40:16

開發

對于每個工作搜索網站，我們計算了該網站中出現的每個關鍵詞在所有數據科學家工作列表中所占的百分比。然后，在三個站點上為每個關鍵字取這些百分比的平均值。

[[286640]]

大數據文摘出品

來源：medium

編譯：趙吉克

2018年medium上一篇博文分析了數據科學家最需要的技能，那篇文章引起了很大的反響，在medium上有超過11000次點贊，并被翻譯成幾種語言，成為了2018年11月KD Nuggets最受歡迎的文章。

2018年文章鏈接：

https://towardsdatascience.com/the-most-in-demand-skills-for-data-scientists-4a4a8db896db

一年多過去了，2019的作者也發布了最新的分析，讓我們看看有什么變化。

2018年的文章考察了對統計和溝通交流等一般技能的需求以及對Python和R等技術的需求。軟件技術的變化一定快于一般技能需求上的變化，所以在本更新中只包括技術部分。

我們搜索了SimplyHired、Indeed、Monster和LinkedIn以查看在美工作的列表中哪些關鍵詞和“數據科學家”共同出現。這一次，我們決定用Request和Beautiful Soup包來獲取工作列表，而不是手工搜索。

事實證明，LinkedIn的爬取要困難得多，因為查看工作的列表的準確數字需要身份驗證。我決定使用Selenium進行無頭瀏覽。2019年9月，美國最高法院對LinkedIn做出了判決，允許其數據被爬取。盡管如此，在幾次抓取嘗試后，還是無法訪問賬戶，這個問題可能源于刷新率限制。

不管怎么說，微軟擁有LinkedIn，Randstad Holding擁有Monster, Recruit Holdings擁有Indeed和SimplyHired。

無論如何，LinkedIn的數據可能無法提供從去年到今年的蘋果公司職位對比。今年夏天，LinkedIn的一些技術職位搜索詞每周都會出現大幅波動。這可能是由于他們試圖通過使用自然語言處理來衡量搜索目的，因而對他們的搜索結果算法進行了實驗。相比之下，另外三個搜索網站在過去兩年中出現的“數據科學家”相關職位列表數量則相對接近。

基于這些原因，LinkedIn被排除在本文2019年和2018年的分析之外。

同時手動調查了新的搜索詞以及那些看起來很有前途的詞。在2019年，沒有新的搜索詞達到占全體5%的占有水平，這是下述結果中使用的截斷指標。

PyTorch職位需求翻番

我們采用四種方法來查看每個關鍵字的結果：

方法1：對于每個求職網站，在每個年度用包含關鍵詞的列表數量除以包含data scientist的搜索詞總數。然后取三個網站的平均值。
方法2：看看2018年至2019年這些列表的平均比例變化的絕對值。
方法3：看看2018年至2019年這些列表的平均比例變化的相對百分比。

在完成上面的第一個步驟之后，計算每個關鍵字相對于該年度其他關鍵字的排名，然后計算每一年的排名變化。

觀察前三個帶有柱狀圖的選項，然后我們將展示一個包含數據的表并討論結果。

這是上文中方法1對應的2019年圖表，顯示Python出現在近75%的列表中。

這是上文中方法2的圖表，顯示了2018年至2019年職位列表中某項技能需求的變化。AWS顯示上升了5%。在2019年和2018年上市的公司中，這一比例分別為19.4%和14.6%。

這是上文方法3對應的圖表，顯示了每年的百分比變化。2018年，PyTorch上榜職位需求數平均增長了108.1%。

以下是上述圖表中的信息用表格形式展示的結果，按2018年至2019年上榜職位比例在三家網站平均后的變化百分比排序。

穩居榜首的python，落寞的R

在不到14個月的時間內技術需求發生了相當大的變化!

1. 優勝者

Python仍然排名第一。到目前為止，它是最常用的語言。幾乎霸占了四分之三的榜單，與2018年相比，Python使用量有了可觀的增長。

SQL使用量快速提升。它幾乎快要超過獲得第二高平均分數的R語言。如果繼續保持該趨勢，SQL很快將成為真正的第二。

杰出的深度學習框架得到了廣泛使用。PyTorch在所有關鍵字中的增幅最大，Keras和TensorFlow也表現出色。Keras和PyTorch在排名中均上升了4位，TensorFlow上升了3位。請注意，由于PyTorch的起始平均值較低，TensorFlow的當前平均值仍是PyTorch平均值的兩倍。