Re: [請益]未來的學習方向

看板Soft_Job (軟體人)作者oopFoo (3d)時間5年前 (2019/02/25 14:29)推噓3(3推 0噓 11→)

留言14則, 6人參與討論串4/4 (看更多)

※ 引述《flightheory (飛行原理)》之銘言： : 真正熟悉是C#, 摸了兩年已經很有心得, PM很放心我寫的C#程式, 尤其是WPF和XAML部分. : 但無論如何, 既然你提到了Python和C#, 這兩個我都接觸過, 就來試著與你討論討論. : 先講結論, 個人看法不建議同時學Python和C#, 兩者必須二擇一. 因為兩者差異太大了. : Python的好處是你很容易用Keras和Tensorflow做出深度學習的東西, 學習門檻很低. 但 : Python程式的速度不快, 以前我用CPU跑CNN, 要在週五下班前開始讓程式跑, 等週一上班 : 才來看結果. 現在用1060 6GB的GPU來跑, 所花時間雖然是1/30, 但跟我希望的還是太慢. : 所以我打算把手頭上的醫材做到差不多時, 改用C#&CNTK來跑深度學習. 以我對C#的理解 : 速度一定比Python快許多. Neural Network吃的是floating point的運算速度。簡單看一個連結 https://bit.ly/2XmAWpR 1060的fp32是4.4tflops。intel第一個1tflops的cpu是i9-7980XE。雖然各總差異，但大致上nn一定要用GPU是毋庸置疑的。 Pytorch, Keras, Tensorflow, CNTK的gpu運算都是架在Cuda上，應該說是cuDNN上（n的proprietary library)。所有dl/ml的training時間，99%都在gpu裡，你Python換c#一點都不會有任何影響。 N公司非常狡詐，我們知道fp16在大部分NN運算就夠了，N就把10xx的fp16運算crippled，這一代的fp16是f32的1/64。讓你乖乖買昂貴的AI專用卡。還好Rtx這一代，因為TensorCore原因（4x4Matrix)，稍微解放fp16，所以你用Rtx2060的fp16 MixedMode，運算速度可跟1080ti一拼。 AMD gpu不好用，因為他沒有cuDNN。OpenCL沒有人開發clDNN，AMD又另外搞ROCM/HIP，Intel搞MKL-DNN，沒有整合努力。你現在要運算快又便宜就是選RTX2060，除非你的dataset太大。 : 當初有人問我為何辭去公職? 難道不怕公司怎麼了? 我說我相信AI會紅個十年, 等AI退燒 : 而公司又怎麼了, 我也60歲可以退休, 所以就給它拼個十年看看, 或許真的能高雄發大財我們現在有點像在dk效應的谷底。看一些美國論壇，一堆Engineers講30年，Level5的自駕車還要30年，雖然某某大教授（NN的權威）說他樂觀的估計2032年有機會。我非常看好現在的AI，但是還是需要很多錢，很多人力，很多的研究，希望大家不要被將要來的AI Winter洗出去。 Software is eating the World，這還是未來的趨勢。 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.231.155.15 ※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1551076193.A.3FC.html ※ 編輯: oopFoo (36.231.155.15), 02/25/2019 14:58:46