Categories
程式開發

有別於BATJ,滴滴的中台數據體系建設怎麼另闢蹊徑?

本文由 dbaplus 社群授權轉載。

前年阿里開始講數據中台業務,去年以來這個概念很火直到最近。我在阿里待了10年的時間,也參與了中台建設,今天想跟大家分享一下背後的邏輯,還有我在滴滴的實踐,以及中臺本質的問題是什麼。

今天我的題目叫做“精益生產與敏捷創新”,任何一個中台,不管是技術中台、AI中台,本質上為了更好支撐業務,讓業務能夠更好的去把用戶價值做出來。從技術角度來講創造價值的核心就是兩點:

  • 保證穩定且持續的研發生產持續輸出既有價值;
  • 在生產過程中去找到可以改進的地方,找到新的創新點,創造更大的新價值。

一、滴滴數據中台發展

有別於BATJ,滴滴的中台數據體系建設怎麼另闢蹊徑? 1

看幾組數據,這幾組數據看起來挺大的,但目的不是為了吹牛逼,目的是為了講這個東西。

其實滴滴也好,阿里巴巴也好,這些大公司數據都經歷了四個階段,每個階段有不同的挑戰,相信在座的同學不同公司也處於不同的階段,或者說有可能也走到了這四個階段的下一次循環。…

Categories
程式開發

裁員、虧損、倒閉,2019十大AI失敗案例回顧

儘管2019年有不少令人振奮的創新成果全面亮相,但也有不少初創企業及項目未能達到用戶與投資者的原有期望,本文對2019年的一些失敗的AI案例進行了梳理,供讀者參考。

時至今日,大多數企業已經開始朝著數字化轉型邁進,並將數據驅動與以人工智能為先的戰略作為終極目標。儘管相關結果令人振奮,但分析以及AI實施之旅總是相當漫長。由此帶來的直接影響,就是不少分析項目與初創企業無法進一步擴大規模,甚至未能經受住時間的考驗。

去年,先後有多份報告顯示,大部分數據科學項目終將遭遇失敗。實際上,一項調查皀,高達87%的數據科學項目甚至無法堅持過初始階段。由於缺乏必要技能、期望過分不切實際、資金不足,以及源自數據收集與清理乃至其他技術與非技術性問題的困擾,即使是專注於這一領域的初創企業,往往也無法撐過艱難的生存週期。

明星AI公司Magic Leap被曝嚴重虧損

image

Magic Leap是一家增強現實(AR)技術公司,曾經以上圖所示的一段AR演示視頻成功爆火網絡,該公司曾獲得14億美元的融資,投資者包括Google和阿里巴巴。 Magic …

Categories
程式開發

我從性能測試中學到的那些經驗與教訓

本文要點:

  • 要做好性能測試很難,但花一些額外的時間做好性能測試是值得的,這樣可以避免一些反復出現的問題;
  • 要注意區分延遲測試和吞吐量測試,因為它們是系統的兩個不同的方面;
  • 在進行延遲測試時,要把吞吐量固定在一個水平;
  • 在進行聚合時不要丟棄任何一個與性能有關的信息,要盡可能多地把它們記錄下來;
  • 只要多加小心,再加以自動化,就可以最大程度地避免出現性能回退。

對於像Hazelcast這樣的內存計算平台來說,性能意味著一切。因此,我們在性能方面投入了大量精力,並在這個方面積累了多年的經驗。

在這篇文章中,我將介紹一些常見的問題,並分享如何做好常規的性能測試。

性能測試中反復出現的問題

首先,測試環境差異是最常見的一個問題。如果一個系統最終要被部署到多台具有超強處理能力的機器上,那就不能夠只根據在本地開發機上進行的性能測試做出合理的假設,因為在將系統部署到真實的環境中,結果會完全不一樣。有趣的是,人們比他們自己認為的更容易犯這種錯誤。在我看來,其中的主要原因是懶惰(在本地測試很容易,但搭建額外的測試機器需要時間),意識不到這會成為一個問題,有時候是因為缺乏資源。…

Categories
程式開發

Q資訊:蘋果確認參加明年CES展會;GitHub 計劃在中國設立子公司;京東設立集團技術委員會;谷歌母公司任命諾貝…

GitHub 計劃在中國設立子公司;華為5G隨行WiFi正式開售:不換機就能用5G;谷歌母公司任命諾貝爾獎獲得者為新董事;蘋果確認參加明年CES展會;京東設立集團技術委員會; Counterpoint:全球高端手機蘋果份額佔一半。

Q資訊:蘋果確認參加明年CES展會;GitHub 計劃在中國設立子公司;京東設立集團技術委員會;谷歌母公司任命諾貝... 18

科技公司

GitHub 計劃在中國設立子公司

12月10日消息,GitHub 首席運營官 Erica

Categories
程式開發

程序員一定要數學很好嗎? | 話題

一位科技博主Jeremy Kun花了4年時間,寫成一本書——《程序員數學入門》,當時在科技論壇Hack News引發熱議。那麼,擁有良好的數學功底是否為程序員的剛需呢?

有同學覺得大多數編程需要的數學知識不超過基本算數,善於編程與善於解決數獨問題沒有太大差別。 “數學”意味著極少情況會使用到卻需要大量時間學習,學習之後不經常使用又會逐漸遺忘。

也有同學認為:數學不僅可以鍛煉邏輯思維抽象思維,而且可以幫助建立模型處理問題。而且隨著工作的積累,數學能力有可能會成為程序員之間的分水嶺,比如機器學習。

對此你怎麼看呢?你覺得擁有良好的數學功底是否為程序員的剛需呢?歡迎在下方留言區進行討論。

Categories
程式開發

北京“監管沙箱”實驗在即,區塊鏈合規之路開始?

北京“監管沙箱”實驗在即,區塊鏈合規之路開始? 19

12月5日,中國人民銀行發佈公告稱,支持北京市在全國率先啟動金融科技創新監管試點。北京市探索將探索運用信息公開、產品公示、社會監督等柔性管理方式,探索構建包容審慎的中國版“監管沙箱”。

近日,中國人民銀行營業管理部相關負責人透露了“北京監管沙箱”的部分細節:目前必須是持牌金融機構進入,這是底線,不會納入網貸、虛擬貨幣等機構,同時不排除有金融科技公司與持牌機構合作推出的項目進入。此外,北京地區獲批的46個金融科技試點項目,未來可能會有部分進入北京的“監管沙箱”。據了解,央行會同相關部門,在北京、上海、廣州等10個省市開展金融科技應用試點。目前北京“監管沙箱”的工作程序、內容及組織架構已製定完畢。

北京“監管沙箱”先行

據科技日報統計,2018年全球金融科技融資1118億美元,較2017年激增120%。其中,特大併購和收購交易是推動全球金融科技的主要因素,監管技術和區塊鏈備受追捧。據艾瑞諮詢數據,2018年,中國金融機構技術資金投入達2287.3億元,到2020年,中國金融機構技術資金投入將達到4034.7億元,其中前沿科技投入佔比將增長到35.1%。

北京“監管沙箱”實驗在即,區塊鏈合規之路開始? 20

目前,我國的金融科技在生態格局上出現了區域發展態勢,北京、上海、浙江的金融科技公司的數量佔據全國前3位。據企查查數據,北京市目前有1萬多家金融科技企業,2000多家區塊鏈相關企業。

北京在去年提出建設北京金融科技與專業服務創新示範區。去年10月,北京市人民政府在發布的《北京市促進金融科技發展規劃(2018年-2022年)》中指出,重點支持企業和研究機構為主體,開展底層關鍵技術、前沿技術研發,在新技術領域盡快形成一批知識產權和專利,打造金融科技前沿創新高地。…

Categories
程式開發

2019年InfoQ最受歡迎的文章排行榜 | 架構篇

2019年InfoQ最受歡迎的文章排行榜來了!

本次榜單涵蓋十大熱門領域:架構、前端、編程語言、雲計算、AI、開源、技術管理、運維、區塊鏈、產業互聯網…

第一個榜單,我們從“架構”頻道開始。 2019年,InfoQ一共發布了880+篇架構類的文章,總閱讀量超過500萬。

以下是前十篇最受歡迎的文章,你絕對不能錯過!

Top1:《中台之上(一):重視業務架構,不要讓“業務的歸業務、技術的歸技術”》
作者:鈺湚(付曉岩)

未來,業務不再僅僅是業務,技術也不再僅僅是技術,誰先實現思維方式的改進,誰能更好地聯動整個企業,誰就能贏得競爭的先手,而業務架構能力可以在這方面發揮關鍵作用,而且是超越中台之上的作用。

Top2:《為什麼谷歌的開發人員認為敏捷開發是無稽之談? 》…

Categories
程式開發

劉強東宣佈設立集團技術委員會,周伯文任主席

劉強東宣佈設立集團技術委員會,周伯文任主席 24

周伯文

“全面向技術轉型”的京東,正在重塑自己技術方向上的組織管理機構。

在京東集團CTO缺失半年後,劉強東在12月9日宣布:設立集團技術委員會,由周伯文擔任技術委員會主席。並且,該委員會將作為京東技術條線的最高管理決策機構。

周伯文現任京東雲與AI事業部負責人,該事業部將整合原京東雲、人工智能、IoT事業部的架構與職責。同時,周伯文將直接向京東集團CEO劉強東匯報工作。

據了解,京東集團前CTO張晨於2019年3月15日由於家庭原因離職,此後,京東集團CTO便一直空缺,至今長達半年之久。

但周伯文並非擔任CTO,在其任主席的京東集團技術委員會下,還下設決策委員會、執行委員會。

由五人組成技術決策委員會,他們分別是主席周伯文、副主席顏偉鵬和曹鵬、委員於建強和李德浩。並且,他們五人享有投票權。…

Categories
程式開發

論文解讀:Ceph 文件系統不適合作為分佈式存儲後端

導讀:Ceph 是一個 Linux 的 PB 級分佈式文件系統,與 POSIX 兼容,使用 Ceph

Categories
程式開發

2019年薪水最高的十三個技術崗位

如果您是一名計算機科學專業的畢業生,或者正在考慮投身於軟件開發領域,抑或是經驗豐富且正在考慮跳槽的程序員,那麼恭喜各位——這篇文章絕對能帶來一些有益的啟發。

在本文中,我們將共同了解目前技術行業中薪酬最高的13個開發崗位。

這些崗位門檻也不算太高。大家只要具有一定的編程經驗再加上旺盛的學習熱情,就完全可以在其中一試身手。另外,機器學習與數據科學領域尤其適合初學者以及經驗豐富的程序員,前途光明啊各位!

平均來講,機器學習專家與數據科學家的年薪在11萬美元到12萬美元之間,而且市場仍對相關人才擁有旺盛的需求。如果大家願意投身其中以解決現實問題,相信會有不少企業提供令人興奮的機會。

很多朋友都對程序員以及技術人員的薪酬水平感到好奇。開發人員往往抱怨質量保證人員的薪水比他們高,而質量保證人員對開發者卻也有著同樣的印象。

另外,即使我們的某些同事在經驗上還不如自己,其仍然有可能拿到比咱們更高的工資。沒錯,軟件開發行業就是這樣,同崗不同酬的情況太常見啦。

但不管怎麼說,技術人員能拿到的薪酬還是遠遠高於平均水平的,只能說某些從業者拿得更多。

在與招聘師以及招聘經理面談之前,我花了不少時間查閱Glassdoor上關於特定技術職位的平均工資。當然,這些數字不算太準確,只能算是一種相對可靠的基準與參考,僅此而已。

相反,我更相信Stack Overflow上的開發者調查數據。我一直在跟踪他們的調查,並藉此了解到目前最流行的技術、框架、庫以及編程語言等信息。本文也將重點進行介紹,希望能讓大家更有針對性地努力提高自己的薪酬水平。…