百億級資料處理最佳化
作者: 渡碼 連結:https://www.cnblogs.com/duma/p/11186279.html 最近在做大資料處理時,遇到兩個大表 join 導致資料處理太慢(甚至算不出來)的問題。我們的數倉基於阿裡的 ODPS,它與 Hiv...
作者: 渡碼 連結:https://www.cnblogs.com/duma/p/11186279.html 最近在做大資料處理時,遇到兩個大表 join 導致資料處理太慢(甚至算不出來)的問題。我們的數倉基於阿裡的 ODPS,它與 Hiv...
閱讀本文大概需要 2.1 分鐘。 前幾天,有球友剛好問過我一個問題,大意是說,張哥作為摸爬滾打的過來人,如果說給一些後來者一個建議,只有一個建議的話,你會給出啥? 我想了下,如果說只能有一個建議的話,我會建議大家永遠樂觀,遠離負能量爆棚的人...
來自公眾號:譚小譚 網上經常能看到一些文章總結在 mysql 中不能命中索引的各種情況,其中有一種說法就是指使用了 or 的陳述句都不能命中索引。 這種說法其實是不夠正確的,正確的結論應該是,從 mysql5.0 後,如果在 ...
作者:天空的湛藍 連結:https://www.cnblogs.com/zhan520g/p/11018163.html LINQ(Language Integrated Query,語言整合查詢)提供了類似於SQL的語法,能對集合進行遍歷...
GNN自去年起,一直是研究的熱點,圖神經網路相關的關鍵詞頻繁出現在今年各大AI頂會論文title中,加深對這一領域的瞭解是非常必要的。分享一篇,關於GNN,目前看到的整理得最細緻的資源串列。 內容涉及節點表示學習、知識圖譜表...
在雲端計算架構設計中,最複雜且最重要的元件就是網路,Docker作為雲端計算追捧的新寵兒也不會例外,尤其是當使用Docker容器構建分散式服務時,通訊和網路變得非常重要。 開篇之前,先給讀者分享下筆者對容器知識總結: 容器技術...
透過與IBM的合作,紅帽有機會為更廣泛的組織機構提供更多開源創新成果,並使我們得以提供真正靈活可選的混合雲解決方案。 ——紅帽公司總裁兼CEO,Jim Whitehurst 此次收購意味著IBM正式躋身為領先混合雲提供商,加速IBM的高價值...
導讀:生成對抗網路GAN是Ian Goodfellow在2014年他的博士期間提出的機器學習架構。與傳統的神經網路模型不同,GAN包括了兩套獨立的網路:生成器與判別器,兩者之間作為互相對抗的標的,最終生成器將能創造出讓判別器無法識別真假的內...
剛開始寫這篇文章的時候,標的非常大,想要探索 Go 程式的一生:編碼、編譯、彙編、連結、執行、退出。它的每一步具體如何進行,力圖弄清 Go 程式的這一生。 在這個過程中,我又複習了一遍《程式員的自我修養》。這是一本講編譯、連結的書,非常詳細...
我們一定不會希望用商業的方式運作我們的學校 —— 但是更加註重持續改進的教育機構是可以讓我們受益的。 — Ben Owens 我們一定不會希望用商業的方式運作我們的學校 —— 但是更加註重持續改進的教育機構是可以讓...