11-18-2024 04:55 PM
あまりネガティブなものを書くのもアレですが、Databricksで色々な機能を提供している一方で、よく分からないなーというところもあるかと思います。それらを共有いただくことで、私なり他の人がサポートしてくれるかもしれません。
自分がよく分かってなくて勉強したこと
12-02-2024 05:55 PM
ということで、Sparkの動作原理を勉強中です。すごく勉強になる動画やノートブックを見つけました。
https://youtu.be/QrHtWvPwgS8
https://github.com/datanikkthegreek/SparkDeltaDatabricksInternals
順次翻訳しながらウォークスルーしていきます。
DatabricksとSpark UIで学ぶSparkのパーティション #Databricks - Qiita https://qiita.com/taka_yayoi/items/68ee7ba3d555f27c6978
DatabricksとSpark UIで学ぶcoalesce(コアレス) #Databricks - Qiita https://qiita.com/taka_yayoi/items/0123a8409d100e2edbe2
never-displayed
Passionate about hosting events and connecting people? Help us grow a vibrant local community—sign up today to get started!