全部 新聞動態(tài) 技術文章 常見問題 技術問答

• • 

    Spark SQL用法建議【大數(shù)據(jù)文章】

    參數(shù)默認false。當設為true，parquet會聚合所有parquet文件的schema，否則是直接讀取parquet summary文件，或者在沒有parquet summary文件時候隨機選擇一個文件的schema作為最終的schema。查看全文>>

    技術文章2021-01-14 |黑馬程序員 |Spark SQL性能調優(yōu),操作Spark SQLt調優(yōu)
  • 

    Kafka數(shù)據(jù)是存在磁盤上還是內存上？

    Kafka是一個高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)，它在實時計算系統(tǒng)中有著非常強大的功能。把topic中一個parition大文件分成多個小文件段，通過多個小文件段，就容易定期清除或刪除已經消費完文件，減少磁盤占用。查看全文>>

    技術文章2021-01-12 |黑馬程序員 |Kafka,Kafka數(shù)據(jù)存儲
  • 

    Hadoop實現(xiàn)join的幾種方法【大數(shù)據(jù)開發(fā)面試】

    Hadoop實現(xiàn)join有三種方法，第一種是reduce side join，它是一種最簡單的join方式，其主要思想如下：查看全文>>

    技術文章2021-01-12 |黑馬程序員 |實現(xiàn)join,Hadoop,大數(shù)據(jù)面試題
  • 

    Spark RDD的兩種依賴關系？

    在Spark中，不同的RDD之間具有依賴的關系。RDD與它所依賴的RDD的依賴關系有兩種類型，分別是窄依賴（narrow dependency）和寬依賴（wide dependency）。查看全文>>

    技術文章2021-01-05 |黑馬程序員 |spark RDD,RDD的兩種依賴關系
  • 

    大數(shù)據(jù)離散流是什么？它的內部結構是怎樣的？

    Spark Streaming提供了一個高級抽象的流，即DStream（離散流）。DStream表示連續(xù)的數(shù)據(jù)流，可以通過Kafka、Flume和Kinesis等數(shù)據(jù)源創(chuàng)建，也可以通過現(xiàn)有DStream的高級操作來創(chuàng)建。查看全文>>

    技術文章2021-01-05 |黑馬程序員 |DStream,離散流,DStream是什么
  • 

    CSS3顏色不透明度的設置方法【web前端】

    在CSS3之前，我們設置顏色的方式包含十六進制顏色(如#F00)、rgb模式顏色、或指定顏色的英文名稱(如red)，但這些方法無法改變顏色的不透明度。在CSS3中新增了兩種設置顏色不透明度的方法，一種是使用rgba模式設置，另一種是使用opacity屬性設置。下面將詳細講解兩種設置方法。查看全文>>

    技術文章2020-12-30 |黑馬程序員 |CSS3顏色不透明度設置
  << < 1 2 3 4 5 6 7 8 9 10 ...38 > >>