零基礎學編程需要什么基礎？英語不好可以學嗎 2022-09-06
零基礎學編程需要什么基礎？英語不好可以學嗎？零基礎學習編程需要具備扎實的計算機基礎常識，較強的邏輯思維、計算機操作系統體系結構、計算...詳情>
爬蟲分類有哪些？ 2022-09-05
通用網絡爬蟲從互聯網中搜集網頁，采集信息，這些網頁信息決定著整個引擎系統的內容是否豐富，信息是否即時，因此其性能的優劣直接影響著搜索...詳情>
2022年it行業的就業方向及前景分析 2022-09-05
在2022年it主流就業方向包括前端開發、數據庫管理、大數據開發、后臺開發、嵌入式開發、AI智能和UI設計這七大方向，每個方向所需要的技能都會...詳情>
SparkStreaming消費速度趕不上生產速度怎么辦？ 2022-09-02
在默認情況下，Spark Streaming 通過receiver或者Direct方式以生產者生產數據的速率接收數據。當 batch processing time > batch interval 的...詳情>
SparkStreaming一個批次有多久？一個批次有多少條數據？ 2022-09-02
關于批次間隔需要結合業務來確定的，如果實時性要求高，批次間隔需要調小。 每個批次的數據量是和每天產生的數據量有直接關系，在計算的時候需...詳情>
批次累加 2022-09-02
UpdataStateBykey updataStateBykey是特殊的reduceByKey， 相當于oldValue+reduceByKey(newValue1,newValue2)，通過傳入一個updateFunc來實現...詳情>
解決數據積壓（重點） 2022-09-02
批處理時間<<批間隔時間：流量太小，集群閑置，浪費資源，批處理時間>>批間隔時間：流量太大，集群繁忙，數據積壓導致系統崩潰#####通過設置sp...詳情>
SparkStreaming整合Kafka（重點） 2022-09-02
receiver方式 sparkStream啟動一個單獨的線程receiver定時使用kafka高階API向kafka拉取數據，并自動地更新zk的offsets。優點：用戶專注于業務...詳情>
DStream 2022-09-02
DStream是Spark Streaming的基礎抽象，代表持續的數據流，它由一系列連續的RDD組成，一個批次間隔接收的數據只會存放在一個block中，因此每個...詳情>
SparkSQL的時間類型？ 2022-09-02
SparkSQL的時間類型？SparkSQL的所有類型都在org.apache.spark.sql.types._的包下面，這個里面我們可以引入對應的schema類型，包括事件的Date...詳情>
在線提問
專業導師線上坐鎮，解答個性化學習難題
提交問題
京公網安備 11010802030320號