sparkpool引數配置

Sparkpool是一個以太坊礦池，它允許使用者參與以太坊的挖礦活動。以下是一些常見的Sparkpool引數配置：

1. 礦工賬戶地址（wallet address）：在Sparkpool註冊後，你將獲得一個礦工賬戶地址。這個地址將用於挖礦獎勵的收款。

2. 礦工機器的算力（hashrate）：你需要配置你的礦工機器的算力，這將決定你的挖礦速度和潛在的收益。

3. 挖礦軟體選擇：Sparkpool支援各種挖礦軟體，你可以根據自己的喜好和作業系統選擇合適的挖礦軟體。

4. 挖礦費用（mining fee）：Sparkpool會收取一定的挖礦費用作為服務的費用。你可以根據自己的需求和優先順序調整挖礦費用。

5. 挖礦難度（mining difficulty）：挖礦難度是一個動態調整的引數，它會根據全網的挖礦算力來調整。你無需手動配置挖礦難度，礦池會自動調整以保持穩定的挖礦速度。

6. 挖礦獎勵支付設定：Sparkpool通常會按照一定的規則和條件支付挖礦獎勵，例如達到一定數量的以太幣後或定期支付。你可以在Sparkpool的設定頁面中配置你的獎勵支付方式。

請注意，Sparkpool的引數配置可能隨時間和礦池的政策變化而發生變化。建議在使用Sparkpool挖礦之前，查閱官方文件或聯絡他們的客服以獲得最新的準確資訊。

spark引數配置如下：

Spark引數總結

1、num-executors引數
該引數設定Spark作業總共需要多少個Executor程序來執行。Driver向YARN申請資源時，YARN管理器會按照你設定的，在各個WorkNode上啟動相應的Executor程序

註釋：Executor為JVM程序，用於執行和處理Task（分割槽資料）

2、executor-memory引數
該引數用於設定每個Executor程序的記憶體。

3、executor-cores
該引數用於Executor程序的CPU core數量，決定了Executor並行執行Task行程能力。每個CPU core同時只能執行一個Task行程，越多效能越好。

4、driver-memory
該引數用於設定Driver程序記憶體。

Driver:我這裡個人理解為 spark 程式入口，負責對spark中SparkContext（sc）物件進行建立

5、spark.default.parallelism
該引數用於設定每個stage的預設task數量
如果不設定這個引數， Spark自己根據底層HDFS的block數量來設定task的數量，預設是一個HDFS block對應一個task

6、spark.storage.memoryFraction
該引數用於設定RDD持久化資料在Executor記憶體中能佔的比例，預設是0.6。預設佔用Executor 60%記憶體，可以儲存持久化的RDD資料。

7、spark.shuffle.memoryFraction該引數用於設定shuffle過程一個task拉取上個stage的task輸出後，進行聚合操作所用到的Executor記憶體佔比，預設0.2（20%）。