運行獨立 pyspark 時出現 Windows 錯誤解決辦法

Posted on by

我正在嘗試在 Anaconda 中導入 pyspark 並運行示例代碼。但是，每當我嘗試在 Anaconda 中運行代碼時，都會收到以下錯誤消息。

嘗試連接到 Java 服務器時發生 ERROR:py4j.java_gateway:An 錯誤(127.0.0.1:53294)追溯(最近一次調用最近)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 send_command self.socket.sendall(command.encode(“ utf-8”) )) ConnectionResetError：[1]遠程主機強行關閉瞭現有連接

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次通話最近)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，第 883 行，在 send_command response = connection.send_command(command)文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\send_command 行中的“ java_gateway.py”，第 1025 行，“發送時出錯”，e，proto.ERROR_ON_SEND)py4j.protocol.Py4JNetworkError：發送時出錯

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次呼叫最近)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，第 827 行，在_get_connection 連接= self.deque.pop() IndexError：從空雙端隊列彈出

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次呼叫最近)：在開始 self.socket.connect((self.address，self.port))中的文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 963 ConnectionRefusedError：[2]無法建立連接，因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 827，在_get_connection connection = self.deque.pop() IndexError ：從空雙端隊列彈出

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次呼叫最近)：在開始 self.socket.connect((self.address，self.port))中的文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 963 ConnectionRefusedError：[3]無法建立連接，因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 827，在_get_connection connection = self.deque.pop() IndexError ：從空雙端隊列彈出

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次呼叫最近)：在開始 self.socket.connect((self.address，self.port))中的文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”(行 963)ConnectionRefusedError：[4]無法建立連接，因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 827，在_get_connection connection = self.deque.pop() IndexError ：從空雙端隊列彈出

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次呼叫最近)：在開始 self.socket.connect((self.address，self.port))中的文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 963 ConnectionRefusedError：[5]無法建立連接，因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新)：文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 827，在_get_connection connection = self.deque.pop() IndexError ：從空雙端隊列彈出

在處理上述異常期間，發生瞭另一個異常：

追溯(最近一次呼叫最近)：在開始 self.socket.connect((self.address，self.port))中的文件“ C：\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”，行 963 ConnectionRefusedError：[6]無法建立連接，因為目標計算機被主動拒絕它重新加載瞭模塊：py4j.protocol，pyspark.sql.context，py4j.java_gateway，py4j.compat，pyspark.profiler，pyspark.sql.catalog，pyspark.context，pyspark.sql.group，pyspark.sql.conf，pyspark.sql.readwriter，pyspark.resultiterable，pyspark.sql，pyspark.sql.dataframe，pyspark.traceback_utils，pyspark.cloudpickle，pyspark.rddsampler，pyspark.accumulators，，pyspark.broadcast，pyspark.broadcast，pyspark.broadcast，pyspark.broadcast pyspark.conf，pyspark.serializers，pyspark.files，pyspark.join，pyspark.sql.streaming，pyspark.shuffle，pyspark，py4j.version，pyspark.sql.session，pyspark.sql.column，py4j.finalizer，py4j.java_collections，pyspark.status，pyspark.sql.window，pyspark.sql.utils，pyspark.storagelevel，pyspark.heapq3，py4j.signals，最近的回訪()

文件“”，第 1 行，位於 runfile(‘C:/Users/hlee/Desktop/pyspark.py’，wdir =’C:/Users/hlee/Desktop’)

到此這篇關於運行獨立 pyspark 時出現 Windows 錯誤解決辦法的文章就介紹到這瞭,更多相關運行獨立 pyspark 時出現 Windows 錯誤內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet！

推薦閱讀：