Deaktivieren Sie PySpark, um beim Ausführen Informationen zu drucken
Posted: 14 Jan 2025, 13:14
Ich habe begonnen, PySpark zu verwenden. Die Version von PySpark ist 3.5.4 und wird über pip installiert.
Das ist mein Code:
Jedes Mal, wenn ich das Programm ausführe mit:
Alle diese Informationen über pyspark werden gedruckt (in Gelb):
[img]https:/ /i.sstatic.net/xFavPNKi.png[/img]
So deaktivieren Sie es, damit es nicht gedruckt wird.
Das ist mein Code:
Code: Select all
from pyspark.sql import SparkSession
pyspark = SparkSession.builder.master("local[8]").appName("test").getOrCreate()
df = pyspark.read.csv("test.csv", header=True)
print(df.show())
Code: Select all
python test_01.py
[img]https:/ /i.sstatic.net/xFavPNKi.png[/img]
So deaktivieren Sie es, damit es nicht gedruckt wird.