Pyspark

Pyspark

Let's 分散処理

1
0
47
1
odangon
がお気に入り登録しました。

投稿日時:

  • プロンプト実行例
Pyspark

Let's 分散処理 以下の形式に合わせてプロンプトを実行してください


処理内容: keyごとにvalueをsumする data = [(0, "A", 10), (1, "A", 20), (2, "B", 30), (3, "B", 40)] columns = ["id", "key", "value"]

処理内容: keyごとにvalueをsumする data = [(0, "A", 10), (1, "A", 20), (2, "B", 30), (3, "B", 40)] columns = ["id", "key", "value"]

Pyspark
Python
1from pyspark.sql import SparkSession
2from pyspark.sql import functions as F
3spark = SparkSession.builder.appName("example").getOrCreate()
4
5# 元データを作成
6data = [(0, "A", 10), (1, "A", 20), (2, "B", 30), (3, "B", 40)]
7columns = ["id", "key", "value"]
8
9# DataFrameを作成
10df = spark.createDataFrame(data, columns)
11
12# keyごとにvalueをsumする
13result_df = df.groupBy("key").agg(F.sum("value").alias("sum_value"))
14
15# 結果を表示
16result_df.show()

コメント 0

他のプロンプトもチェック

  • 画像生成

    SNS投稿

    推奨モデル - DALL•E 3
    話題のねこプリンだけでなくうさぎプリンなど、いろんなぷるぷるプリンができます。 かわいすぎて食べられないほどのデザート。見るだけで心が癒やされます。 SNSアイコンやインスタ投稿などのほか、創作デザートのヒントやイベントポスター、イメージ画像、プレゼン資料の表紙などにも。 スマホの待受やPCの壁紙、部屋の飾り絵などに使うといつも癒やされます。 ---------------------------------------------------------------------------------------------------------------------------------- 😊少しでも気に入っていただけましたら、お気に入り(❤マーク)をクリックしていただけると、とても励みになりますので、ぜひお願いいたします。 😊また、「いつか使ってみよう」と思っている方も、お気に入りに登録しておくと、いつでもマイページからすぐにご利用いただけます。 😊感想など、お気軽にコメントください。  
    3
    0
    36
    178
  • 画像生成

    キャラクター作成

    推奨モデル - Midjourney
    お正月に使えるヘビの可愛い画像を生成します。年賀状などに利用できます。
  • GPTs

    文案作成

    テーマを入力するだけでSEOに強い記事を作成 ⭐️ ライティング副業、ブログ記事の作成に活用できます ✍️ 少しずつ記事を書くので、長文執筆に最適 💻
  • 文案作成

    テーマと書き手の学年を入力すると、それに合わせた作文を自動作成します。
    0
    0
    14
    360