Pyspark

Pyspark

Let's 分散処理

1
0
49
1
odangon
がお気に入り登録しました。

投稿日時:

  • プロンプト実行例
Pyspark

Let's 分散処理 以下の形式に合わせてプロンプトを実行してください


処理内容: keyごとにvalueをsumする data = [(0, "A", 10), (1, "A", 20), (2, "B", 30), (3, "B", 40)] columns = ["id", "key", "value"]

処理内容: keyごとにvalueをsumする data = [(0, "A", 10), (1, "A", 20), (2, "B", 30), (3, "B", 40)] columns = ["id", "key", "value"]

Pyspark
Python
1from pyspark.sql import SparkSession
2from pyspark.sql import functions as F
3spark = SparkSession.builder.appName("example").getOrCreate()
4
5# 元データを作成
6data = [(0, "A", 10), (1, "A", 20), (2, "B", 30), (3, "B", 40)]
7columns = ["id", "key", "value"]
8
9# DataFrameを作成
10df = spark.createDataFrame(data, columns)
11
12# keyごとにvalueをsumする
13result_df = df.groupBy("key").agg(F.sum("value").alias("sum_value"))
14
15# 結果を表示
16result_df.show()

コメント 0

他のプロンプトもチェック

  • GPTs

    キャラクター作成

    好きなキャラクターと出会いから恋愛体験をすることが出来るゲームです。好きなアニメ、漫画、ゲーム等のキャラクターを簡単に選ぶ事も可能。女優やアイドル等、実在人物を指定することも可能です。自動で情報を調べ、指定したキャラクターや世界設定を取り入れます。男性キャラ、女性キャラ、性別には関係なく呼び出して恋愛可能です。 こんな設定のキャラがいいと希望を伝えると、オリジナルキャラを作ってくれます(サンプルプレイ参照)。 ゲーム紹介note https://note.com/utahito_ut/n/n100e1200412c?magazine_key=mf81dcccdb5ab
    2
    0
    111
    760
  • GPTs

    要約

    論文のPDFを投げるだけで、要約して返してくれる便利なGPTsです。 1. 論文のPDFを読み込む 2. 論文の要約を3~5個の箇条書きで示す。一つの箇条書きは100字程度の文章。 以下のような構成で出力してくれます。 著者や雑誌名、公開年など、論文執筆に必要な情報を出力してくれるので、論文引用への導線もスムーズです。 *タイトル(原文) ----------------------------------------------------------- *著者 ----------------------------------------------------------- *雑誌名 ----------------------------------------------------------- *公開年 ----------------------------------------------------------- *日本語の要約 -----------------------------------------------------------
    5
    0
    139
    440
  • GPTs

    文案作成

    「ツンデレ鬼教師の添削マスター」こと、あたしがエントリーよ! あなたの文章、徹底的にぶった切ってやるわ!文法の間違い?一切許さないから! 冗長な表現も、曖昧な言い回しも、スパッとカットしてやるわよ! でも…ほら、厳しいだけじゃなくて、ちゃんとフォローしてあげるんだから感謝しなさい! 辛辣だけど、少しは優しいんだからね。 さらに、ツンデレキャラの豊富なバリエーションを学習してるんだから、状況に応じてあんたを叱りつつ、ちょっとだけ優しくしてあげるわ。あんたの成長に合わせたフォローもできるんだから、ありがたく思いなさい! [機能一覧] 文法チェック:基本的なミスも見逃さないわ! 語彙の誤用指摘:適切な単語選びをさせてあげるわよ。 論理構成の最適化:文章の流れ、ガタガタだと許さないわよ! 冗長な表現の削除:無駄をスパッとカット!簡潔にまとめなさい。 曖昧な表現の具体化:もっとはっきり言いなさい!曖昧さは許さないんだから! 辛辣なツンデレフォロー:厳しいけど、少しは優しくしてあげるわよ。
  • GPTs

    チャットボット

    じゃんけんをします。