亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

在Apache Spark 2.0.0中,是否可以從外部數據庫中獲取查詢(而不是獲取整個表)?

在Apache Spark 2.0.0中,是否可以從外部數據庫中獲取查詢(而不是獲取整個表)?

紅顏莎娜 2019-11-20 14:34:36
使用pyspark:from pyspark.sql import SparkSessionspark = SparkSession\    .builder\    .appName("spark play")\    .getOrCreate()    df = spark.read\    .format("jdbc")\    .option("url", "jdbc:mysql://localhost:port")\    .option("dbtable", "schema.tablename")\    .option("user", "username")\    .option("password", "password")\    .load()與其獲取“ schema.tablename”,不如獲取一個查詢的結果集。
查看完整描述

2 回答

?
縹緲止盈

TA貢獻2041條經驗 獲得超4個贊

與1.x中的相同,您可以傳遞有效的子查詢作為dbtable參數,例如:


...

.option("dbtable", "(SELECT foo, bar FROM schema.tablename) AS tmp")

...


查看完整回答
反對 回復 2019-11-20
  • 2 回答
  • 0 關注
  • 545 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號