Database)にアクセスする方法です。Serverのデータの読み書きができるようになります。ServerのJDBCのjarファイルをダウンロードしますhttps://docs.microsoft.com/ja-jp/sql/connect/jdbc/download-microsoft-jdbc-driver-for-sql-server?view=sql-server-2017SparkにJDBCのjarファイルを読み込みます「spark-defaults.conf」の「spark.jars」にjarファイルのパスを設定しますSparkのClassPathにJDBCのjarファイルを設定します「spark-defaults.conf」の「spark.driver.extraClassPath」にjarファイルのパスを設定しますDataproc設定Dataproceはマネージドサービスのため、Sparkを直接いじることができません。クラスター作成時にSparkの設定します。Storageにアップしておきます。Storageにアップします。$JAR_PATH/初期化アクションでは、Sparkに追加するjarファイルの置き場所を作って、StorageにアップしたJDBCのjarファイルをダウンロードしています。読み書き両方が可能です。長めに設定した方がいいかと思います。イメージはSpark2.4が使えるバージョン1.4以上にした方がいいです。Pythonには無いので、JDBCで汎用的にアクセスしています。Glueを試しに使ってみたのですが、その感想です。Dataproc)から、MySQLにアクセスする方法です。...2019-05-22UbuntuでOneDriveを使ってみるここしばらく、OneDriveを触っていました。1引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。