DatabricksのSecretsの設定方法について理解するのに時間がかかったため、今後の参考として手順をまとめておきます。特に、ローカルPCにDatabricks CLIをインストールし、クラウド上のDatabricksでスコープとキーを管理するワークフローの把握に苦労しました。

Databricks運用において最も強力なモニタリング基盤がSystem Tablesです。 この仕組みでは、クエリ履歴・ジョブ実行状況・コスト・ユーザー操作・監査ログなどを自動で記録し、SQLで分析可能な状態に保ちます。 つまり、「Databricksの内部動作を構造化データと ...

2023年10月31日、CData Software Japan 合同会社（本社：アメリカノースカロライナ州、日本オフィス：宮城県仙台市、代表社員 職務執行者：疋田 圭介、以下CData）は、クラウド・DB データのETL / ELT データパイプラインツール『CData Sync』が、2023 Q4 アップデートにて ...