文件名称:synapse_analytics
文件大小:130KB
文件格式:ZIP
更新时间:2024-04-27 18:38:59
借助Azure Synapse Analytics进行实用数据工程 此回购包含班级的随附材料。 源数据文件 为了运行演示,您需要属于该类的源数据文件(parquet,csv,xml,json等)。 这将由讲师提供。 SQL专用池 脚本: D1_SQLDW_MusicService:涵盖将数据读取到专用池,表分布,查询分析 D2_SQLDW_Workload_Management:涵盖监视资源以及使用工作负荷组和分类器 D3_SQLDW_MusicService_Cleanup:删除所有表,以便可以重做演示 D4_SQLDW_IncrementsSchema:创建与管道D11一起使用的模式(表和sps) D4_SQLDW_IncrementsSetup:进行清理和设置以执行管道D11 SQL无服务器池 脚本: D1_SQLOD_MusicService:通过许多示例介绍如何使用外部表和
【文件预览】:
synapse_analytics-main
----pipeline()
--------D1_Trigger_SQLOD_UserArtistPlays.json(3KB)
--------D6_Parameter_To_Spark_Notebook.json(948B)
--------D4_MDF_UserArtistPlays_AntiPattern.json(3KB)
--------D3_MDF_GenerateAugmentedArtistInfo_Drift.json(812B)
--------D8_SQLOD_UserSignup_DeltaCopy.json(9KB)
--------D5_MDF_UserArtistPlays_Contained.json(1KB)
--------D10_Parameterized_DeltaCopy.json(19KB)
--------D9_WDF_SQLOD_UserDetails_TimeConversion.json(1KB)
--------D7_WDF_UserDetailsWrangled.json(681B)
--------D2_MDF_GenerateAugmentedArtistInfo.json(800B)
----trigger()
--------UserArtistPlaysUpload.json(879B)
----managedVirtualNetwork()
--------default.json(86B)
--------default()
----integrationRuntime()
--------AutoResolveIntegrationRuntime.json(390B)
--------IntegrationRuntime-AzureVNET.json(148B)
----notebook()
--------Yelp - Notebook.json(7KB)
--------D5_MusicService_SynapseConnector_Notebook.json(8KB)
--------D2_MusicService_Delta_Notebook.json(10KB)
--------D4_MusicService_PySpark_Notebook.json(8KB)
--------D7_MusicService_CosmosLink.json(4KB)
--------Cosmos Notebook.json(4KB)
--------PRE_DEMOS_MusicService_Cleanup.json(2KB)
--------D1_MusicService_Notebook.json(136KB)
--------D6_MusicService_Parameterized_NoteBook.json(2KB)
--------Demo Notebook.json(2KB)
--------D3_MusicService_Cleaning.json(53KB)
----dataset()
--------SQLOD_demos_UserDetailsWrangled.json(720B)
--------DedicatedSQLPool_SQLDW.json(562B)
--------userartistplaysIssues.json(532B)
--------SQLOD_demos_UserSignupTimestamps.json(563B)
--------SQLOD_ArtistList.json(393B)
--------SQLOD_demos_UserDetails.json(647B)
--------Sql2012_MusicService_UserSignupLog.json(692B)
--------UserDetailsWrangled_Parquet.json(474B)
--------sql2012_Parameterized.json(479B)
--------useratistplaysProcessedParquet.json(499B)
--------usersignuplog_watermark_file.json(667B)
--------UserDetailsCSV.json(826B)
--------UserDetailsParquet.json(772B)
--------UserDetailsWithTimeParquet.json(477B)
--------usersignuplog_watermark.json(525B)
--------userartistplaysFile.json(840B)
--------artistTicketSales.json(706B)
--------AugmentedArtistInfo.json(623B)
--------useratistplaysFolder.json(622B)
--------UserSignupLog_Parquet.json(643B)
--------ArtistLicensingRatesTable.json(568B)
----dataflow()
--------Dataflow_ArtistInfoCompilation.json(2KB)
--------Dataflow_ArtistInfoCompilation_Drift.json(2KB)
--------UserDetails_TimeConversion_WDF_Pipeline.json(3KB)
--------UserDetailsWrangled_WDF.json(2KB)
--------UserArtistPlays.json(2KB)
----sqlscript()
--------PRE_DEMOS_SQLOD_DropTables.json(881B)
--------BringYourData.json(2KB)
--------D4_SQLDW_IncrementsSetup.json(1KB)
--------D4_SQLDW_IncrementsSchema.json(3KB)
--------D2_SQLDW_MusicService_Workload_Management.json(7KB)
--------D2_SQLOD_SparkIntegration.json(992B)
--------D1_SQLOD_MusicService.json(13KB)
--------Cosmos Link View.json(792B)
--------D3_SQLDW_MusicService_Cleanup.json(6KB)
--------SQL-On-Demand-ExternalTable.json(2KB)
--------D3_SQLOD_ETL_Tables.json(6KB)
--------D1_SQLDW_MusicService.json(25KB)
--------D3_SQLOD_CosmosLink.json(1KB)
----README.md(3KB)
----credential()
--------WorkspaceSystemIdentity.json(87B)
----linkedService()
--------CosmosDb_MusicService.json(661B)
--------warnerdatalake_key.json(569B)
--------Power BI Demo Workspace.json(304B)
--------AzureSqlDatabase_Perfdemos.json(704B)
--------SQLOD.json(455B)
--------Secrets_Azure_Key_Vault.json(270B)
--------SQLOD_UserPass_Auth.json(693B)
--------Sql2012_MusicService.json(630B)
--------warnersynapse-WorkspaceDefaultStorage.json(374B)
--------warnersynapse-WorkspaceDefaultSqlServer.json(506B)