首页 文章
  • 0 votes
     answers
     views

    AWS S3数据湖交叉帐户使用情况

    我们有以下场景:AWS账户A(应用程序)将数据从应用程序写入账户B(数据湖)拥有的S3存储桶 . 帐户C(报告)中的分析师希望获取数据并在其上构建报告和仪表板 . 帐户A可以使用 --acl bucket-owner-full-control 将数据写入数据湖,以允许帐户B访问 . 但是帐户C仍然无法查看和处理数据 . 一个(在我们看来很糟糕)解决方案是将数据复制到与帐户B相同的位置(覆盖),有效...
  • 2 votes
     answers
     views

    AWS Data Lake Ingest

    您是否需要使用胶水摄取excel和其他专有格式,或允许胶水在您的数据湖中使用这些数据格式来爬行您的s3存储桶? 我已经阅读了“Data Lake Foundation on the AWS Cloud”文件,我一直在试图将数据输入湖中 . 我有一个数据提供程序,其系统中存储了大量数据作为excel和访问文件 . 根据流程流程,他们会将数据上传到提交s3存储桶中,这会引发一系列操作,但数据并没有成为...
  • 0 votes
     answers
     views

    如何在Google Cloud Platform中创建通用客户ID?

    I had a few quick questions regarding the creation of a Universal Customer ID (UCID) within Google Cloud Platform (GCP). 为了简单起见,我将首先提供一些背景,背景和努力 . 关于UCID的背景: 对于那些不熟悉这个术语的人,UCID允许您通过各种交互(即应用内活动,社交媒体,客户...
  • 0 votes
     answers
     views

    Data Lake Store的备份

    我正在为Data Lake Store(DLS)制定备份策略 . 我的计划是创建两个DLS帐户并在它们之间复制数据 . 我已经评估了几种实现此目的的方法,但它们都不满足保留POSIX ACL的要求(DLS用语中的权限) . PowerShell cmdlet要求将数据从主DLS下载到VM并重新上载到辅助DLS . AdlCopy工具仅适用于Windows 10,不保留权限,也不支持跨区域复制数...

热门问题