您的当前位置:首页 > 热点 > 数据湖不仅仅是大数据 正文
时间:2026-11-15 来源:网络整理 编辑:热点
谷歌搜索留痕外推技术【tg:seogoogle987】
数据湖不仅用于“大数据”,而且组织比以往拥有更多的机会将它们纳入数据堆栈。
行业专家最近写了一篇文章,揭露了关于数据湖架构、数据湖定义和数据湖分析的常见误区。其文章名为“什么是数据湖?需要来避免最大的迷思。”在那篇文数据章中,构建了有关数据湖及其在企业数据策略中的适用范围的当前对话。对于那些希望从数据湖中获取价值的人来说,由于顾问和供应商的建议相互矛盾,这个主题历来是令人困惑和不透明的。
一个可能特别令人困惑的领域是人们认为数湖不据湖仅用于“大数据”。如果花时间阅读湖泊上的资料,就会认为只有一种类型。人们将数据湖描述为庞大的、无所不包的实体,旨在容纳所有知识。好消息是,湖泊不仅仅用于“大数据”,而且比以往任何时候都有更多的机会将其纳入数据堆栈。
不同类仅仅型的数据湖
就像大自然一样,湖泊具有各种不同的形状和大小。每个都有自然状态,通常反映数据生态系统,就像自然界中反映鱼类,鸟类或其他生物的生态系统一样。
不幸的是,“大数据”角度给人们的印象是湖泊仅用于“里海”规模的数据工作。这是大无疑使使用数据湖变得令人生畏。因此,以如此大的角度来描述事物使得那些可以从中受益的人们无法接近湖泊的概念。这里有一些数据湖的例子。
伟大的“里海”:就像里海是一个大水域一样,这种类型的湖泊也是一个庞大而广泛的,种类繁多的数据数据集。广泛收集的各种数据反映了整个企业的信息。这就是大多数数据湖工作的框架。 暂时的“湖泊”:就像沙漠中可以有小的临时湖泊一样,短暂的短暂存在。它们可以用于项目、试点、PoC或点解决方案,并且它们的打开与关闭速度一样快。 领数据域“项目”:这些湖泊与临时数据湖泊一样,通常侧重于特定的知识领域。但是,与临时湖不同,该湖将随着时间的推移而持续存在。这些也可能是“浅”的,这意味着它们可能专注于狭窄的数据域,例如媒体、社交、Web分析、电子邮件或类似的湖不数据源。
最近,与客户合作创建了“域”型湖泊。该湖会将Adobe事件数据保存到AWS,以支持企业Oracle Cloud环境。为什么选择AWS to Oracle?对于客户的OracleBI环境,这是一种高效且具有成本效益仅仅的数据消耗模式,尤其是考虑到使用AWS Lake和Athena作为湖内容的按需查询服务的敏捷性和经济性。
通过设计,所有类型的湖泊都应采用抽象技术,以最大程度地降低风险并为您提供更大的灵活性。而且,它们的结构应易于使用,是大而与大小无关。这确保了数据科学家,业务用户或分析师所使用的湖泊都具有易于数据使用的结构化环境。
数据湖入门
成为成功的早期采用者意味着采取业务价值方法而不是技术方法。当组织考虑如何入门时,这里有一些提示:
重点:寻找机会,在其数据中部署“临时”或“项目”解决方案。这将确保您降低风险并克服技术和组织挑战,以便您的团队可以对湖泊建立信心。 热情:确保内部有一位“传道者”或“倡导者”,他们对组织的解决方案和采用充满热情。 简单:拥护简单性和敏捷性,使人员、流数据程和技术选择贯穿于此。缺乏复杂性不应被看作是缺陷,而是周到的设计的副产品。 狭义:通过限制湖泊来理解数据(例如从ERP、CRM、销售点、市场营销或广告数据中导出)来使范围狭窄且定义明确。此阶段的数据素养将帮助您了解有关数湖不据结构、提取、治理,质量和测试的工作流。 实验:将数据湖与现代BI和Tableau、Power BI、Amazon Quicksight或Looker等分析工具配对。这将使非技术用户有机会通过湖泊进行实验和探索数据访问。这仅仅使组织可以与其他用户群互动,以评估性能瓶颈,发现改进机会,与任何现有EDW系统(或其他数据系统)的可能链接以及其他候选数据源。
关注业务价值而不是技术,可以为组织提供一个在整体数据和分析策略的框架内进行工作的机会。这样是大可以提高速度,并帮助组织实现数据湖目标并衡量业务绩效的进度。这也导致了完善的共享术语、最佳实践以及对建立更好平台的投资。
数据分析一问:指标波动有多大,才算是大!2026-10-20
标签: 网易云音乐 账号封禁 客服回应 热搜事件2026-09-23
标签: 蒙纳字库 Monotype Fonts 字体平台 中文设计2026-11-02
标签: 芯潮流 光电DSP芯片 高速SerDes 数据中心互连2026-08-20
云计算核心技术Docker教程:Docker Hub设置Slack集成2026-07-24
数据挖掘与数据分析有什么区别2026-10-07
云计算走到十字路口,自动化将成为行业的新常态2026-08-12
标签: 滴滴自动驾驶 广汽埃安 R2 Robotaxi2026-06-04
标签: 董明珠 格力电器 AI替代焦虑 个税起征点2026-08-22
市场接近300亿!2021年植保无人机发展前瞻2026-07-24
标签: 曹操出行 Robotaxi 吉利控股 绿色智能通行岛2026-09-07
全国高校首个纪检监察大模型“清鉴”正式发布2026-11-05
印度创新试点:AI 聊天机器人助力电子商务购物新方式2026-10-24
我开空调了是什么梗2026-10-16
标签: 抖音电商 消费电子 商品卡免佣 耐用消费品2026-08-29
调整云计算资源大小时要避免的10个错误2026-06-15
人工智能和机器人技术的使用案例2026-10-10
标签: 胡润富豪榜 马斯克 张一鸣 字节跳动2026-06-14