展开讨论

snakeyjakeHN来源作者
创业与收入经验摘录 · 机器翻译

>如今的大数据不是：我没有足够的存储或计算能力

>如今的大数据不是：我没有足够的存储或计算能力。这是属于我的。每年我都会去野外两次，每次两周进行数据采集。在野外，我们使用两架飞机进行四频段和双极化的合成孔径雷达采集。这意味着每架飞机上有一个雷达系统，包含八个20TiB的16盘RAID-0 SSD存储设备。我们通常不会填满RAID，因此每天生成约176TiB的数据，两周内我们进行7次飞行，每次任务产生1.2PiB的数据，每年总共7.2PiB的数据。我们只能每隔一天飞行一次，因为每次飞行之间需要一天时间通过光纤将数据卸载到存储服务器上，这些服务器通常被随意地堆放在机库角落靠近停机坪的地方。然后将数据复制到第二台服务器以确保安全，任务结束时，所有数据都会被运回我们的总部进行存储和处理。这些数据是有价值的，但并不是“数十亿”级别的价值。…

源讨论大数据已经死了（2023）原帖 457 条评论 · 导入时统计
3

这条内容在回应什么？

父级讨论 · 节选

ZU
zurferHN

这并不完全正确。 最初大数据是通过三个维度来定义的： - 数据量（大部分是作者所谈论的内容）[已解决] - 速度，数据处理的速度等 [已解决，但成本高] - 多样性 [未解决] 如今的大数据不是：我没有足够的存储或计算能力。 而是：我没有足够的认知能力来整合并理解它。

完整原文

社区评论 0

还没有社区评论，来聊聊你的看法。

原讨论中的回复 3

仅展示本次导入中包含的直接回复。中文为机器翻译，可查看英文原文。

SR
srhtftwHN

https://docs.daos.io/v2.4 对你的用例是否有意义（假设价格合理且可获得）？

完整原文
ED
edogriderHN

为什么不用 Minio 呢？是的，网络仍然会是瓶颈，但你可以使用他觉得最好的方式，这非常简单。

完整原文
YA
yapretHN

> 我们只能每隔一天飞行一次，因为两次飞行之间需要一天时间通过光纤将数据卸载到存储服务器 你为什么不能购买第二套 SSD 硬盘并在每天结束时将其更换到飞机上呢？ 这样飞机就可以每天飞行，而前一天的数据则在地面进行卸载，将两周的时间压缩成一周。如果更换整个机箱而不是每个硬盘，更换过程甚至可能非常容易。 也许我漏掉了什么！

完整原文
在 Hacker News 阅读

尊重不同观点，分享具体经验。

登录后即可发帖、评论、转发和引用。