回答:这个太范化了吧。大数据架构选择的方案就有很多，海量数据的即席查询本省就是业内目前的痛点，暂时没有太好的解决方案，kylin等框架也只是一个折中方案，如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案，分钟级别可以返回。
Paul_King
|
679人阅读
回答:分布式架构是软件系统分布式系统存储是基于存储、服务器、数据库技术、容灾热备等技术的系统集成数字经济时代，各个企业、个人都在生产数据，利用数据，数据也在社会中不断流动、循环，为这个时代创造着价值与机遇。尽管数据如此珍贵，但我们仍然会听到在集中式存储场景中，由于网络攻击、火灾、地震而造成数据故障、丢失等问题。为了防止数据出现故障、数据丢失、服务器出错、数据无法恢复等情况，越来越多企业开始把集中存储转变...
cocopeak
|
582人阅读
回答:分布式处理，分布式系统(其实也包含分布式存储系统)一直把RAS、MTBF、MTTR等作为可靠性衡量指标，但是专业指标是CAP指标，可用性作为其中重要因素之一。CAP理论阐述了在分布式系统的设计中，没有一种设计可以同时满足一致性，可用性和分区容错性。所以一个好的分布式系统，必须在架构上充分考虑上述指标。分布式系统设计中，BASE理论作为CAP理论的折中或延伸，在分布式系统中被大量使用。分布式系统的可...
lolomaco
|
1234人阅读
回答:从计算机资源的发展来看，个人认为可以分为三个阶段：最为早期的共享式，后来的单体式，到现在的分布式。这个发展的原因，都是基于计算资源的需求。早期一台服务unix服务器，连接多个终端，每个终端单独获取计算资源，其实跟现在的云计算感觉很类似，计算资源都放在服务器端，终端比较简单。这是早期对计算资源的需求和提供的计算能力之间的供需关系决定的。后来，随着计算机的发展，对计算资源的需求的不断增加，单体式的计算...
lavnFan
|
1443人阅读
回答:首先解释一下什么是本地储存，什么是分布式存储，分布式网络存储是通过网络。采用可扩展的网络系统结构，建立多台存储服务器分担和分散存储负荷，（例如像微信淘宝等。在多个地区建立服务器集群）利用位置服务器位置地区存储信息，它的特点是提高了系统的可靠性、可用性和存取效率快速的吞吐量，还易于扩展，通过不断的增加来调节。也可将所有文件存储到不同的办公室或者企业集团所有的电脑内，这种叫做小的分布式存储。通俗的解释...
Scliang
|
820人阅读
...时间内是不一致的，但最终达到一致状态。 分布式事务解决方案 有了上面的理论基础后，这里介绍开始介绍几种常见的分布式事务的解决方案。 说到这里顺便顺便给大家推荐一个Java方面的中高级程度的交流学习群：650385180，...
...分，损己三分，因此在互联网项目中并不是很流行这种解决方案。 为了这个弥补这种方案带来性能低的问题，大佬们又想出了很多种方案来解决，但这无一例外都需要通过在应用层做手脚，即入侵业务的方式，比如很出名的 T...
...也有一个很严重的缺点：没有一个成熟的高可用和分布式解决方案。 所以，大多数互联网公司的选择都是混合使用，当 MySQL 能解决问题时就用 MySQL，而一些对性能、安全性、可靠性要求更高的业务则使用商用数据库软件。 对于...
...（增加了复杂度）三大问题时间回拨时间回拨问题的几种解决方案：直接抛异常（体验不太好）采用历史时间（需要维护历史时间，重启时异常？）多时间线（如果多次回拨仍然不能继续放号）机器ID的分配和回收机器ID的分配...
...不断地增大，其通过MySQL及磁盘基本无法满足需求，只有分布式化。 这个时候MySQL变成了HBase,检索变成了Solr/ES，再ECS提供的计算力变成了Spark。但这也会面临存储量大且存储成本高等问题。 另外一个趋势就是非结构化的数据越...
...时间的数据不一致。 小结一下，本地缓存的数据一致性解决方案，能彻底解决的是借助一致性hash的方案，但是成本比较高。所以，如非必要还是慎重决定要不要做本地缓存。 总结 好了，我们一起总结一下。 这次呢，Z哥先花...
...了满足所有虚拟机访问带来的带宽要求，使用传统存储的解决方案需要购置多套 SAN 或者 NAS 存储设备并分别部署，显然价格较贵。 云存储可构建统一的资源池，并能够动态扩展资源，并有效提升存储资源的管理和使用效率。...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
snifes
