回答:这个太范化了吧。大数据架构选择的方案就有很多，海量数据的即席查询本省就是业内目前的痛点，暂时没有太好的解决方案，kylin等框架也只是一个折中方案，如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案，分钟级别可以返回。
Paul_King
|
676人阅读
回答:分布式架构是软件系统分布式系统存储是基于存储、服务器、数据库技术、容灾热备等技术的系统集成数字经济时代，各个企业、个人都在生产数据，利用数据，数据也在社会中不断流动、循环，为这个时代创造着价值与机遇。尽管数据如此珍贵，但我们仍然会听到在集中式存储场景中，由于网络攻击、火灾、地震而造成数据故障、丢失等问题。为了防止数据出现故障、数据丢失、服务器出错、数据无法恢复等情况，越来越多企业开始把集中存储转变...
cocopeak
|
580人阅读
回答:ucloud云 ucloud云飞天 盘古团队 实打实的自研，已经专注这个领域多年。目前盘古支持了ucloud云的众多业务，包括但不限于 块存储（ECS云盘），对象存储（OSS）,表格服务（OTS）,大规模的分布式文件系统(ODPS业务)，分析型数据库（ADS）等。部署规模，数据量，付费用户数，营收，增长率等指标在国内都难有其匹。小米云平台小米云平台既有做开源hbase的(有3个committor)...
周国辉
|
1079人阅读
回答:分布式处理，分布式系统(其实也包含分布式存储系统)一直把RAS、MTBF、MTTR等作为可靠性衡量指标，但是专业指标是CAP指标，可用性作为其中重要因素之一。CAP理论阐述了在分布式系统的设计中，没有一种设计可以同时满足一致性，可用性和分区容错性。所以一个好的分布式系统，必须在架构上充分考虑上述指标。分布式系统设计中，BASE理论作为CAP理论的折中或延伸，在分布式系统中被大量使用。分布式系统的可...
lolomaco
|
1232人阅读
回答:首先建议题主描述清楚应用场景，否则别人做的方案可能都不符合需求。就Hadoop和OpenStack的纠结而言，支撑数据分析用前者，做资源管理用后者。=================补充=============题主的需求，实质是搭建一个IoT实时大数据平台，而不是一般意义的私有云。IoTa大数据平台除了数据采集和结果反馈，其余部分和一般的大数据平台相差不多。OpenStack长于管理VM资源管理...
MonoLog
|
1054人阅读
回答:ucloud一直在强调云端、大数据的重要性，同样它也是这么做的。1月9ucloud云推出的ESSD云盘无疑是给上一代的云盘加上了一个强劲的发动机，不论是底层微秒级延迟还是百亿级IOPS，都大大增加了整个系统的性能、安全性，同时降低了成本。ucloud目前的企业级高性能产品线，速度较上一代提升50%，这一新型存储推进云端大数据时代大步向前，而且在此之前国家天文台就已经跟ucloud云进行合作了，将所...
harryhappy
|
1047人阅读
原文地址：http://digi.163.com/17/1114/0... 分布式数据库在今年突然成为热点技术。这背后究竟有哪些环境变化导致了这种技术演进，分布式数据库的优势在哪儿？这种分布式数据库在国内现状又是如何？ 数据库演进方向 正如上世...
数据库自增ID机制原理介绍 在分布式里面，数据库的自增ID机制的主要原理是：数据库自增ID和mysql数据库的replace_into()函数实现的。这里的replace数据库自增ID和mysql数据库的replace_into()函数实现的。这里的replace into跟insert功能...
分布式是指将一个业务拆分不同的子业务，分布在不同的机器上执行，集群是指多台服务器集中在一起，实现同一业务，可以视为一台计算机，一个云计算平台，就是通过一套软件系统把分布式部署的资源集中调度使用。要...
前言：本书是对分布式系统架构涉及到的相关技术的一本科普书籍。由于很难作为开发参考，只能但求了解。所以通篇浅读，对分布式系统进行大致的了解。因为写的非常好，感觉非常有意思，自己也做不出总结。所谓的读...
前言 分布式锁，是控制分布式系统之间同步访问共享资源的一种方式 在分布式系统中，常常需要协调他们的动作。如果不同的系统或是同一个系统的不同主机之间共享了一个或一组资源，那么访问这些资源的时候，往往需...
前言 分布式锁，是控制分布式系统之间同步访问共享资源的一种方式 在分布式系统中，常常需要协调他们的动作。如果不同的系统或是同一个系统的不同主机之间共享了一个或一组资源，那么访问这些资源的时候，往往需...
...兼CTO王涛向CSDN的记者分享了他的观点。 微服务架构催生分布式数据库王涛认为，谈论数据库一定脱离不了应用。从应用程序开发来看，现在很多企业内部的应用开发都在从传统中间件加数据库的烟囱式开发，向微服务架构...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
