回答:这个太范化了吧。大数据架构选择的方案就有很多，海量数据的即席查询本省就是业内目前的痛点，暂时没有太好的解决方案，kylin等框架也只是一个折中方案，如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案，分钟级别可以返回。
Paul_King
|
677人阅读
回答:分布式架构是软件系统分布式系统存储是基于存储、服务器、数据库技术、容灾热备等技术的系统集成数字经济时代，各个企业、个人都在生产数据，利用数据，数据也在社会中不断流动、循环，为这个时代创造着价值与机遇。尽管数据如此珍贵，但我们仍然会听到在集中式存储场景中，由于网络攻击、火灾、地震而造成数据故障、丢失等问题。为了防止数据出现故障、数据丢失、服务器出错、数据无法恢复等情况，越来越多企业开始把集中存储转变...
cocopeak
|
582人阅读
回答:ucloud云 ucloud云飞天 盘古团队 实打实的自研，已经专注这个领域多年。目前盘古支持了ucloud云的众多业务，包括但不限于 块存储（ECS云盘），对象存储（OSS）,表格服务（OTS）,大规模的分布式文件系统(ODPS业务)，分析型数据库（ADS）等。部署规模，数据量，付费用户数，营收，增长率等指标在国内都难有其匹。小米云平台小米云平台既有做开源hbase的(有3个committor)...
周国辉
|
1082人阅读
回答:分布式处理，分布式系统(其实也包含分布式存储系统)一直把RAS、MTBF、MTTR等作为可靠性衡量指标，但是专业指标是CAP指标，可用性作为其中重要因素之一。CAP理论阐述了在分布式系统的设计中，没有一种设计可以同时满足一致性，可用性和分区容错性。所以一个好的分布式系统，必须在架构上充分考虑上述指标。分布式系统设计中，BASE理论作为CAP理论的折中或延伸，在分布式系统中被大量使用。分布式系统的可...
lolomaco
|
1233人阅读
回答:首先建议题主描述清楚应用场景，否则别人做的方案可能都不符合需求。就Hadoop和OpenStack的纠结而言，支撑数据分析用前者，做资源管理用后者。=================补充=============题主的需求，实质是搭建一个IoT实时大数据平台，而不是一般意义的私有云。IoTa大数据平台除了数据采集和结果反馈，其余部分和一般的大数据平台相差不多。OpenStack长于管理VM资源管理...
MonoLog
|
1055人阅读
...计、人工智能、机器学习、工程效率、未来的编程语言、分布式架构等领域甄选前沿的有典型代表的技术创新及研发实践的架构案例，分享他们在本年度最值得的总结、盘点的实践启示，打造一个分享及讨论平台，改变未来一年...
...计、人工智能、机器学习、工程效率、未来的编程语言、分布式架构等领域甄选前沿的有典型代表的技术创新及研发实践的架构案例，分享他们在本年度最值得的总结、盘点的实践启示，打造一个分享及讨论平台，改变未来一年...
...青云云服务目前有两个主要的应用，一个是SDS，另一个是分布式存储2.0。SDS要解决非虚拟化的硬盘，而分布式存储2.0要解决副本的问题。甘泉先生强调青云的产品以解决性能问题和减少层次结构为主要思路，设计与技术都要为人...
...青云云服务目前有两个主要的应用，一个是SDS，另一个是分布式存储2.0。SDS要解决非虚拟化的硬盘，而分布式存储2.0要解决副本的问题。甘泉先生强调青云的产品以解决性能问题和减少层次结构为主要思路，设计与技术都要为人...
...，边缘计算并不是一夜间冒出来的颠覆性技术，作为一种分布式计算架构，过去多年来的IT基础设施演进是中心化的过程，所有的数据存储、处理和网络交互，都需要去位于中心位置的数据中心。正所谓合久必分，分久必合...
...场；5、有PMP/技术背景优先。 6、高级/资深算法工程师 （分布式/流式处理/java大数据方向，上海） 1、负责分布式算法和流式算法的研发和优化；2、负责Hadoop生态和Spark生态各个平台的部署，升级和维护；3、与各个业务部门一起...
...2016年10月21日，甲骨文旗下的DYN（DNS业务）遭遇了一系列分布式拒绝服务（DDoS）攻击，致使Airbnb、Twitter、 Amazon、Ancestry、 Netflix及PayPal等公司的业务均受到不同程度的影响。二即便云计算安全技术及防御设施不断进步，云计算故...
...主要讲了几部分内容，其中包含了Cloud Native的本质含义、分布式服务化架构的关键技术、PaaS平台的核心等。对于分布式系统所面临的一些问题，陈皓将传统单体架构与分布式服务化架构做了精准的对比。从中得知新功能开发相...
...主要讲了几部分内容，其中包含了Cloud Native的本质含义、分布式服务化架构的关键技术、PaaS平台的核心等。对于分布式系统所面临的一些问题，陈皓将传统单体架构与分布式服务化架构做了精准的对比。从中得知新功能开发相...
...电能供应成为可能 演讲人：ELONCITY 创始人兼 CEO 厉建宇 分布式清洁能源区块链项目Eloncity 创始人兼 CEO 厉建宇 Andy Li在论坛发表了主题为「能源变革：如何让分散式可再生电能供应成为可能 」的演讲。他还向公众展示了 Eloncity ...
...技术本身的同仁，共同关注云计算前沿技术的最新成果和分布式开发、运维的最佳实践。在过去的八年中， ECUG 社区每年都会组织一场全国性的 ECUG Con 大会，期间众多技术大神纷纷参与，他们或许在大众技术会议已经鲜少露面...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
张汉庆
