回答:这个太范化了吧。大数据架构选择的方案就有很多，海量数据的即席查询本省就是业内目前的痛点，暂时没有太好的解决方案，kylin等框架也只是一个折中方案，如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案，分钟级别可以返回。
Paul_King
|
674人阅读
回答:现在有幸参与传统银行数字化转型，负责技术架构部分的转型设计。高性能的数据架构（High Performance Data Architecture），正是我们架构转型的重点。随着科技的蓬勃发展、社交网络的广泛使用、线上消费的普及、数据挖掘的技术提升等大趋势，全球银行业正迎来一场声势浩大的数字化创新浪潮。数字化为消费者的生活及行为模式带来翻天覆地的变化，也孵化出一批新型的金融科技(Fintech)竞...
Lowky
|
523人阅读
回答:以mysql为列：1：支撑高并发系统，一定会涉及事务，所以数据库引擎必选innodb，innodb支持事务，事务级别根据业务而定，如果业务数据一致性要求很高，事务就开启序列化级别，这样就完全隔离事务，但是会导致锁资源竞争加剧。mysql的性能有一定的降低。2：读写分离，数据库分成主库和从库，主库负责写数据，丛库负责读数据。注意主从数据库数据一致性问题。3：冷热数据分离，美团，饿了么部分设计采用冷热...
Vultr
|
1244人阅读
回答:目前阶段大数据技术及体系已经逐渐趋于成熟，不再是以概念贯穿的模式，大数据越来越多的被使用，伴随互联网化的发展更多的企业信息化已经由IT时代转变为DT时代，以数据为核心，用数据进行决策，基于数据驱动企业的创新与发展，相信在将来大数据也会有更广泛的应用空间，对于大数据的理解主要分为以下几个层面。1.数据来源：对于大数据时代而言更多强调基于业务数据的沉淀，在一定规模的数据上进行进一步的分析、处理、转换，...
arashicage
|
1224人阅读
回答:在大数据领域大概有四个大的工作方向，除了大数据平台应用及开发、大数据分析与应用和大数据平台集成与运维之外，还有大数据平台架构与研发，除了以上四个大的工作方向之外，还有一个工作方向是大数据技术推广和培训，这部分工作目前也有不少人在从事。大数据平台架构与研发主要的工作内容是研发底层的大数据平台，这部分工作的难度较高，从事这部分工作的研发级岗位也并不多。现在不少技术研发团队都以Hadoop、Spark平...
zhangxiangliang
|
3462人阅读
回答:近几年，大数据的概念逐渐深入人心，大数据的趋势越来越火爆。但是，大数据到底是个啥？怎么样才能玩好大数据呢？大数据的基本含义就是海量数据，麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。数字经济的要素之一就是大数据资源，现在大家聊得最多的大数据是基于已经存在的...
khlbat
|
800人阅读
数据湖（Data Lake)，湖仓一体（Data Lakehouse）俨然已经成为了大数据领域最为火热的流行词，在接受这些流行词洗礼的时候，身为技术人员我们往往会发出这样的疑问，这是一种新的技术吗，还是仅仅只是概念上的翻新（新瓶装旧...
...面实现弹性能力的云平台、第一个采用容器架构来支撑大数据能力的平台、以及去年我们提出的在云中交付机器学习人工智能这样的业务能力。截至2017年底，品高云的产品激活量已达到了3万台，其中最长的客户稳定使用时间已...
...各个微服务可被独立部署，服务间是松耦合的关系，以及数据和治理的去中心化管理。微服务能够帮助企业应对业务复杂、频繁更新以及团队规模庞大带来的挑战，实现IT对业务创新的驱动。 1月12日，网易云主办的微服务实践...
当前，大数据的价值已无需赘述，作为衡量一个公司核心能力的最底层标准，数据的建设也面临着诸多难题。为了帮助企业用户解决大数据分析门槛高、效率低的问题，UCloud USQL数据湖分析应运而生，可轻松完成面向海量数据的...
...欠东风。现在公共云混战，我想说，无灾备不上云，保护数据，未雨绸缪，带了雨伞，还需雨衣。未雨绸缪，到底是带雨伞还是雨衣呢？时代在变，人的追求也在变。随着公共云对企业用户的影响加深，一大批上云企业越来越重...
...631.png style=max-width:650px/>1、数据结构：数据仓库只能存储经过处理和提炼的数据，而数据湖存储尚未出于某种目的处理的原始数据。因此，数据湖需要比数据仓库大得多的存储容量，且数据灵活、分...
评论
收藏
从2012年开始，几乎人人（至少是互联网界）言必称大数据，似乎不和大数据沾点边都不好意思和别人聊天。从2016年开始，大数据系统逐步开始在企业中进入部署阶段，大数据的炒作逐渐散去，随之而来的是应用的蓬勃发展期...
从2012年开始，几乎人人（至少是互联网界）言必称大数据，似乎不和大数据沾点边都不好意思和别人聊天。从2016年开始，大数据系统逐步开始在企业中进入部署阶段，大数据的炒作逐渐散去，随之而来的是应用的蓬勃发展期...
...最近吴宁川一篇《厉害了，蚂蚁金服！创造了中国自己的数据库OceanBase》报道了OceanBase诞生的前因后果。内容非常详实，值得分享。同时自己也分享几点杂想： 第一，杀熟不仅仅是大数据时代的产物 之前从某网平台爆出的订购...
...云计算的一小步，但可能是存储行业的一大步。 关于数据存储，学究们可以追溯到远古时期最早的结绳计数，或是以龟甲上刻下的第一个字为源头……时间和方式可能并不重要，重要的是数据存储自此而始。 对于现代人来说...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
