回答:这个太范化了吧。大数据架构选择的方案就有很多,海量数据的即席查询本省就是业内目前的痛点,暂时没有太好的解决方案,kylin等框架也只是一个折中方案,如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案,分钟级别可以返回。
回答:现在有幸参与传统银行数字化转型,负责技术架构部分的转型设计。高性能的数据架构(High Performance Data Architecture),正是我们架构转型的重点。随着科技的蓬勃发展、社交网络的广泛使用、线上消费的普及、数据挖掘的技术提升等大趋势,全球银行业正迎来一场声势浩大的数字化创新浪潮。数字化为消费者的生活及行为模式带来翻天覆地的变化,也孵化出一批新型的金融科技(Fintech)竞...
回答:以mysql为列:1:支撑高并发系统,一定会涉及事务,所以数据库引擎必选innodb,innodb支持事务,事务级别根据业务而定,如果业务数据一致性要求很高,事务就开启序列化级别,这样就完全隔离事务,但是会导致锁资源竞争加剧。mysql的性能有一定的降低。2:读写分离,数据库分成主库和从库,主库负责写数据,丛库负责读数据。注意主从数据库数据一致性问题。3:冷热数据分离,美团,饿了么部分设计采用冷热...
回答:大数据的入门学习有多条学习路线,可以根据自身的知识结构进行选择,并不是所有的学习路线都是从学Linux操作系统开始,然后是Java、Hadoop、Spark等,学习大数据也可以从数据分析开始。对于职场人来说,学习数据分析的工具如何使用,远比学习Hadoop更加实际。大数据的核心是数据价值化,只要围绕这个核心所做的一系列数据价值化的操作都是大数据的分内之事,所以大数据学习的出发点比学习内容本身更重要...
...不知道,你把你们公司的产品定位改成这个别人都不知道怎么办?我们后来仔细想,还是觉得 HTAP 这个方向是一个更加适合我们的方向,所以还是选了 HTAP 这个词。现在很欣喜的看到现在各种友商、后来的一些数据库,都开始争...
...不知道,你把你们公司的产品定位改成这个别人都不知道怎么办?我们后来仔细想,还是觉得 HTAP 这个方向是一个更加适合我们的方向,所以还是选了 HTAP 这个词。现在很欣喜的看到现在各种友商、后来的一些数据库,都开始争...
...是这单方面领域里面最深入的人,但是你需要知道它们是怎么做的(不仅仅是皮毛,要深入原理),并且要知道它们组合起来是个什么样的东西。技术面也足够宽了之后,是不是就会成为完美架构师呢?一个完美的架构师需要具...
...你的微服务系统呢?他们是如何将你的系统解耦的?又是怎么解耦的呢?请听我慢慢道来: 第一步,解耦现有模块 将现有耦合在一起的模块进行重新的设计,设计成可以独立部署的多个模块,使用微服务框架很容易做到,成熟...
...是这单方面领域里面最深入的人,但是你需要知道它们是怎么做的(不仅仅是皮毛,要深入原理),并且要知道它们组合起来是个什么样的东西。技术面也足够宽了之后,是不是就会成为完美架构师呢?一个完美的架构师需要具...
...架构体系,掌握了性能调优的方法,仅仅做一个ppt架构师怎么行? 用户中心,单点登录怎么玩 商品,店铺怎么玩 订单,支付怎么玩 通知,推送怎么玩 数据分析怎么玩 唯有通过实战,才能站上华山之巅。 画外音:小伙伴...
...灾。但是当机房、网络等大范围故障真正发生时,我们要怎么做才能保证业务持续可用?拿前一段时间腾讯深圳某个机房光纤被挖断的案例来讲,业务碰到的问题: 机房爆炸了,会影响多少用户? 是否需要调度? 怎么调度? ...
...昨天碰到一个问题,就是一个 App 有100多个人共同开发,怎么设计架构?才能让100个人协同开发不出问题? A-困惑:一般用 block。 Icocos:之前有人讨论过,说用 MVP 比较好。 小龙:如果东西多了很重的,delegate 传的时候只是一个...
ChatGPT和Sora等AI大模型应用,将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的,但推理(inference/serving)用4090不能说合适,...
图示为GPU性能排行榜,我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...