回答:之前在BAT里参与过一个公司级应用（非市场级，投入的人力也不会那么大），上线2年后，总是被用户投诉，原因是这个应用使用MySql数据库来做持久层，但是2年了，有一张非常重要的存储历史任务的表实在是太大了，导致通过页面想要查询历史数据的速度变得非常非常慢，所以用户很是不满意。分析下来，这不是用Redis能解决的缓存问题，而是历史数据的查询响应速度问题。我们最开始是希望能够通过增加索引的方式解决，但是...
mengera88
|
707人阅读
回答:不知道开发的同学有没有遇到过类似这样的需求：相同类型的数据在多个系统中，如果要得到全部的信息，就要连续调多个系统的接口；业务复杂，一个需求需要关联几张表甚至几十张表才能得到想要的结果；系统做了分库分表，但是需要统计所有的数据。那么此类需求要如何满足呢？我们选择了通过 ETL 提前进行数据整合的方案。什么是 ETL说到ETL，很多开发伙伴可能会有些陌生，更多的时候 ETL 是用在大数据、数据分析的相...
MarvinZhang
|
2151人阅读
回答:大家在刚开始搭建项目的时候可能考虑的不够全面，随着产品的推广 、业务场景的复杂和使用用户越来越多 数据会呈现快速增长。当数据达到千万级的时候 就会发现 查询速度越来越慢 用户体验也就越来越差，那怎样提升千万级数据查询效率呢？小萌简单整理了一下，希望对大家有所帮助！优化数据库设计：数据字段类型使用varchar/nvarchar 替换 char/nchar，变长字段存储空间小，节省存储空间。在查询的...
phodal
|
894人阅读
回答:使用合理的分页方式以提高分页的效率正如楼主所说，分页查询在我们的实际应用中非常普遍，也是最容易出问题的查询场景。比如对于下面简单的语句，一般想到的办法是在name，age，register_time字段上创建复合索引。这样条件排序都能有效的利用到索引，性能迅速提升。如上例子，当 LIMIT 子句变成 LIMIT 100000, 50 时，此时我们会发现，只取50条语句为何会变慢?原因很简单，MyS...
王晗
|
1770人阅读
...，就是使用EXPLAIN命令。 1）基本用法 EXPLAIN QUERY 当在一个Select语句前使用关键字EXPLAIN时，MySQL会解释了即将如何运行该Select语句，它显示了表如何连接、连接的顺序等信息。 EXPLAIN EXTENDED QUERY 当使用EXTENDED关键字时，EXPLAIN产生附...
...后端 RDS 不存在瓶颈4.测试 SQL：单表拆分键上的等值查询 SELECT * FROM t1 WHERE partition_key=? 5.持续加大并发，直至 DRDS CPU 接近 100%，并且 rt 在5ms左右 Plan CacheDRDS 5.3 中，引入了 Plan Cache，大幅降低了 SQL 解析与查询优化的代价。DRDS 5.3...
...MARY KEY (`book_id`), KEY `ind_name` (`book_name`) ) ENGINE=InnoDB select book.* from book , (select book_id from book where book_name like %算法%) book_search_id where book.book_id=book_s...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
刘玉平
LiveVideoStack
