回答:linux 0.11的内核源码,结合下面这本书,我花了大概一个寒假(1个半月),看了一遍。然而,现在的内核已经膨胀的不成样子了,以还不算最新的linux-4.9.229为例:整个内核源码一共约 801M:驱动代码占了大概一半,大约407M:体系相关的代码大约164M:网路子系统相关的代码29M:文件系统相关的代码38M:linux内核核心代码大约7.7M:但是就这7.7M,其实你要完全看完看懂也不...
准备:解压hadoop-2.6.0-cdh5.7.0.tar.gz源码包,看到里面有个BUILDING.txt文件,里面列出了编译所需依赖组件。 Requirements: Unix System JDK 1.7+ Maven 3.0 or later Findbugs 1.3.9 (if running findbugs) ProtocolBuffer 2.5.0 CMake 2.6 or ...
摘要: 将编译Hadoop所需要的依赖软件安装到Docker镜像中,然后在Docker容器中编译Hadoop,可以提高编译效率,同时避免污染主机。编译其他软件时,也可以参考这篇博客的方法。 GitHub地址: kiwenlau/compile-hadoop 在前一篇博客中,...
在安装并配置好Hadoop环境之后,需要运行一个实例来验证配置是否正确,Hadoop就提供了一个简单的wordcount程序,其实就是统计单词个数的程序,这个程序可以算是Hadoop中的Hello World了。 MapReduce 原理 MapReduce其实就是采用分...
... 博客原文:hackershell 这篇文章主要介绍如何在已有的Hadoop RPC框架上,自定义新的方法实现和NameNode的交互。 在此之前,我们需要准备: hadoop的源码 protobuf 2.5版本 JDK hadoop 2.x版本中采用了Protocol Buffer (简称protobuf)作为序列...
ChatGPT和Sora等AI大模型应用,将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的,但推理(inference/serving)用4090不能说合适,...
图示为GPU性能排行榜,我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...