摘要：今天就专门看看正则表达式。下面是一个正则表达式最简单的使用例子。这个例子使用了正则表达式模块的函数，它会返回所有符合模式的列表。查询标志让正则表达式具有不同的行为。，按给定正则表达式分割字符串。，正则表达式中捕获组的数量。 最近研究Py...
摘要：无意中发现贴吧也出了个漂流瓶的东西，随手翻了翻发现居然有好多妹子图，闲来无事于是就想写个爬虫程序把图片全部抓取下来。具体获取一页内容的如下看参数很容易明白，就是当前页码，就是当前页中包含的漂流瓶数量。 showImg("https://segmentfault.co...
摘要：简直是个神坑，被坑哭了，所以记录一下把微信和改用存，为了避免并发导致次数被用完，加了锁，为了避免以后扩展，改用了分布式锁，改完用并发测试了下，一切正常，。 简直是个神坑，被坑哭了，所以记录一下！ 把微信token和ticket改用redis存，为了避...
摘要：开始爬虫之旅本文章属于爬虫入门到精通系统教程第一讲引言我经常会看到有人在知乎上提问如何入门爬虫爬虫进阶利用爬虫技术能做到哪些很酷很有趣很有用的事情等这一些问题，我写这一系列的文章的目的就是把我的经验告诉大家。 开始爬虫之旅 本文章属于...
摘要：环境的安装本文章属于爬虫入门到精通系统教程第二讲的安装我用的是，也用过但是电脑配置不行，比较卡安装教程在这写的蛮清楚的然后安装一个的插件就行见如下截图点击数字的地方在数字的地方输入点击右边的安装按钮包的安装配置源，不配置的话下载速度很...
摘要：协议的讲解本文章属于爬虫入门到精通系统教程第三讲什么是协议引用自维基百科超文本传输协议英文，缩写是互联网上应用最为广泛的一种网络协议。通过或者协议请求的资源由统一资源标识符，来标识。假定其下层协议提供可靠的传输。 HTTP协议的讲解 本文...
摘要：在类成员函数中，可以这样用看上面的成员函数，也是同一个道理。如果像下面这样写的话，会出错报错信息就是这个基本上指明了原因。 在类的成员函数中，如果你想通过一个字符串（成员函数名）来调用类的成员函数，该怎么做？ class A: val = 1 ...
摘要：最近在抽时间学习这个库的使用，学的断断续续的，看官网上第一个案例就是训练手写字符识别。此外，还需要有个，用来把训练的标签和实际的标签对应，比如说对应字母，对应字母。然后使用的函数，把训练集和测试集分开。 最近在抽时间学习TensorFlow这个...
摘要：约束名字空间作用域之间的那些事不管在什么编程语言都有作用域这个概念作用域控制在它范围内代码的生存周期包括名字和实体的绑定名字和实体的绑定我们可以理解成赋值当我们执行这句代码时实际上我们已经得到一个的关联关系我们也能将称之为约束这个约束...
摘要：所以这就现实了在中使用的应用上下文。要引入请求上下文，需要考虑这两个问题如何在中产生请求上下文。中有和可以产生请求上下文。具体的思路还是在中重载类，通过，在的上下文环境下执行。将他们传入，生成伪造的请求上下文可以覆盖大多数的使用情况。...
摘要：在生产者与消费者之间的缓冲区称之为仓库。生产者负责往仓库运输商品，而消费者负责从仓库里取出商品，这就构成了生产者消费者模式。中的多线程编程在实现生产者消费者模式之前，我们先学习下中的多线程编程。 什么是生产者消费者模式 在软件开发的过...
摘要：在网上搜了一下，很多人发帖问的和这两个比较操作符的区别，关于这个，官方文档有一些说明。上面说明了操作符用来判断两个操作数是不是同一个对象，也就是它们引用的是不是同一个对象。至于实例方法，等找个例子才写。 在网上搜了一下，很多人发帖问py...
摘要：获取怎样的数据在这里首先需要考虑，我们的四则运算计算器的计算复杂度是如何的是仅能计算两个数值的简单运算，如还是能进行混合四则运算，如那么你想处理运算的复杂程度就决定了你想获取怎样的数据，这是很实际的问题。 引言 在上一篇文章的介绍中，...
摘要：建议先大概浏览一下项目结构项目介绍新手向，基于构建的分布式爬虫。以爬取考研网的贴子为例，利用进行解析，将符合要求的文章文本存入数据库中。项目地址有任何问题可以与我联系微信 Ugly-Distributed-Crawler 建议先大概浏览一下项目结构 项目介绍 ...
摘要：这说明类已经处于继承链条的顶端，是所有类的父类。这就是说这一元类的父类是。我们来捋一捋，也就是说类是由元类创建的，但是类又继承了类。元类的类则是由元类自身创建的。 学习python的同学都知道这么几句话 object类是所有新式类的父类。 type是...
我参考了一些流行的python开源项目，总结一下python开源项目结构。 基本结构 showImg("https://segmentfault.com/img/bVLGcH?w=770&h=1012"); 结构说明 docs: 项目文档 tests: 测试代码 project: 项目内容 .gitignore: git忽略文件 .travis.yml: 配置trav...
摘要：在维护一个采用框架的项目过程中，发现很多优点，这些都可以借鉴到程序中远程部署到指定环境本篇主要关注的是，在下一篇中将会介绍远程部署程序。主要使用和两个命令，下面的是运行在上。使用的来查看的具体信息运行下面的命令之后，上一步的命令将会回...
摘要：字符串拼接是我们在编程过程中经常遇到的问题。然后再将该字符串与后一个字符串拼接。比较好的做法是先将字符串片段放入一个里，然后用直接拼接，如此一来则会直接计算所有字符串片段拼接后的长度。 字符串拼接是我们在编程过程中经常遇到的问题。例如...
摘要：运行一下我们的代码，然后刷新下数据库，可看到数据已经保存到中了查看数据库内容很清晰，每一项都有保存 抓取论坛、贴吧这种多分页的信息时，没接触scrapy之前，是前确定有多少页，使用for循环抓取。这方法略显笨重，使用scrapy则可以直接组合下一页...
摘要：在计算机科学中，闭包又称词法闭包或函数闭包，是引用了自由变量的函数。闭包被广泛应用于函数式语言中。运用闭包可以避免对全局变量的使用。将栈顶的元素取出，创建元组，并将该元组进栈。 在计算机科学中，闭包 又称 词法闭包 或 函数闭包，是引用了...
摘要：与操作系统交互在系统中执行将系统目录更改为调试器在执行完代码，如果出现错误，立即执行命令后将会进入调试器。性能分析用来测试各个部分或者函数的执行时间，它会自动多次执行以产生一个非常精确的平均执行时间。比的性能要快两倍以上。 本文介绍如...
摘要：接着上一篇管理程序的本篇介绍远程部署到指定环境使用的技术是环境准备使用下面的命名获得模版，里面有准备好的各个以及基本包。将上面的的，和定制成你需要的参数就好。在上述命令运行成功之后，登录到上下目录结构，如下所示将部署到之后，到环境。 ...
Scrapy爬取豆瓣读书全站 分析网页 首先打开豆瓣读书中的分类浏览，可以看到其中有很多的分类 showImg("https://segmentfault.com/img/remote/1460000008991908"); 豆瓣应该是一个比较好爬的网站，所有的数据都不是ajax加载的，我们打开谷歌的F12或者是火狐...
摘要：越来越喜欢使用编写文档，相对更简单方便，而且可以渲染输出自己喜欢的样式。开发过程中编写的文档方便等版本控制工具管理。完整代码将上的代码保存为然后执行 越来越喜欢使用markdown编写文档，相对doc更简单方便，而且可以渲染输出自己喜欢的样式。...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
一、活动亮点：全球31个节点覆盖 + 线路升级，跨境业务福音！爆款云主机0.5折起：香港、海外多节点...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
89542767
社区管理员
白马啸西风