用户中心USER CENTER

首页/用户
  • scrapy下调试单个函数的方法

    摘要:进行抓取任务时很苦恼的一点在于为了调试某个第三四层以上的跳转链接需要等待将前面的链接都跑一遍才能确定某个页面的函数是否正确的命令行参数就是为了解决这一问题官网的描述意思就是网址可选参数官网给出的例子我的实践之路开始运行时结果总是没有打印出任 进行抓取任务时很苦恼的一点在于为了调试某个第三,四层以上的跳转链接需要等待将前面的链接都跑一遍,才能确定某个页面的parse函数是否正确,scra...

    yintaolaowanzi 发布于Python
  • k8s与etcd--备份etcd数据到s3

    摘要:可想而知,的重要性。因而做好数据备份工作至关重要。备份数据到能做的备份方案很多,但是大同小异,基本上都是利用了命令来完成。设置一下,就可以帮助我们定时删除旧数据,保留新的备份数据。部署方案选择中的比较合适,我的备份策略是每三小时备份一次。 前言 整个k8s诸多组件几乎都是无状态的,所有的数据保存在etcd里,可以说etcd是整个k8s集群的数据库。可想而知,etcd的重要性。因而做好e...

    yintaolaowanzi 发布于k8s
  • mac上利用docker搭建lnmp开发环境

    摘要:因为站点的采用自签名方式,所以浏览器有安全提示,继续访问就可以了,自己的站点用第三方认证证书替换即可。这是因为代码是在容器中,容器启动时会自动在中加上就是说,自动指向了容器动态生成的。则是跨容器访问,参数用指定的名称,端口用。 项目地址https://github.com/shmilylbel... 安装docker 新版的docker for mac 下载地址docker-ce-de...

    yintaolaowanzi 发布于PHP
  • 个人博客一|抓取崔庆才个人博客网站前端源码

    摘要:对于数据科学而言只是一个工具。扒取网站前端的源码应该是一个学习开发人员必备的技能,具备了此能力你可以快速搭建起一个网站。接下来我会把崔大佬的个人博客网站使用实现。 1、准备 工具:仿站小工具+V9.0 工具获取方式一: 关注微信公众号 微信公众号『stormsha』,后台回复『仿站工具』获取工具 工具获取方式二: 仿站小工具官网 https://smalltool.github.io/...

    yintaolaowanzi 发布于容器云
  • typecho插件编写教程1 - 从HelloWorld说起

    摘要:看起来很简单吧其实里面还是有不少坑的。激活插件方法如果激活失败直接抛出异常禁用插件方法如果禁用失败直接抛出异常获取插件配置面板配置面板个人用户的配置面板插件实现方法插件流程插件的基本流程是这样的。下一节老高会更详细的说明插件类的方法。 最近老高正在编写一个关于typecho的插件,由于typecho不像wordpress,有那么多的文档参考,写一个插件还是遇到了很多的坑,不过随着研究的...

    yintaolaowanzi 发布于PHP
<