摘要:数据描述,我们来看看数据的格式到为个不同类别的特征,为列,一共有条数据,下面列举其中一条当作例子数据处理与数据分析下面展示一下数据处理流程,主要是处理了一下缺失值,然后根据特征按连续型和离散型进行分别处理,使用了里面的包,下面的代码都...
摘要:可以用来设置当便利出现错误的处理函数该函数接受一个的实例作为参数,设置为空则不作处理。返回的是一个个元素的元组,分别表示遍历的路径名,该路径下的目录列表和该路径下文件列表。 os.walk目录遍历 每个月都有那么几天想划水,又到划水的日子了...
摘要:分享最近看到的相关的几篇好文我只是想偷懒形象解释了什么是知乎上相关 分享最近看到的python相关的几篇好文(我只是想偷懒) 形象解释了什么是GIL http://cenalulu.github.io/pyt... 知乎上 Pythonic 相关 https://www.zhihu.com/questio... https:...
摘要:目前正在开发一个系统,对于前端模块化与打包这块出现了一些选择。采用模块化及打包由于项目比较小,稍微了解后,觉得没必要采用。组件化,目前比较流行的如等。项目较小需要交互更新页面的并不多,没有采用。 目前正在开发一个python markdown wiki系...
摘要:如果有一个异常程序没有处理,那么将调用默认的处理器处理,并终止程序且给出提示。引发异常你可以用语句来引发一个异常。异常错误对象必须有一个名字,且它们应是或类的子类。参考资料凌风技术站异常机制讲解 当你的程序中出现异常情况时就需要异常处...
摘要:模块简介的模块提供了灵活的日志处理相关功能可以用来追踪程序运行的情况。模块设置的默认等级时这意味着默认情况下,日志级别为的日志会被记录,而的日志会被忽略。线程安全模块是通过线程锁保证线程安全的。 Logging 模块 简介 Python的 logging ...
摘要:应用在开发中会使用各种各样的包,通常我们会用来对各应用项目依赖的解释器版本及其包进行隔离。应用的外部第三方包的依赖由设定,并在时带入应用的目录作为依赖。我们需要一种把各组脚本运行环境隔离的方式,就是用解决。 python freeze python应用在...
一,使用contextmanager from contextlib import contextmanager import MySQLdb DB_CONFIG = { "host": "192.168.1.253", "user": "pythondb", "passwd&quo...
摘要:上一章搭建风控系统道路上踩过的坑信息采集我们介绍了第一点,如何去获取足够多的数据,而接下来的事情就是要创建一个机制去灵活的处理这些信息,为自动分析捕捉风险事件提供基础原料,进而借助规则引擎从中分析出风险事件。 上一章《搭建风控系统道路...
摘要:定义列表生成器有两种方式,一种是算式列表生成器我起的名字,一种通过关键词。算式列表生成器算式列表生成器雨列表生成式类似,但需要换成。我们可以用一个包含关键字的函数来定义一个列表生成器。 通过列表生成式我们可以方便的生成列表。但是在有的...
摘要:今天分享一个的小模块可以用它方便地获取某一文件某一行的内容。而且它也被模块用来获取相关源码信息来展示。用法很简单第一参数是文件名,第二个参数是行编号。如果请求的行数超过文件行数,函数不会报错,而是返回空字符串。 linecache 今天分享一...
摘要:有序字典简介示例有序字典和通常字典类似,只是它可以记录元素插入其中的顺序,而一般字典是会以任意的顺序迭代的。 有序字典-OrderedDict简介 示例 有序字典和通常字典类似,只是它可以记录元素插入其中的顺序,而一般字典是会以任意的顺序迭代的。...
摘要:一般情况下,我们使用装饰器提供的语法糖,来简化上面的写法像上面的情况,可以动态修改函数或类功能的函数就是装饰器。本文标题为会打扮的装饰器本文链接为参考资料修饰器的函数式编程中的装饰器介绍思诚之道装饰器入门与提高赖明星 装饰器 我们知道...
摘要:然而对于它为什么要这样实现我还不是很清楚,留待以后继续探究。这里是我在上关于这个问题的提问。 问题 在看 collections.OrderedDict 的源码时,对于它如何构造有序的结构这一部分不是很理解,代码如下: class OrderedDict(dict): "Dictionary ...
摘要:使用表情组成汉字或者简笔画,在微信的传播中甚广,就会想着要不自己也试着做出来吧比如下图实现步骤一开始想到的实现方案就是首先将汉字转化成白底黑字的图片然后将图片根据灰度值映射成不同的字符打印在终端。 这只是一个娱乐性的实现,纯属突发奇想...
摘要:神秘符号很多时候我们在打开的时候会有等很多像问号的编码出现这时候我们打开这个文件的二进制就会发现问号对应的十六进制编码就是。因为自动将收到的数据进行了解码。 utf-8 神秘符号 efbf bdef bfbd 很多时候我们在打开utf-8的时候会有 � 等很多像...
摘要:最近修改了项目里的相关功能,用到了标准库里的模块,在此做一些记录。可能没有线程名。可能没有用户输出的消息日志级别有如下级别,,,,默认级别是,模块只会输出指定以上的。在或者中这是很常见的方式。正常的做法应该是全局只配置一次。 最近修改...
摘要:探测图片类型今天遇到一个小问题,如何探测图片的文件类型。总结如下模块的地址在这,可以用来方便地探测文件类型,使用示例如下,可以方便地探测一个文件或是字节流文件。提供的标准库可以用来确定图片的类型,参见这里。如下接受文件名作为参数。 探...
摘要:收入的波动来自于不同部门或类目的收入涨跌。我们的目标是利用实现收入波动的分析模型。有了这个函数,我们只要给到数据源和细分项,就能得到影响最大的细分项。我们来认识下如何处理日期。 环境准备:sublime+ipython 打开代码编辑器sublime——本质...
摘要:写在前面最近在优化网站的搜索部分,网站是用实现的,主要业务是在线视频教育网站,之前搜索只是一段模型中的模糊匹配,所以只能搜索关键字,但是突然又想在网站做个类似于百度问答的功能。筛选出大于概率的词至此实现简单分词就写完了。 写在前面 最...
摘要:环境在处理微信朋友圈数据的过程中,需要对进行一些处理,只处理增量数据。已经处理过的,不再处理。使用在中有位的,默认是自增的。 环境:python2.7 在处理微信朋友圈数据的过程中,需要对sqlite进行一些处理,只处理增量数据。已经处理过的,不再处...
摘要:取多个元素从头开始取多个元素切片结束,但是不包括该的元素。切片开始的不填则默认是从最前端即开始。当然,从尾端开始切片,也支持省略代表一直切到尾部。其他编程语言入都提供了很多操作字符串的函数,其实中可以利用切片轻松完成。 取一个list或者...
摘要:由于苹果原生蛋疼的协议致使本来很简单的个推送服务让人望而却步。直到苹果最近的协议的出现才有所改善。如果推送失败后苹果的推送服务器会返回个错误的信息。结语虽然通过使用来实现苹果的推送服务是个比较简单的事情甚至会觉得比较枯燥无味的事情。 ...
摘要:中我们可以对或者其他可迭代的对象进行迭代从而遍历取出各个元素。如何判断一个对象是不是一个可迭代对象判断一个对象是不是可迭代对象可以使用判断是否是模块的类型。迭代字典本身带有和。利用迭代的时候,默认是迭代。 python中我们可以对list、tupl...
ChatGPT和Sora等AI大模型应用,将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的,但推理(inference/serving)用4090不能说合适,...
图示为GPU性能排行榜,我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...