锐洋智能 - 博客园

2021年12月2日

摘要：使用 os 模块判断文件是否存在 os.path.isfile(path) 判断目录是否存在 os.path.isdir(path) 判断路径是否存在 # 使用 path 模块 os.path.exists(path) # 使用 access() 方法 os.access(path, os.F_O 阅读全文

posted @ 2021-12-02 09:54 锐洋智能阅读(716) 评论(0) 推荐(0)

使用python删除N天前的文件(2)

摘要： import os import sys import time # Sets how many days old files are deleted DAYS_N = 7 # To delete the path and the following subfiles PATH = r'C:\ine 阅读全文

posted @ 2021-12-02 08:32 锐洋智能阅读(97) 评论(0) 推荐(0)

2021年12月1日

如何提高Pandas的运行速度？四大性能优化方法

摘要： 1、数据读取的优化读取数据是进行数据分析前的一个必经环节，pandas中也内置了许多数据读取的函数，最常见的就是用pd.read_csv()函数从csv文件读取数据。pkl格式的数据的读取速度最快，所以对于日常的数据集（大多为csv格式），可以先用pandas读入，然后将数据转存为pkl或者hd 阅读全文

posted @ 2021-12-01 20:20 锐洋智能阅读(813) 评论(0) 推荐(0)

用这几个方法提高pandas运行速度

摘要： ▍前言当大家谈到数据分析时，提及最多的语言就是Python和SQL。Python之所以适合数据分析，是因为它有很多第三方强大的库来协助，pandas就是其中之一。pandas的文档中是这样描述的： “快速，灵活，富有表现力的数据结构，旨在使”关系“或”标记“数据的使用既简单又直观。” 我们知道pa 阅读全文

posted @ 2021-12-01 10:30 锐洋智能阅读(1188) 评论(1) 推荐(0)

pandarallel 参数说明

摘要： from pandarallel import pandarallel pandarallel.initialize(） - `shm_size_mb`：Pandarallel共享内存的大小，以MB为单位。如果默认值太小，可以设置较大的一个。默认情况下，它设置为2 GB。（INT） - `nb 阅读全文

posted @ 2021-12-01 09:51 锐洋智能阅读(992) 评论(0) 推荐(0)

python学习——windows下pandarallel cannot find context for ‘fork‘

摘要：进入到pandarallel 的包文件里，就是pandarallel 安装的位置就是xxx:xxx/site-packages\pandarallel\pandarallel.py这里，xxx是你的python安装目录，里面有一行context = get_context("fork") 这里把fo 阅读全文

posted @ 2021-12-01 09:42 锐洋智能阅读(589) 评论(0) 推荐(0)

Python—requests模块详解

摘要： 1、模块说明 requests是使用Apache2 licensed 许可证的HTTP库。用python编写。比urllib2模块更简洁。 Request支持HTTP连接保持和连接池，支持使用cookie保持会话，支持文件上传，支持自动响应内容的编码，支持国际化的URL和POST数据自动编码。阅读全文

posted @ 2021-12-01 09:24 锐洋智能阅读(377) 评论(0) 推荐(0)

10 minutes to pandas

摘要： This is a short introduction to pandas, geared mainly for new users. You can see more complex recipes in the Cookbook. Customarily, we import as follo 阅读全文

posted @ 2021-12-01 09:13 锐洋智能阅读(63) 评论(0) 推荐(0)

2021年11月30日

python数据分析之pandas数据选取：df[] df.loc[] df.iloc[] df.ix[] df.at[] df.iat[]

摘要：阅读目录 1 引言 2 行（列）选取：df[] 3 区域选取 3.1 df.loc[] 3.2 df.iloc[] 3.3 df.ix[] 4 单元格选取 4.1 df.at[] 4.2 df.iat[] 5 拓展与总结 1 引言 Pandas是作为Python数据分析著名的工具包，提供了多种数据选阅读全文

posted @ 2021-11-30 18:33 锐洋智能阅读(1485) 评论(0) 推荐(0)

一次性总结了pandas提取数据的15种方法，统统只需1行代码！

摘要： pandas是Python数据分析必备工具，它有强大的数据清洗能力，往往能用非常少的代码实现较复杂的数据处理今天，总结了pandas筛选数据的15个常用技巧，主要包括5个知识点： “ 比较运算： ==、<、>、>=、<=、!= 范围运算： between(left,right) 字符筛选: str 阅读全文

posted @ 2021-11-30 18:31 锐洋智能阅读(1339) 评论(0) 推荐(0)

python tqdm进度条其他用法 pandas、enumerate

摘要：安装tqdm pip install tqdm 普通用法在迭代器中使用 import time from tqdm import tqdm pbar = tqdm(["a", "b", "c", "d"]) for char in pbar: time.sleep(1) 当遇到 enumerate 阅读全文

posted @ 2021-11-30 09:24 锐洋智能阅读(725) 评论(0) 推荐(0)

python tqdm 参数详细说明

摘要： Parameters iterable : iterable, optional Iterable to decorate with a progressbar. Leave blank to manually manage the updates. desc : str, optional Pre 阅读全文

posted @ 2021-11-30 09:22 锐洋智能阅读(1900) 评论(0) 推荐(0)

2021年11月29日

python 如何批量生成变量并赋值？

摘要： #!/usr/bin/python # -*- coding: UTF-8 -*- feed = "PATH" # 比实际大1 donum=int(8) # 定义要操作的变量 for i in range(donum): #globals()[feed+str(i)] = i exec(feed + 阅读全文

posted @ 2021-11-29 22:00 锐洋智能阅读(3955) 评论(0) 推荐(0)

win10 更新出现0x80244022解决方案

摘要：由于新版新刚刚发布，下载量访问量过大导致一些用户无法及时更新，我们建议您耐心等候一段时间，尽量在不拥挤的时候（凌晨等时间）让计算机进行下载。如果仍然无效，我们建议您尝试下面的方法：方法一：使用Windows 疑难解答尝试解决您的问题。右键win键，选择”控制面板“→”查找并解决问题“→”使用W 阅读全文

posted @ 2021-11-29 18:58 锐洋智能阅读(1247) 评论(0) 推荐(0)

成功解决schedule.ScheduleValueError: Invalid time format

摘要：将 schedule.every().monday.at("9:33").do(run2) 改为 schedule.every().monday.at("09:33").do(run2) 阅读全文

posted @ 2021-11-29 16:13 锐洋智能阅读(83) 评论(0) 推荐(0)

python 删除前3天的文件

摘要： #!/usr/bin/env python # coding: utf-8 import os import time import datetime # 获取当前时间 today = datetime.datetime.now() # 计算偏移量,前3天 offset = datetime.tim 阅读全文

posted @ 2021-11-29 16:13 锐洋智能阅读(189) 评论(0) 推荐(0)

2021年11月27日

python pyinstaller打包到指定目录打包exe程序

摘要： 1.pyinstaller安装安装环境：Win10安装命令： #升级pip版本 pip install -U pip #安装pyinstaller pip install pyinstaller 2.pyinstaller使用 1）选项参数选项描述 -h 显示帮助信息 -v 显示版本号 –dis 阅读全文

posted @ 2021-11-27 20:57 锐洋智能阅读(1510) 评论(0) 推荐(0)

在Windows系统中从终端运行Python程序

摘要：项目文件路径：D:\py\my.py python安装路径：F:\python\python.exe 一、WIN+R打开CMD 二、输入d:回车，进入项目文件所在的D盘三、使用cd命令切换目录到py文件夹四、调用python执行my.py文件 kkk即程序输出结果阅读全文

posted @ 2021-11-27 19:35 锐洋智能阅读(1672) 评论(0) 推荐(0)

MySQL获取所有分类的前N条记录

摘要： SELECT A1.* FROM stock_market AS A1 INNER JOIN (SELECT A.code,A.date FROM stock_market AS A LEFT JOIN stock_market AS B ON A.code = B.code AND A.date 阅读全文

posted @ 2021-11-27 14:58 锐洋智能阅读(90) 评论(0) 推荐(0)

2021年11月26日

东方财富的行情f参数说明

摘要： jQuery112406130263694063978_1637844710832({"rc":0,"rt":6,"svr":182481190,"lt":1,"full":1,"data":{"total":4811, "diff":[{"f1":2,"f2":17.54,"f3":-0.79," 阅读全文

posted @ 2021-11-26 11:32 锐洋智能阅读(2621) 评论(1) 推荐(0)

2021年11月25日

Tomcat7、8、9 Jar包加载机制

摘要： Tomcat7加载Jar包原理 Tomcat自己实现了自己的类加载器，用于加载自己本地项目中jar包中的所有class文件，所以在相同的类加载器下，如果有相同路径名和类名那么加载顺序就是根据jar包的顺序来决定的。谁的jar包先进来，那么就先加载哪个类。 Tomcat7加载jar部分，在Webap 阅读全文

posted @ 2021-11-25 06:34 锐洋智能阅读(1636) 评论(0) 推荐(0)

tomcat加载jar包顺序

摘要：概述：项目使用springMVC，serviceImpl注入的一个bean无法找到，究其原因是无法找到日志类。其实在spring的配置文件中配置了bean。而且程序代码在其他人的机子上运行不报错。我这边抱错：类找不到apache.common.log.logFactory类。tomcat中部署的应用阅读全文

posted @ 2021-11-25 06:29 锐洋智能阅读(1593) 评论(0) 推荐(0)

2021年11月24日

Spring log4j2.xml推荐配置

摘要： 1.配置文件 <?xml version="1.0" encoding="UTF-8"?>  <!--Configuration后面的status, 阅读全文

posted @ 2021-11-24 18:41 锐洋智能阅读(432) 评论(0) 推荐(0)

spring log4j2.xml 配置文件详解

摘要：一、log4j2介绍 log4j 2.x版本不再支持像1.x中的.properties后缀的文件配置方式，2.x版本配置文件后缀名只能为".xml",".json"或者".jsn"。配置文件的格式：log2j配置文件可以是xml格式的，也可以是json格式的。配置文件的位置：log4j2默认会在cl 阅读全文

posted @ 2021-11-24 18:37 锐洋智能阅读(883) 评论(0) 推荐(0)

Java8 Lambda实现条件去重distinct List

摘要：我们知道, Java8 lambda自带的去重为 distinct 方法, 但是只能过滤整体对象, 不能实现对象里的某个值进行判定去重, 比如: List<Integer> numbers = Arrays.asList(1, 2, 3, 4, 5, 5, 5, 5, 6, 7); List<Int 阅读全文

posted @ 2021-11-24 16:27 锐洋智能阅读(1198) 评论(0) 推荐(0)

jdk8 lambda表达式list操作分组、过滤、求和、最值、排序、去重

摘要： java8的lambda表达式提供了一些方便list操作的方法，主要涵盖分组、过滤、求和、最值、排序、去重。跟之前的传统写法对比，能少写不少代码。新建实体类 1 package sms.reyo.cn; 2 3 import java.math.BigDecimal; 4 import java. 阅读全文

posted @ 2021-11-24 16:27 锐洋智能阅读(1388) 评论(0) 推荐(0)

org.quartz.jobStore.misfireThreshold = 60000

摘要：配置定时任务参数 quartz.properties文件时需要配置jobStore的超过时间数默认为60秒（这里单位为毫秒） org.quartz.jobStore.misfireThreshold = 60000 这个参数一般在多线程池条件下无效。产生misfire失败的条件：单线程执行定阅读全文

posted @ 2021-11-24 10:36 锐洋智能阅读(196) 评论(0) 推荐(0)

quartz对任务超时和misfire的处理，启动时多执行一次

摘要：目前有一个按月累计折旧的定时任务，测试环境要配合业务测试，所以手工先停服务器，修改Linux系统时间，再启动服务器，但是出现问题，启动的时候有时候多执行一次，定凌晨5点定时启动，我修改时间为4点55, 56的时候服务器起来，执行了一次定时任务，5点准时又执行了一次，而且这个是不定时出现的，一晚测试3 阅读全文

posted @ 2021-11-24 10:29 锐洋智能阅读(1119) 评论(0) 推荐(0)

log4j2输出带有ip日志，便于集群环境查找

摘要： 1.设置环境变量 Java代码 /设置系统环境变量 System.setProperty("local-ip", "10.99.1.51"); //获取系统环境变量 System.out.println(System.getProperty("local-ip")); try { //设置本机地址到阅读全文

posted @ 2021-11-24 09:35 锐洋智能阅读(1065) 评论(0) 推荐(0)

log4j2配置固定内容(IP等)

摘要：需求：记录日志时须要添加服务IP和服务编号(由UUID生成)，便于运维人员在查看日志时定位到哪台服务器上的哪一个服务。html 基于spring web项目java 一、 log4j2.xml文件web <?xml version="1.0" encoding="UTF-8"?> <Configu 阅读全文

posted @ 2021-11-24 09:05 锐洋智能阅读(843) 评论(0) 推荐(0)

2021年11月23日

apache compress读取7z与zip4j读取zip文件的差异

摘要：这是未写算法还原目录结构的效果，读取相同内容的压缩包： compress读取7z文件的时候未包含目录结构...如果要实现java文件预览功能实现，可预览zip、7z等文件，可不解压从压缩文件zip、7z中选择下载文件那么得自己写一算法来还原目录结构... 这是有还原目录结构的效果：阅读全文

posted @ 2021-11-23 09:29 锐洋智能阅读(281) 评论(0) 推荐(0)

解决Multi input/output stream coders are not yet supported（org.apache.commons.compress）

摘要： java.io.IOException: Multi input/output stream coders are not yet supported at org.apache.commons.compress.archivers.sevenz.SevenZFile.buildDecoderSta 阅读全文

posted @ 2021-11-23 09:16 锐洋智能阅读(343) 评论(0) 推荐(0)

Java实现rar解压

摘要： jar包下载地址 https://mvnrepository.com/artifact/com.github.junrar/junrar UnRarUtils.java import com.github.junrar.Archive; import com.github.junrar.UnrarC 阅读全文

posted @ 2021-11-23 08:43 锐洋智能阅读(530) 评论(0) 推荐(0)

java实现zip,gzip,7z,zlib格式的压缩打包

摘要：本文主要介绍的是通过使用java的相关类可以实现对文件或文件夹的压缩。 zlib是一种数据压缩程序库，它的设计目标是处理单纯的数据（而不管数据的来源是什么）。 7z 是一种新的压缩格式，它拥有目前最高的压缩比。 gzip是一种文件压缩工具（或该压缩工具产生的压缩文件格式），它的设计目标是处理单个的文阅读全文

posted @ 2021-11-23 08:42 锐洋智能阅读(462) 评论(0) 推荐(0)

2021年11月22日

解决tomcat at org.apache.tomcat.util.buf.CharChunk.append(CharChunk.java:355)

摘要：报错内容： org.apache.coyote.http11.AbstractHttp11Processor.process Error processing request java.lang.NullPointerException at org.apache.tomcat.util.buf.C 阅读全文

posted @ 2021-11-22 09:16 锐洋智能阅读(616) 评论(0) 推荐(0)

2021年11月20日

python list 自定义排序

摘要：我们都知道python中有两种排序的方法，原地排序的x.sort()，和不改变原列表有返回值的sorted(x)自定义排序函数先不关心其实原地排序还是有返回值的排序，研究其内部的排序原理，其内部是根据什么排序的呢，默认的排序方法是内建的cmp函数对于cmp(x,y): # 比较器：按目录的深度倒序显阅读全文

posted @ 2021-11-20 09:07 锐洋智能阅读(7674) 评论(0) 推荐(0)

2021年11月19日

ChromeDriver自动更新、FirefoxDriver自动更新、InternetExplorerDriver自动更新(Java+Python)

摘要：下面以 ChromeDriver随chrome调用时自动更新(Java+Python)为例，其它同理... 使用selenium自动化时，一个很烦的问题就是chrome会自动更新(python)，然后chromedriver的版本就会不兼容。之前是被动的几小时查询一次如有更新就自动更新。但问题还是来阅读全文

posted @ 2021-11-19 11:13 锐洋智能阅读(230) 评论(0) 推荐(0)

Python 同步文件夹

摘要： import os import shutil import time import hashlib # MD5值 def getMD5(path): f=open(path,'rb') d5 = hashlib.md5() #生成一个hash的对象 with open(path,'rb') as 阅读全文

posted @ 2021-11-19 09:17 锐洋智能阅读(267) 评论(1) 推荐(0)

2021年11月18日

Python获取硬件信息(硬盘序列号,CPU序列号)

摘要： ython获取硬件信息(硬盘序列号,CPU序列号) pip install wmi pip install pywin32 import wmi c = wmi.WMI() # # 硬盘序列号 for physical_disk in c.Win32_DiskDrive(): print(physi 阅读全文

posted @ 2021-11-18 08:54 锐洋智能阅读(1686) 评论(0) 推荐(0)

2021年11月17日

python脚本 – 删除指定天数前的文件

摘要： # -*- coding: utf-8 -*- # Author: Jack # Date: 2018/02/09 15:33 import os import sys import time # 删除某个时间点之前的文件 def del_files(before_times, path=”.”): 阅读全文

posted @ 2021-11-17 20:45 锐洋智能阅读(301) 评论(0) 推荐(0)

公告