量化交易与投资社区

量化交易与投资社区

去全站搜索看看？

登录社区云

登录社区云，与社区用户共同成长

量化交易与投资社区

邀请您加入社区

欢迎加入社区

欢迎加入社区

python

爬虫逆向百例实战(一)-某建设监管平台

某建设监管平台

 weixin_57681589
2025-05-30 19:02:58

 2451

 33

#爬虫 #python
想学爬虫吗？带你快速入门Scrapy

详细讲解Quotes to Scrape网页的页面结构，来运行你第一个Scrapy代码；还有Scrapy教程，Srapy Shell 的使用，css选择器，XPath表达式

 索儿呀
2020-04-03 13:46:31

 1898

 9

#python #爬虫 #scrapy
如何避免爬虫因Cookie过期导致登录失效

通过合理管理Cookie，爬虫可以长期稳定运行，避免因登录失效导致的数据抓取中断。可自动管理Cookie，但需结合存储机制（如文件、数据库）实现长期有效。Cookie是服务器发送到用户浏览器并保存在本地的一小段数据，用于。当检测到Cookie失效时，自动调用登录接口更新Cookie。爬虫在模拟登录后，通常需要携带Cookie访问后续页面。持久Cookie（Persistent Cookie）：可采

 Z_suger7
2025-04-27 16:25:30

 1773

 8

#爬虫 #python #开发语言 +1
我的第七篇python爬虫博客《xpath》

xpathxpath基本概念：xpath（xml language path）文档节点中通过元素节点和属性节点进行导航xml 可拓展标记语言html 超文本标记语言lxml 是python当中的一个第三方库，可以将html文本转换成一个xml对象文档节点的关系：xpath的工具使用：chrome插件xpath-helper1.将下载的xpath-helper插件的后缀名改crx→rar，然后解压2

金法杖
2021-03-07 20:36:52

 276

#python #爬虫
有了这个库(GoPUP)，这些爬虫都不用亲自写了

这个库的名字叫 GoPUP，GitHub 主页是：https://github.com/justinzm/gopup这其实是一个基于公开 API 的数据接口库，这个库封装了各种各样的方法，比如通过 wx_hot_list 这个方法我们就可以获取实时的微信热门文章榜单。

JMzz
2022-11-21 13:55:53

 639

 1

#python #开发语言
Python爬虫进阶：突破反爬机制（UA伪装+代理池+验证码识别）

在爬虫开发中，“反爬”是绕不开的门槛——当请求频率过高、请求特征异常时，目标网站会通过封禁IP、弹出验证码、返回无效数据等方式拦截爬虫。本文将聚焦UA伪装、代理池搭建、验证码识别三大核心反爬场景，结合实战代码讲解具体解决方案，帮助你高效、合规地获取数据。

weixin_52880903
2025-09-26 08:53:43

 2455

 10

#python #爬虫
（2024最新毕设合集）基于SpringBoot的智能美食推荐系统-85003|可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、文案

智能美食推荐系统的主要使用者分为管理员和普通用户，实现功能包括管理员：系统用户、菜谱信息管理、菜谱分类管理、留言反馈管理、系统管理、通知公告管理、资源管理、交流管理等模块，普通用户：首页、交流论坛、通知公告、饮食资讯、菜谱信息、留言反馈等功能。

vx_BS81330
2024-11-29 12:00:00

 1506

 22

#java #spring boot #php +4
【PyTorch】torch.quantization.quantize_dynamic() 函数：动态量化（Dynamic Quantization）

torch.quantization.quantize_dynamic 是 PyTorch 提供的动态量化（Dynamic Quantization）函数，用于减少模型大小并加速推理，特别适用于 CPU 设备。适用于 Transformer、LSTM、GRU、全连接层。无需标定数据，易于使用，是低成本优化推理性能的最佳方案。

正义的彬彬侠
2025-03-14 10:47:06

 1426

 4

#pytorch #python #深度学习
【完整源码+数据集+部署教程】【损害和风险评估＆坑洼】路面坑洼检测系统源码＆数据集全套：改进yolo11-DCNV3

【完整源码+数据集+部署教程】【损害和风险评估＆坑洼】路面坑洼检测系统源码＆数据集全套：改进yolo11-DCNV3

飞翔的佩奇
2025-10-24 11:33:43

 1068

 11

#计算机视觉 #python
构建智能投资视野：用Python打造个性化股票分析系统

Python凭借丰富的数据分析库，成为构建智能股票分析系统的利器。本文详细介绍了从环境搭建、数据获取，到技术指标计算、策略回测的完整流程，并深入探讨了基本面分析和量化建模方法，最终强调技术分析需与风险管理和金融知识相结合，为理性投资提供全面指导。

高峰君主
2025-09-26 20:12:50

 1075

 8

#python #开发语言
基于mediapipe实现的挥手识别及手势识别(Linux系统下安装)

从安装到实现，利用opencv+mediapipe完成手势识别及挥手检测。

I.L.F.Y
2022-02-25 22:49:18

 620

#python #opencv #视觉检测
fastapi学习（一）：输出hello world与基本运行方法

fastapi运行有两种方法：使用命令行的方式运行：uvicorn py文件名:app --reload使用python运行：python py文件名方法一：命令行启动fastapi在一个文件main.py中写入：from fastapi import FastAPIapp = FastAPI()@app.get("/")async def hello_world():return {"hello

呆萌的代Ma
2022-03-09 22:34:46

 2090

#学习 #python #pycharm
企业微信api和外部群主动推送消息

一、核心概念界定企业微信 API：企业微信开放平台提供的应用程序接口，允许企业通过自定义开发，实现与企业微信原生功能的对接、扩展，满足个性化的内部管理与外部连接需求。外部群主动推送消息：借助企业微信 API 开发能力，企业在合规前提下，向由员工创建并添加外部联系人（客户、合作伙伴等）组成的外部群，主动发送预设或实时生成的消息内容，属于企业微信外部运营的重要功能之一。二、主动推送消息的功能逻辑

 2501_94198205
2025-11-14 17:19:32

 2387

 18

#python #自动化
【量化策略】横盘策略20211209

横盘策略能够实现短线、小资般的不错收益。如下这张图(000333),股价呈横盘状态，试考虑假如我们在1 、2 、3 、4 、5点买入的话，岂不是赚的盘满钵满？那么问题来了，这样的票子改怎么选呢？哈哈,且听我细细道来:1、这么多股票,如何筛选出来呢？【量化分析】通过程序的方式进行筛选，还是很简单的。接下来，我们说思路，代码请加关注、点赞、评论，私信我代码给到你!!! 部分代码参考如下:先对这种票

 a419506442
2021-12-09 17:06:42

 1.7w

 14

#python
QMT量化超时撤单

超时撤单包含买入超时撤单和卖出超时撤单，撤单后调整价格重新买入或卖出未完成的数量。

pengxuan
2023-04-13 14:51:18

 3698

 3

#python
私募建仓通达信公式副图贴图和谐源码分享

黄金线选股:IF(CROSS(X_9,0.009) AND (OPEN AND LOW) AND (CLOSE AND LOW),20,0),COLORRED;私暮黄金线:X_9,COLORYELLOW,LINETHICK2;

cs_7gpzb
2025-07-17 10:18:03

 1074

 3

#java #前端 #数据库 +1
python语言网络爬虫学习（一）

背景暑假的钟声已敲响了一个星期有余了，这个星期也是有意放松一下自己，这段时间也在忙着各种各样的事情，都还是挺轻松的，那接下来的时间也要安排自己的学习计划了。学习网络爬虫的初衷是因为自己想爬取一下景点、酒店、饭店的评论信息，分析景点、酒店、饭店的口碑，接下来就是开启我的网络爬虫之旅。爬虫简介我是通过泰迪科技的网络爬虫教学视频进行学习的，个人觉得讲得知识点还是比较清晰的，但是内容质量如何，我也还不知道

 zou_gr
2020-07-09 10:50:30

 932

#python #正则表达式
【网络爬虫】(3) 案例小结，文本内容爬取，附Python代码(2)

结果展示，电影信息以CSV文件保存。结果展示，小说文本以txt格式保存。

2401_84009488
2024-04-22 03:19:37

 245

 3

#爬虫 #python #开发语言
不一样的获取数据方式——爬虫学习（3）

不一样的获取数据方式——爬虫学习（1）不一样的获取数据方式——爬虫学习（2）之前在学习爬虫的时候，有些网站发送请求会被拒绝，所以需要把程序伪装成浏览器，除了在请求头加上user-agent之外常见的还有cookie，防盗链，代理等操作目录1 处理cookie1.1 知识点1.2 例子2 防盗链3 代理4 提高爬虫速度4.1 多线程1 处理cookie1.1 知识点在爬虫的时候，有些网站需要先登录才

 打代码的小明
2021-03-21 21:28:32

 933

 2

#python #爬虫 #经验分享 +1
ImportError: Unable to load any of the following libraries: hidapi.dll libhidapi-0.dll

ImportError: Unable to load any of the following libraries: hidapi.dll libhidapi-0.dll，缺少hidapi.dll文件，下载hidapi.dll文件

 南巷頃風
2024-01-26 12:14:13

 1463

 7

#conda #pyqt #python
python调用windows api

import ctypes# 方式一ctypes.windll.user32.MessageBoxA(None, 'message', 'title', 0)# 方式二ctypes.WinDLL('user32.dll').MessageBoxA(None, 'message', 'title', 0)本文转自罗...

weixin_33737774
2017-10-18 12:31:00

 634

 1

#python
这些不用编程的爬虫工具，你一定要知道

初期的互联网，写爬虫是门技术活，往大的方向说，爬虫技术是搜索引擎的组成部分。随着互联网技术的发展，写爬虫的门槛一降再降，一些编程语言甚至直接提供爬虫框架，例如python的Scrapy框架，它们让写爬虫走入“寻常百姓家”。我们已经发现，写爬虫是一件炫酷的事情，但即使是这样，学习爬虫仍然有一定的技术门槛。当前的主流爬虫手段是用Python编程，Python的强大毋庸置疑，但初学者学习Python还是

 爱编程的小辞
2023-09-27 19:30:00

 1139

#爬虫 #python #职场和发展 +4
好玩的API调用之---星座运势的API与爬虫爬取

好玩的API调用之—星座运势API与爬虫更多技术文章请访问我的个人博客http://www.rainweb.site平时写程序经常需要用到一些服务，像翻译，天气预报，星座什么的，我一般都是用Python写个爬虫去提供这些服务的网站爬数据，但是有些网站对爬虫有很多限制，一些关键字会定时更改，就像中国天气网经常变更HTML标签的class值，这就需要时常维护爬虫，而聚合数据API只对普通用户提供一个

 AlgoRain
2017-04-25 21:01:27

 1w

 2

#python #爬虫
机器学习：python高考数据可视化分析与预测系统爬虫机器学习高斯朴素贝叶斯分类预测模型 Flask框架大数据毕业设计✅

本文介绍了一个基于Python的高考数据可视化分析与预测系统，采用Flask框架和机器学习技术。系统核心功能包括：1）使用高斯朴素贝叶斯分类模型(GaussianNB)进行高考分数预测；2）通过Selenium爬虫从高考网站获取实时数据；3）提供多维度可视化分析，如招生批次统计、录取分数热力图等。项目技术栈涵盖Python、Flask、Echarts、机器学习算法等，适用于高考志愿填报辅助决策，为

 q_3548885153
2025-08-15 22:45:30

 1029

 20

#机器学习 #python #高考 +1
Python爬虫多线程并发时的503错误处理最佳实践

摘要 HTTP 503错误表示服务器暂时无法处理请求，多线程爬虫中常见原因包括服务器负载过高、请求频率过快、服务器防护机制或网络问题。处理503错误的最佳实践包括：合理控制并发线程数量，设置请求间隔（如time.sleep），使用代理服务器隐藏IP地址并降低单个IP请求频率，以及随机切换用户代理（User-Agent）以避免被识别为爬虫。此外，可通过重试机制（如Retry）增强请求稳定性。这些方法

 Z_suger7
2025-06-26 16:33:19

 1446

 41

#python #爬虫 #开发语言
【深度学习量化交易3】为了轻松免费地下载股票历史数据，我开发完成了可视化的数据下载模块

这篇开始正式介绍我开发的量化交易系统，量化交易的第一步就是获取历史数据，用于后续的数据处理、训练以及回测。

Mr.看海
2024-10-17 23:32:14

 3916

 10

#深度学习 #python #量化交易
分享63个Python爬虫源码总有一个是你想要的

分享63个Python爬虫源码总有一个是你想要的

 zdh13370188237
2023-12-27 08:56:33

 2265

 17

#python
Python网络爬虫开发：从入门到精通

网络爬虫（Web Crawler），也称为网络蜘蛛（Web Spider），是一种自动抓取互联网信息的程序或脚本。它通过模拟浏览器行为，按照一定的规则自动访问网页并提取所需数据。通过本文的学习，您应该已经掌握了Python网络爬虫从基础到高级的开发技能。记住，爬虫技术是把双刃剑，

图的图图
2025-04-28 18:07:56

 1635

 11

#python #爬虫 #开发语言
教你用Python爬虫轻松抓取全国天气数据（附可视化技巧）

最近帮某奶茶店分析客流量与天气关系时（想不到吧！），发现下雨天订单量增加23%（配送费立功了）。所以天气数据真的超有用！但切记：爬虫虽好，不要贪杯哦～（合法合规永远是第一位的！小贴士：本文案例仅用于学习交流，实际使用请遵守相关网站规定。如果网站改版导致代码失效，记得自己调试CSS选择器哦～（别打我，这就是爬虫的日常！

progalchemist
2025-05-15 16:53:11

 1172

 5

#python #爬虫 #开发语言 +1
0046-量化第十一天：PythonGo-第一个简单策略

pythonGO入门手把手

 九九九九为功
2022-11-10 16:00:56

 2936

 1

#python #学习
网站地图爬虫

def crawl_sitemap(url):html = ''#download the sitemap filesitemap = download_page(url, 2)# extract the sitemap linkslinks = re.findall('(.*?)',sitemap)#load each link

猎狐肥
2017-01-14 22:16:30

 914

#爬虫 #python
通达信条件预警 + 自动下单 = 可视化量化策略实战教程，手把手教会你

本文详细介绍了如何利用通达信条件预警和QMT量化软件搭建自动化交易系统。通过设置通达信的条件预警功能并导出选股信号，再使用Python编写的量化程序对接QMT交易端，实现从信号生成到自动下单的全流程。文章包含具体操作步骤、关键代码片段以及运行效果展示，帮助用户利用熟悉的通达信指标公式构建个性化量化策略，显著提升交易效率。特别强调了该方案可结合通达信的L2数据优势，打造低成本的自控量化系统。适合想尝

 haitun1123
2025-11-10 16:42:17

 4697

 27

#python #量化交易
多线程爬虫——爬取Bing画廊

http://www.bing.com/gallery/ 里搜集了Bing首页的近5年的壁纸大图，大部分是1920x1200的。右侧就是Bing的壁纸，大多数是1920x1200的大图，少部分没有大图。对这个网站的爬取有一点难度。这个页面用js语句锁死了右侧图片栏的右键菜单，所以只能通过左侧打开chrome的元素菜单，然后再取得图片缩略图的地址。图片缩略图的地址通常

 Cap_liu
2016-08-14 18:51:57

 2802

 2

#python #爬虫
原来这就是大家学Python爬虫的原因——真的赚钱

不少人学习Python，除了是希望能提高自己的工作效率和竞争力之外，更多是想要通过这门技术赚一些外快，改善自己的生活。接下来小编就给大家总结一下几种常见的用爬虫挣钱的方式。

Python蛋挞
2023-05-14 08:00:00

 361

#python #爬虫 #开发语言
爬取东方财富股票信息

本文基于第二种，即selenium，爬取东方财富的股票数据。目标网址：http://quote.eastmoney.com/center/gridlist.html#hs_a_board目标数据：网页table标签中的股票信息。

正在修炼的IT大佬
2023-11-06 22:24:47

 2879

 1

#python #selenium
完美解决出现“api-ms-win-crt-process-l1-1-0.dll丢失”错误

在为脑袋偶尔windows 7系统中，安装python后，有时会出现不能正常启动的情况，并且弹出如下对话框：出现该问题是系统中缺少api-ms-win-crt-process-l1-1-0.dll文件，或者该文件已经损坏。api-ms-win-crt-process-l1-1-0.dll是MFC的运行时环境库。python在Windows上编译也使用微软的Visual Studio C++编译器，

李木子的博客
2020-12-08 09:58:53

 4.5w

 5

#python #windows
[031量化交易] python互交式显示 bokeh绘制K线图

【代码】[031量化交易] python互交式显示 bokeh绘制K线图。

weixin_33595571
2022-09-10 09:56:53

 517

#python #开发语言
绘制中国近海的sst分布图

文章目录前言绘制sst分布图前言这里使用的数据为1°×1°的NOAA卫星月平均sst数据，这是下载的网址https://psl.noaa.gov/data/gridded/tables/sst.html，进去可以选择自己想要的数据。提示：这里用到的库需要提前安装，具体流程可自行百度。绘制sst分布图思路：先提取nc文件中存储的经纬度以及sst数据，由于数据密度较低，对其进行插值。另外，由于项目对岸

 迟到的遇见
2021-02-01 08:52:30

 2649

 2

#python #数据可视化
【Python技术】使用akshare、scikit-learn预测股票涨跌简单例子

备注：随机森林(Random Forest)是一种基于集成学习的机器学习算法，其目的是通过组合多个决策树模型来进行预测。随机森林通过对训练数据进行随机采样，以及在构建每个决策树节点时对特征进行随机选择，来增加模型的多样性和鲁棒性。，有同学私信我，怎么实现预测股票涨跌。说实话，之前我没细想过，本能的回答用大数据机器学习就可以搞。实际的股票市场预测要复杂得多,受到许多这个简单模型没有考虑到的因素影响

 xiaoliouc
2024-09-19 19:51:15

 2210

 8

#python #scikit-learn #开发语言
如何使用Python爬虫抓取数据？

Python爬虫应用十分广泛，无论是各类搜索引擎，还是日常数据采集，都需要爬虫的参与。其实爬虫的基本原理很简单，今天小编就教大家如何使用Python爬虫抓取数据，感兴趣的小伙伴赶紧看下去吧！首先需要安装Python的requests和BeautifulSoup库。我们用Requests库用抓取网页的内容，使用BeautifulSoup库来从网页中提取数据。运行pip install request

程序员二飞
2022-12-23 10:28:11

 9983

 8

#python #爬虫 #开发语言 +2
python 使用win32api截图全解释

#1、获得应用窗口句柄hwnd=win32gui.FindWindow(0,“窗口名字”)#2、通过应用窗口句柄获得窗口DChwndDC=win32gui.GetWindowDC(hwnd)#3、通过hwndDC获得mfcDC(注意主窗口用的是win32gui库，操作位图截图是用win32ui库)mfcDC=win32ui.GreateDCFromHandle(hwnd)#4、创建兼容...

梁厚高
2019-08-06 11:18:52

 9661

 12

#python
不讲武德——不用代码爬虫二

之前说过较为简单的条件下使用web scraper，来进行采集豆瓣top250电影数据，这次我们要使用该工具，采集多页数据，不仅是一页，并且进行采集二级页面的数据。还是拿豆瓣top250，来举例。

叒枅
2020-11-30 14:05:49

 509

 2

#爬虫 #python
api调用 huggingface在线模型

使用api调用调用大模型

 taowuhua
2025-06-16 13:47:28

 1095

 7

#python
Python api构建tensorrt加速模型

一、创建TensorRT有以下几个步骤：1.用TensorRT中network模块定义网络模型2.调用TensorRT构建器从网络创建优化的运行时引擎3.采用序列化和反序列化操作以便在运行时快速重建4.将数据喂入engine中进行推理二、Python api和C++ api在实现网络加速有什么区别？个人看法1.python比c++更容易读并且已经有很多包装很好的科学运算库（numpy，scikit

liiiiiiiiiiiiike
2021-08-30 17:44:37

 920

 1

#python #深度学习
站酷图片壁纸-爬虫获取（python）

登录站酷网址下载所有图片并保存在工程目录下，使用pycharm。

-chu_kuang-
2024-10-18 23:35:21

 550

 8

#爬虫 #python #开发语言
apifox

apifox 提取变量1、找到接口的后置操作，输入变量名称2、输入json表达式 $.3、在需要的接口上进行调用。apifox参数化1、找到自动化测试，先建一个测试用例2、点击用例名称3、找到添加步骤，从接口导入，点击确定4、点击接口名称，用{{}}进行调用5、点击测试数据，导入csv点击确定6、点击测试步骤，勾选测试数据7、点击运行apifox json断言1、找到后置操作，添加断言2、输入断言

 CSDNwlp1
2022-12-15 22:51:21

 2973

#python
爬虫 — 反爬

UA 反爬、Cookie 验证与反爬、Referer 反爬

 永远十八的小仙女~
2023-09-11 21:00:00

 2369

 2

#爬虫 #python
Jmeter教程-JMeter 环境安装及配置

本篇主要介绍JMeter的环境配置以及初体验，为后续的JMeter之旅做好准备。在这一章节中，我们将了解如何配置JMeter的环境，以及如何进行简单的接口测试。通过这个简单的脚本，我们能够迅速进行一次接口请求测试，为后续更复杂的测试做好基础工作。，共同学习软件测试技术、面试等软件测试方方面面，还会有免费直播课，收获更多测试技巧，我们一起进阶Python自动化测试/测试开发，走向高薪之路。在使用 J

美团程序员
2024-02-19 20:49:07

 1615

 18

#jmeter #python #压力测试
Python量化交易实战全攻略

本文详细介绍了Python量化交易的核心要素，包括：1）量化交易优势（自动化执行、高效回测等）和典型应用场景（股票、期货等市场）；2）关键Python工具链（pandas数据处理、yfinance数据获取、backtrader回测）；3）完整交易流程（数据获取清洗→策略开发→风险管理→绩效分析）；4）进阶方向（高频交易实现、机器学习应用）和学习路径建议。文章特别强调实盘注意事项，包括过渡流程、常见

 The_weeknd__
2025-09-28 22:46:56

 1560

 18

#python #开发语言
Python爬虫实战——使用NetNut网页解锁器获取亚马逊电商数据

爬虫实战

 小袁ITSuper
2025-09-15 10:57:24

 35w

 56

#python #爬虫 #数据分析 +1

加载更多

回到
顶部

提供社区服务与技术支持

提供社区服务与技术支持

©1999-2023北京创新乐知网络技术有限公司京ICP备19004658号