登录社区云,与社区用户共同成长
邀请您加入社区
海龟交易法则是经典的趋势跟踪策略,适合有纪律的交易者,尤其在趋势明显的市场中表现优异。
Python爬虫应用十分广泛,无论是各类搜索引擎,还是日常数据采集,都需要爬虫的参与。其实爬虫的基本原理很简单,今天小编就教大家如何使用Python爬虫抓取数据,感兴趣的小伙伴赶紧看下去吧!首先需要安装Python的requests和BeautifulSoup库。我们用Requests库用抓取网页的内容,使用BeautifulSoup库来从网页中提取数据。运行pip install request
爬虫实战
RapidMiner是一款功能强大的数据挖掘和机器学习工具,它提供了从数据预处理、建模、评估到部署的一系列流程。它最初由德国多特蒙德工业大学的人工智能部门开发,原名Yale,后更名为RapidMiner。RapidMiner以其图形用户界面(GUI)和拖拽式操作而闻名,这使得即使是初学者也能快速上手进行数据分析。
ICRG(International Country Risk Guide)是由美国政治风险服务集团(PRS Group)开发的全球权威国家风险评估体系,涵盖政治、经济、金融三大维度的量化指标。该数据集收录了1984年至2023年全球170余个国家和地区的年度风险数据,包括综合风险指数(取三类风险平均值)及细分指标。政治风险涉及政府稳定性(A1)、立法效能(A2)、民众支持度(A3)等;经济风险包
数据内容:《中国固定资产投资统计年鉴》是一部全面反映中国固定资产投资情况的权威资料。收集了全国、各省、自治区、直辖市、国民经济各行业有关固定资产投资的统计数据。《中国固定资产投资统计年鉴》1950-2018年,自2019年起更名为《中国投资领域统计年鉴》,其中,2014年的中国固定资产投资统计年鉴没有出,以2013年固定资产投资统计年报可以替代。第二部分为固定资产投资(不含农户)。包括计划总投资5
一、引言:为何聚焦模型 “可解释性”?在机器学习落地实践中,“精准预测” 与 “逻辑可懂” 如同天平的两端。随着梯度提升树模型(如 LightGBM)在回归任务中(如销量预测、房价预估、能耗计算)的广泛应用,其卓越的预测性能已得到行业认可。但与此同时,复杂的集成学习机制也让 LightGBM 陷入 “黑箱困境”—— 模型为何给出该预测结果?关键影响因素是什么?这些问题若无法解答,不仅会降低业务方对
在2000年至2020年期间,全国地级市的固定资产投资形成总额也呈现出持续增长的态势。例如,2000年的固定资产投资形成总额约为1万亿元人民币,到2020年已增长至约8万亿元人民币,显示出固定资产投资对经济增长的积极贡献。例如,2000年的固定资产投资价格指数为100,表示基期价格水平。在2000年至2020年期间,全国285个地级市的固定资产投资总额呈现出显著的增长趋势。2000-2020年 全
农业、林业、牧业和渔业作为国民经济的重要组成部分,对于保障国家粮食安全、促进区域经济发展、实现农业农村现代化和乡村振兴具有重要意义。2000年-2022年全国各省份农林牧渔业总产值统计数据(大数据).zip资源-CSDN文库。
一.基本配置1.项目名称2.爬虫应用路径SPIDER_MODULES = [‘Amazon.spiders’]NEWSPIDER_MODULE = ‘Amazon.spiders’3.客户端User-Agent请求头USER_AGENT = ‘Amazon (+http://www.yourdomain.com)’4.是否遵循爬虫协议ROBOTSTXT_OBEY = False5...
标题段落'html = '标题段落
请注意,以上步骤可能会随着开放平台的政策更新而发生变化,因此在操作前请确保查阅最新的文档和指南。要获取淘宝商品详情API的apikey和apisecret,您需要。
本文介绍了一个基于数据挖掘技术的台风灾害预测系统,旨在通过随机森林算法和多元技术栈(Python、Django、Vue、Scrapy)提升台风路径、强度及影响范围的预测精度。系统整合气象数据采集、清洗、建模与可视化功能,为防灾决策提供科学支持。核心模块包括Scrapy爬虫数据获取、随机森林模型训练及交互式前端展示,有效解决传统预警系统的滞后性问题。项目具备显著社会价值,可优化资源配置,减少灾害损失
APP抓包前面我们了解了一些关于 Python 爬虫的知识,不过都是基于 PC 端浏览器网页中的内容进行爬取。现在手机 App 用的越来越多,而且很多也没有网页端,比如抖音就没有网页版,那么上面的视频就没法批量抓取了吗?答案当然是 No!对于 App 来说应用内的通信过程和网页是类似的,都是向后台发送请求,获取数据。在浏览器中我们打开调试工具就可以看到具体的请求内容,在 App 中我们无法直接..
获取页面里没有商品信息而是登录页面是因为没有cookie信息,所以想要获取淘宝商品信息需要先登录自己的账号得到自己的cookie获取淘宝cookie的方法:首先先登录我们自己的淘宝账号淘宝搜索任意内容后会出现一个新的第三步Name源代码import reimport requestsfrom bs4 import BeautifulSoupurl = 'https://s.taobao.com/s
企业异地投资是指企业在非本地区进行的投资行为,这通常是为了寻找更好的投资机会或分散经营风险。参考了《管理世界》和《中国工业经济》的研究成果,基于关联公司基本文件进行分析。(数据整理)2000-2022年企业异地投资、跨省投资、异地子公司数据。包含:原始数据、代码do文件、最终结果、参考文献。
地缘政治风险月度指数(GPR指数),由美联储经济学家Dario Caldara和Matteo Iacoviello构建,覆盖1970年至2024年7月的全球及43个经济体的风险水平量化数据。GPR指数通过统计《纽约时报》《金融时报》等10家国际报刊中与地缘政治紧张局势相关的关键词(如战争威胁、恐怖行为、军事集结等8类)出现频率,综合计算得出。
本项目的测试环境:win10,python3.7,mediapipe0.8.10,pycharm功能:由于使用的是KNN算法而不是根据各个运动的特点计算骨骼之间的角度来判断动作是否完成,因此本项目可以直接计数引体向上、深蹲和俯卧撑这几种健身运动而几乎无需修改代码,只需要输入视频或调用摄像头时选择一下是哪个运动即可,非常滴好用。各模块和文件介绍: poseembedding.py是人体关键点归一化
Cox比例风险回归模型,通常简称为Cox模型,是一种广义的线性模型,用于研究一种或多种变量对生存时间的影响。事件通常是健康领域如死亡、疾病复发或恢复的事件。它是一种生存分析方法,用于确定哪些因素可能影响患者的生存时间。在使用Cox模型时,通常会收集一组个体的数据,这组数据包括了影响生存时间的一些可能因素(如年龄、性别、疾病阶段等),以及这些个体的生存时间。使用Cox模型将可能的影响因素与生存时间进
该模型的残差用于衡量投资效率,正残差表示过度投资,负残差表示投资不足。Chen模型 结合了Richardson模型和Biddle模型的优点,综合考虑多种因素对投资效率的影响。该模型的残差用于衡量投资效率,正残差表示过度投资,负残差表示投资不足。该模型的残差同样用于衡量投资效率,正残差表示过度投资,负残差表示投资不足。在2000年至2021年间,针对上市公司企业投资效率的研究采用了多种模型,其中Ri
QuantConnect是国际领先的量化交易平台,提供云端量化策略开发、回测与部署服务,支持多资产类别(股票、期货、加密货币等)以及多种编程语言(如C#、Python)。凭借其强大的算法库和与主要券商的集成,QuantConnect成为全球量化交易爱好者和专业投资者的理想平台。
这一路走来非常感谢广大读者的支持
需验证数据字段完整性,确保包含时间戳(精确到毫秒)、价格、成交量、买卖盘等核心字段,并检查时间戳连续性,避免因断点导致统计误差。通过规范的本地数据管理流程,投资者可充分挖掘高频数据的价值,构建具备实战能力的量化策略。df.resample('5T').agg({'开盘价':'first','最高价':'max','最低价':'min','收盘价':'last'})order_imbalance =
特别是对于长江、黄河等重要水系的污染治理,各省加大了水质监测和污染源排查力度,推进了污水处理厂的建设和升级。空气污染治理方面,随着PM2.5等细颗粒物对健康危害的关注,各省纷纷加强了对重污染企业的监管,并推动了清洁能源和新能源汽车的普及。从2002年到2021年,政府投入了大量资金进行污染治理,涵盖了水、气、土壤等多个方面的污染治理工作。此外,一些中西部省份,如四川、河南和山西等地,随着当地经济逐
科研绘图之R语言生存分析KM曲线和累计风险表KM估计R语言展示KM估计的生存函数曲线1、最简单的方法2、利用survminer包绘制3、进一步美化,添加累计风险表格、图例、文本注释KM估计KM估计同时利用生存时间(连续变量)和生存结局(一般为分类变量,用来表示状态)信息,是一种求生存时间函数,即S(t)的方法。KM估计的定义如下:R语言展示KM估计的生存函数曲线1、最简单的方法在R里,有多种实现方
前言本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。小雨 | 作者python教程 | 来源接下来,我们将实现微信朋友圈的爬取。如果直接用 Charles 或 mitmproxy 来监听微信朋友圈的接口数据,这是无法实现爬取的,因为数据都是被加密的。而 Appium 不同,Appium 作为一个自动化测试工具可以直接模拟 App
本文主要分为两个部分:一部分是网络爬虫的概述,帮助大家详细了解网络爬虫;另一部分是HTTP请求的Python实现,帮助大家了解Python中实现HTTP请求的各种方式,以便具备编写HTTP网络程序的能力。01网络爬虫概述接下来从网络爬虫的概念、用处与价值和结构等三个方面,让大家对网络爬虫有一个基本的了解。1. 网络爬虫及其应用随着网络的迅速发展,万维网成为大量信息的载体,如何有效地提取并利用这些信
聚宽量化(JoinQuant)是一款功能强大的量化交易平台,提供了从策略开发、回测到实盘交易的一站式解决方案。聚宽平台支持Python编程,内置丰富的数据接口与回测工具,可以快速验证量化交易策略的有效性。
声明: 本案例仅供学习参考使用,任何不法的活动均与本作者无关1.requests 2.re(内置) 3.pandas 4.pyecharts其他均需要 pip install 模块名。
研究过程中,广义帕累托模型与高维动态藤Copula函数的组合使用,成功实现了研究预期,体现在PIT序列的独立均匀化与VaR超越的合理化。在动态模型与静态模型的比较研究过程中,动态模型预料之内的超越了静态模型的表现,但是,研究结论也表明藤的种类选择同样很关键,错误的藤Copula函数类型,会导致动态化改进模型在错误方向上走得更远。高维动态藤Copula的估计方法还可以进一步优化,如小数据的贝叶斯后验
在电商领域,数据就是企业的核心资产。无论是市场分析、竞品研究,还是精准营销,都离不开对大量商品详情数据的深入挖掘。唯品会作为知名的电商平台,其丰富的商品信息对于众多从业者而言极具价值。本文将详细探讨实现自动批量抓取唯品会商品详情数据的有效途径,助力大家在电商数据处理方面迈出坚实的步伐。
1.背景介绍文本向量化与聚类:实现文本内容的有效聚类1. 背景介绍随着互联网的发展,大量的文本数据在各种领域得到应用,如搜索引擎、社交媒体、新闻推荐等。为了有效地处理和分析这些文本数据,文本向量化和聚类技术成为了重要的工具。文本向量化是将文本数据转换为数值型向量的过程,使得文本数据可以被计算机直接处理。聚类是一种无监督学习方法,可以根据文本数据的相似性自动将其分为不同的类别。2. ...
原理:当短期移动平均线上穿长期移动平均线时买入,下穿时卖出。
基于BigQuant的量化策略实现文章目录一、BigQuant的重要模块说明1.回测模块二、基于技术指标的策略实现1.库函数导入与全局变量初始化2.每日逻辑函数编写策略1: MACD金叉+MA多头买入策略2: 利用MA指标进行择股3.策略结果展示策略1: MACD金叉+MA多头买入策略2: MA择股三、基于QP优化的策略实现1.基于经典QP的handle函数2.增加限制条件使股票具有多样性:3.融
以1985年为起点,GPR数据展示了冷战时期以及后冷战时代的显著变化。然而,随着新世纪的到来,全球范围内的恐怖主义活动、地区冲突及全球化带来的不稳定因素,使得GPR指数在多次波动中反映出国际社会的紧张局势。阿根廷、澳大利亚、比利时、巴西、加拿大、瑞士、智利、中国、哥伦比亚、德国、丹麦、西班牙、芬兰、法国、大不列颠联合王国、香港、印度尼西亚、印度、以色列、意大利、日本、韩国、墨西哥、马来西亚、荷兰、
信用违约风险分类预测:XGBoost +SHAP实践案例
MetaTrader 4(MT4)和 MetaTrader 5(MT5)是全球最广泛使用的外汇和差价合约(CFD)交易平台,广受量化交易者和传统交易者的喜爱。MT4/MT5 量化交易服务平台为用户提供了一套完善的交易工具,支持自动化交易策略的编写、测试和执行。无论是想要进行外汇、股票还是商品等金融工具的交易,MT4/MT5 都能够提供全面的支持。其强大的编程功能、多样化的技术指标和卓越的图表分析能
测试地址:http://qq1012822599.cn:8888/findAllLog
全球地缘政治风险指数(GPR)由美联储经济学家Dario Caldara和Matteo Iacoviello编制,通过分析国际主流报刊中与地缘政治事件相关的关键词频率,量化全球及特定经济体的风险水平。该指数分为“威胁”和“行动”两大子指数,涵盖战争威胁、军事集结、恐怖主义等8类事件,并区分近期(1985-2025.4)与历史(1900-2025)数据。日度数据包含30天移动均线、事件标签等实时指标
作者:Sabir Jana将使用基于多种机器学习分类算法的股票交易策略来预测市场走势。
量化交易,是指以先进的数学模型替代人为的主观判断,利用计算机技术从庞大的历史数据中海选能带来超额收益的多种“大概率”事件以制定策略,减少投资者情绪波动的影响,避免在市场极度狂热或悲观的情况下作出非理性的投资决策。
基于backtrader的唐奇安通道策略实现
一、策略说明策略指标:MACD策略投资标的:国债期货T2006初始资金:100000开始日期:2020-01-14运行天数:31累计收益率:24.35%策略逻辑: 采用10分种K线,通过MACD策略,如果macd出现金叉(柱状由绿变红),为多仓入场信号,进行平空仓与开多仓操作; 如果macd出现死叉(柱状由红变绿),为空仓入场信号,进行平多仓与开空仓操作。二、基本面国债...
开卷有益,多多益善~
tushare库真的很香
using System;using System.Collections.Generic;using System.Linq;using System.Web;using System.Web.UI;using System.Web.UI.WebControls;using System.Drawing;using System.Collections;using System.IO;using
01引言均值回归交易策略是一种经典的交易策略,可以追溯到很早的交易历史。其基本原理是当价格偏离其长期平均水平时,价格趋向于回归到其平均水平,这是由于市场的反复波动和回归特性所导致的。因此,该策略认为价格的偏离程度越大,回归的力度越大,可以通过采取相反的交易方向(即价格偏低时买入,价格偏高时卖出)来获取收益。均值回归交易策略的优点在于其简单易懂、操作便利、风险可控和适用范围广泛等特点。因此,该策略在
一、策略说明(报告日期:2020.2.14)策略指标:均线策略投资标的:螺蚊纲RB2005初始资金:10000开始日期:2020-01-14运行天数:31累计收益率:7.82%策略逻辑: 采用15分种K线,通过传统的双均线策略,即快均线上穿慢均线时则为开仓信号(买入),当快均线下穿慢均线则为平仓信号(卖出)。二、基本面“灰犀牛”下铁矿仍将调整。情绪释放后,行情将回归铁...
高频交易技术:订单簿分析与低延迟架构——从Level 2数据挖掘到FPGA硬件加速的全链路解决方案