python

小白学大数据15 分钟前
java·开发语言·爬虫·python
Python爬虫伪装策略:如何模拟浏览器正常访问JSP站点在编写代码之前,理解我们的“对手”至关重要。JSP站点通常通过以下几种方式识别和拦截爬虫:我们的目标是将一个赤裸的HTTP请求,包装成一个由真实浏览器发出的、可信的请求。
qq_2148032913 小时前
python·arcgis·安卓
ArcGIS坐标偏移终极解决方案:Runtime与GDB互转无偏移实践问题背景 在ArcGIS 10.3 + Python 2.7环境下,PC端实现数据下发,APP实现数据展示及野外调查,因此需要进行Runtime地理数据库(.geodatabase)与文件地理数据库(.gdb)相互转换,经常遇到坐标偏移问题。这种偏移虽然微小(通常0.000001度级别),但在高精度应用中不可接受。arcpy把gdb文件转为.geodatabase文件时,再由.geodatabase转回gdb文件时,图斑出现了偏移,偏移情况如下图所示: 问题原因:偏移根源是Runtime创建或复制过程中A
头发还在的女程序员2 小时前
开发语言·python
三天搞定招聘系统!附完整源码随着经济的快速发展和市场竞争的日益激烈,企业对于人才的需求愈发迫切。然而,招聘渠道的分散、简历筛选的繁琐以及招聘周期的漫长,给企业招聘带来了诸多困扰。同时,求职者在寻找合适工作时,也面临着岗位信息不真实、投递反馈不及时等问题。
温轻舟2 小时前
开发语言·python·word·自动化工具·温轻舟
Python自动办公工具06-设置Word文档中表格的格式本项目是基于PyQt5和python-docx库开发的图形化应用程序,用于对Word文档中的表格进行格式化设置。用户可以通过直观的界面调整表格的各种格式属性,包括基本格式、条件格式、边框和背景等
花酒锄作田2 小时前
python·fastapi
[python]FastAPI-Tracking ID 的设计在实际业务中,根据 tracking_id 追查日志中一条请求的完整处理路径是一个比较常见的需求。不过 FastAPI 官方并没有提供相对应的功能,因此需要开发者自行实现。本文介绍如何基于 contextvars,为每次请求的完整流程都添加一个 tracking_id,并在日志中记录。
AI-智能2 小时前
人工智能·python·自然语言处理·llm·embedding·agent·rag
别啃文档了!3 分钟带小白跑完 Dify 全链路:从 0 到第一个 AI 工作流1什么是DifyDify 是开源大语言模型(LLM) 应用开发平台,融合后端即服务和 LLMOps 理念,开发者能快速搭建生产级生成式 AI 应用,非技术人员也可参与 AI 应用定义与数据运营。
d***95623 小时前
爬虫·python·自动化
爬虫自动化(DrissionPage)目录?一.介绍:下载DrissionPage,还是我们熟悉的pip:环境准备:?二.基本代码:它对于的导包和类使用:
APIshop3 小时前
开发语言·爬虫·python
Python 零基础写爬虫:一步步抓取商品详情(超细详解)面向人群:从未写过爬虫、甚至 Python 也是刚入门 目标:把“商品页”变成“表格里的数据” 学完:你能在本地跑通一套通用模板,淘宝 / 京东 / 拼多多 / 1688 想换就换
二川bro4 小时前
python·机器学习·自动化
AutoML自动化机器学习:Python实战指南在数据驱动决策的2025年,AutoML(自动化机器学习)已成为企业降本增效的核心技术。通过自动化数据预处理、特征工程、模型选择和超参数调优等环节,AutoML将原本需要数周的建模流程压缩至几小时,同时降低技术门槛,使业务人员也能参与模型开发。本文基于Python生态,结合最新工具实践,系统解析AutoML的实战应用。
杨超越luckly4 小时前
python·数据可视化·openstreetmap·电力数据·overpass api
基于 Overpass API 的城市电网基础设施与 POI 提取与可视化在当今地理信息系统(GIS)与位置智能迅速发展的背景下,OpenStreetMap(OSM)作为全球最大的开源地图数据项目,已成为学术研究、商业应用和社区制图的重要数据来源。然而,面对 OSM 庞大而复杂的全球数据集,如何高效、精准地提取所需信息成为使用者面临的关键挑战。为此,Overpass API 应运而生——它是一个专为查询 OpenStreetMap 数据而设计的高性能只读接口,允许用户通过简洁而灵活的查询语言(如 Overpass QL 或 XML 格式),按地理范围、要素类型、标签属性等条件动
q***23575 小时前
数据库·python·sql
python的sql解析库-sqlparsesqlparse 是一个 Python 库,是一个用于 Python 的非验证 SQL 解析器, 用于解析 SQL 语句并提供一个简单的 API 来访问解析后的 SQL 结构。可以帮助解析复杂的 SQL 查询,提取信息,或者对 SQL 语句进行一些基本的分析和操作。
18你磊哥5 小时前
前端·python·django·sqlite
Django WEB 简单项目创建与结构讲解下面我将带你创建一个完整的 Django 小项目,并详细讲解每个部分。创建后的目录结构如下:创建 templates/home.html:
月殇_木言6 小时前
开发语言·python
Python期末复习生成式表达式(Generator Expression)是 Python 中一种紧凑、高效的循环语法,核心作用是动态生成可迭代对象(逐个产生元素,而非一次性创建完整列表 / 集合),语法简洁且内存占用低。 它和你可能听过的 “列表推导式”([x for x in …])语法相似,但用圆括号 () 包裹,本质是 “生成器”(Generator)—— 只有在迭代时才计算元素,迭代一次消耗一个元素,不会提前占用大量内存。 生成式表达式的基本语法
BBB努力学习程序设计7 小时前
python·pycharm
Python面向对象编程:从代码搬运工到架构师面向对象编程(OOP)让你用现实世界的思维来组织代码,把数据和操作封装成对象,让代码更模块化、更易维护
rising start8 小时前
python·正则表达式
五、python正则表达式目录1、正则表达式概述1.1、正则表达式的作用1.2、正则表达式概念1.3、正则表达式的功能2、正则表达式基础语法
BBB努力学习程序设计8 小时前
python·pycharm
Python错误处理艺术:从崩溃到优雅恢复的蜕变错误处理让你的代码在遇到问题时不会立即崩溃,而是优雅地处理异常情况,继续运行或给出有意义的提示看看这个没有错误处理的危险代码:
我叫黑大帅8 小时前
前端·后端·python
什么叫可迭代对象?为什么要用它?作为 CS 小白,刚接触编程时难免会被 “可迭代对象”“迭代器”“生成器” 这些概念绕晕 🤔。但你可能已经在不知不觉中用过它 —— 比如用 for 循环遍历列表、字符串,或者处理字典的键值对,这些背后都离不开 “可迭代对象” 的支持。
Dillon Dong8 小时前
python·ubuntu·django
Django + uWSGI 部署至 Ubuntu 完整指南示例配置:应用配置:内容:在项目根目录创建 uwsgi.ini:配置内容:服务配置:通过以上步骤,你可以在 Ubuntu 22.04 上成功部署 Django + uWSGI + Nginx 的生产环境。关键点包括:
k***82519 小时前
开发语言·爬虫·python
python爬虫——爬取全年天气数据并做可视化分析目标内容界面:查找方法:find(): 查找第一个匹配到的节点。find_all(): 查找所有匹配到的节点,并返回一个列表。
new_dev9 小时前
爬虫·python·媒体
Python网络爬虫从入门到实战爬虫能做什么2016年这场美国总统竞选被媒体称作“第一次数字化竞选”,希阿姨和川大大都组建了庞大的技术团队,将大量资金花在获取和使用投票者的信息上。民意调查结果,一直是总统大选时最倚重的数据来源。在长达半年的总统竞选活动中,会有许多组织或机构通过不同方式进行大量调查,并将结果汇总整理加工成民意调查数据。在更大的数据规模上,总统候选人们也采用了同样的策略,所依赖的数据来源也不仅仅是民意调查结果,还涵盖了诸多的如facebook这类的社交网站和公开及私有的数据库。