lili 发布的文章 - 十指的世界

lili 1月前 ·

Python爬虫实战：拼多多商品数据抓取与数据分析

Python爬虫实战：拼多多商品数据抓取与数据分析一、项目概述通过Python Requests、BeautifulSoup和pandas库实现拼多多商品数据抓取，结合反爬策略绕过技巧与完整数据分析流程。二、准备工作python所需库安装pip install requests beautifulsoup4 pandas matplotlib伪装浏览器头部headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36', 'Referer': 'https://www.pindu...

0 0 0

Python爬虫拼多多数据分析反爬策略

OpenVPN 路由设置指南

lili 1月前 ·

OpenVPN 路由设置指南

OpenVPN 路由设置指南网络拓扑结构客户端设备 (192.168.1.0/24) ├── OpenVPN 服务器 (10.8.0.1)└── 目标网络 (192.168.2.0/24)核心配置步骤服务器端配置bashpush "route 192.168.2.0 255.255.255.0"客户端配置bashroute 192.168.2.0 255.255.255.0 10.8.0.1路由验证命令baship route showtraceroute 192.168.2.5常见问题排查确认IP转发已启用sysctl net.ipv4.ip_forward检查防火墙规则iptable...

0 0 0

OpenVPN 路由配置 VPN隧道

Python数据分析入门指南：准备工作详解

lili 1月前 ·

Python数据分析入门指南：准备工作详解

第1章准备工作1.1 环境配置Anaconda发行版安装推荐使用Anaconda管理Python数据分析环境包含180+科学计算包（NumPy/pandas/Matplotlib等）支持Windows/macOS/Linux系统bash创建独立环境conda create -n pyanalysis python=3.9核心依赖包NumPy：多维数组运算pandas：结构化数据处理Matplotlib：数据可视化SciPy：科学计算工具scikit-learn：机器学习库1.2 开发工具Jupyter Notebook交互式代码开发环境支持Markdown文档与可视化输出便捷的代码分段...

0 0 0

Python数据分析 NumPy pandas

数据需求全解析：核心场景、来源渠道与获取策略

lili 1月前默认分类

数据需求全解析：核心场景、来源渠道与获取策略

数据需求全解析：核心场景、来源渠道与获取策略一、数据需求的核心类型1. 商业决策类需求市场趋势分析：消费者偏好、行业动态竞争对手监测：定价策略、市场份额风险评估：金融风控、供应链稳定性2. 产品研发类需求用户行为数据：点击流、使用时长、功能偏好A/B测试结果：功能迭代效果、界面优化反馈设备传感器数据：IoT设备监测、环境参数3. 学术科研类需求实验观测数据：生物样本、物理实验记录社会调查数据：人口普查、民意调查历史存档数据：古籍数字化、气象历史记录二、主流数据来源渠道公开数据集平台平台名称数据类型获取方式Kaggle竞赛数据集/社区共享免费下载国家统计局宏观经济/人口普查官网开放APIG...

0 0 0

python 数据采集数据分析

AI对数据的重要性

lili 1月前 ·

AI对数据的重要性

AI对数据的关键作用一、数据是AI的基石训练基础机器学习模型通过海量数据学习模式（如ImageNet数据集包含1400万张标注图像）自然语言处理依赖TB级文本数据（GPT-3训练数据达45TB）性能决定因素python数据量与模型准确率关系示例import matplotlib.pyplot as pltdata_size = [1k, 10k, 100k, 1M]accuracy = [65%, 78%, 92%, 98%]plt.plot(data_size, accuracy)二、数据质量的影响医疗AI案例：使用错误标注的X光片训练导致误诊率增加37%数据清洗可使模型F1值提升22...

0 0 0

人工智能机器学习大数据

发布者：lili

Python爬虫实战：拼多多商品数据抓取与数据分析

OpenVPN 路由设置指南

Python数据分析入门指南：准备工作详解

数据需求全解析：核心场景、来源渠道与获取策略

AI对数据的重要性

最近评论

博客文章RSS订阅

博客评论RSS订阅

登录

发布者：lili

Python爬虫实战：拼多多商品数据抓取与数据分析

OpenVPN 路由设置指南

Python数据分析入门指南：准备工作详解

数据需求全解析：核心场景、来源渠道与获取策略

AI对数据的重要性

最近评论

博客文章RSS订阅

博客评论RSS订阅