AI写代码之GO+Python写个爬虫系统

下面我们我们来利用AI,来用GO+Python写个爬虫系统。

帮我写一个Python语言爬取数据写入Mysql的案例,信息如下:
1、Mysql数据库地址是:192.168.1.20 ,mysql用户名是:root, Mysql密码是:123456,要操作
的数据库是:ginxiaomi
2、要爬取的网址是http://bbs.itying.com/
3、需要把爬取的每一条新闻信息写入到artice表,article表有id,title,status字段
pip install requests beautifulsoup4 pymysql
import requests
from bs4 import BeautifulSoup
import pymysql
# 数据库连接配置
db_config = {
'host': '192.168.1.20',
'user': 'root',
'password': '123456',
'database': 'ginxiaomi',
'charset': 'utf8mb4',
'cursorclass': pymysql.cursors.DictCursor
}
# 连接到MySQL数据库
connection = pymysql.connect(**db_config)
try:
with connection.cursor() as cursor:
# 假设URL
url = 'http://bbs.itying.com/'
# 发送HTTP请求
response = requests.get(url)
response.raise_for_status() # 如果请求失败,抛出HTTPError异常
# 解析HTML
soup = BeautifulSoup(response.text, 'html.parser')
# 假设每个新闻项都在一个class为'news-item'的div中
news_items = soup.find_all('div', class_='topic_title_wrapper')
for item in news_items:
# 假设每个新闻项有title和status(这里status可能需要根据实际页面结构进行调整)
title = item.find('a').get_text(strip=True) if item.find('a') else ''
status = '1' # 假设每个新闻都是激活状态,具体需要根据实际页面调整
# 插入数据到MySQL
sql = "INSERT INTO article (title, status) VALUES (%s, %s)"
cursor.execute(sql, (title, status))
# 提交事务
connection.commit()
print(cursor.rowcount, "record inserted.")
finally:
connection.close()
print("Done.")

不了解AI基础知识的同学可能看不懂,可以看看下面的视频了全面来了解,通过对AI的学习,我们会发现AI的能力远超我们的想象。(说明:前1-9讲是DeepSeek学习内容,需要全面学习AI编程的话可以从第10讲开始学)

【2025年新版】DeepSeek教程

前面我们也有详细分析Prompt提示词在多个领域的应用,从热点追踪、活动策划、文章撰写及实体抽取,到内容解释与优化、评论与说说创作,再到结合AI助手生成短视频;同时,Prompt提示词还可以快速辅助完成周报、简历、邮件及情书等文档撰写,并有效整理文档资料。针对运营编辑岗位,课程提供了文案支持、内容审核与舆情分析、数据分析及商业计划书撰写的Prompt技巧。此外,还深入讲解了利用Prompt生成PPT、思维导图,以及借助Mermaid.js生成图表、流程图、序列图、时间线图的方法。在编程领域,课程涵盖了AI编写前端、Flutter、嵌入式及Python、Go、Node.js等多种语言代码的Prompt应用,并扩展到Nodejs、Golang、Python结合MYSQL的Prompt爬虫系统开发。最后,课程还传授了AI编程Prompt技巧,包括接口文档生成、代码解释、代码与注释生成、语法检查、服务器命令解析、错误排查咨询,以及简历、报告、周报等文档撰写的Prompt高效方法,助力学员在任何场景中能游刃有余的使用Prompt Engineering。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/76712.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

从单模态到多模态:深度生成模型的演进历程

在人工智能领域,生成模型的发展一直是研究热点。从最早的自编码器到如今的多模态扩散模型,这一技术路线不断突破,为创意内容生成、数据增强和表示学习等领域带来革命性变化。本文将详细介绍几种关键生成模型的技术原理和演进路径,…

【系统架构设计师】嵌入式微处理器

目录 1. 说明2. 微处理器(MPU)3. 微控制器(MCU)4. 信号处理器(DSP)5. 图形处理器(GPU)6. 片上系统(SoC)7. 例题7.1 例题1 1. 说明 1.嵌入式微处理器主要用于处理相关任务。2.由于嵌入式系统通常都在室外使用,可能处于不同环境,因此,选择处理…

Cursor Free VIP 重置进程错误,轻松恢复使用!

快速修复 Cursor Free VIP 重置进程错误,轻松恢复使用! 在使用 Cursor Free VIP 的过程中,突然遭遇 “重置进程错误” 是不是让你手忙脚乱?当屏幕弹出 “文件未找到: C:\Users\用户\AppData\Local\Programs\Cursor\resources\app…

dolphinscheduler实现(oracle-hdfs-doris)数据ETL

dolphinscheduler执行 完整脚本(自行替换相关变量)配置文件conf配置文件解析脚本转base64脚本 完整脚本(自行替换相关变量) user_olsh conf/getInfo.sh Oracle user conf/databases.conf password_olsh conf/getInfo.sh Oracle password conf/databases.conf dblink_olsh conf…

小小矩阵设计

在电气设计图中,矩阵设计的接线方法是通过结构化布局实现多灵活链接的技术,常用于信号切换、配电调压或更加复杂的控制场景。 今天聊一种在电气图纸中用到的一种简单矩阵接法,一眼就看明白,很大程度简化了程序控制点和继电器的使用…

【音视频】FFmpeg解封装

解封装 复用器,比如MP4/FLV 解复用器,MP4/FLV 封装格式相关函数 avformat_alloc_context(); 负责申请一个AVFormatContext结构的内存,并进行简单初始化avformat_free_context(); 释放该结构里的所有东西以及该结构本身avformat_close_input();关闭解复…

1️⃣5️⃣three.js_GUI辅助调试器

15、GUI辅助调试器 3D虚拟工厂在线体验 GUI辅助调试器将原本需要修改代码调整参数并刷新页面的操作,简化为直接在GUI中实时调整,实现所见即所得的效果。 导入GUI 库 //引入GUI辅助调试器 import { GUI } from three/addons/libs/lil-gui.module.min.js…

Redis 的指令执行方式:Pipeline、事务与 Lua 脚本的对比

Pipeline 客户端将多条命令打包发送,服务器顺序执行并一次性返回所有结果。可以减少网络往返延迟(RTT)以提升吞吐量。 需要注意的是,Pipeline 中的命令按顺序执行,但中间可能被其他客户端的命令打断。 典型场景&…

Linux下的网络管理配置

一、 IPv4原理 IPv4(Internet Protocol version 4),采用32位地址。IPv4地址通常用点分十进制表示,如 192.168.1.10。 IPv4网络通信基于数据包交换原理,当一台主机要向另一台主机发送数据时,会将数据分割成…

基于Python(Django)+SQLite实现(Web)校园助手

校园助手 本校园助手采用 B/S 架构。并已将其部署到服务器上。在网址上输入 db.uplei.com 即可访问。 使用说明 可使用如下账号体验: 学生界面: 账号1:123 密码1:123 账户2:201805301348 密码2:1 # --------------…

unity动态骨骼架设+常用参数分享(包含部分穿模解决方案)

Unity骨骼物理模拟插件Dynamic Bone Dynamic Bone 可用于对角色的骨骼(bones)或者铰链系统(joints)施加物理效果。 物理效果可以使得游戏角色的头发、衣服、胸部或者是其他的任何部位,都可以以近似真实的状态运动。 …

科技天眼守望农田:珈和卫星遥感监测赋能智慧农业,护航粮食安全新未来

农情监测与粮食安全密切相关,以往农作物的长势、环境、病虫害、灾情等相关数据和图像信息都是靠物联网硬件及县、镇、村等人力来完成,不仅要耗费大量人力、物力,而且数据时效性、准确性较差。珈和科技开发建设农情遥感监测系统,运…

【TeamFlow】4.2 Yew库详细介绍

Yew 是一个用于构建高效、交互式前端 Web 应用程序的现代 Rust 框架,它借鉴了 React 和 Elm 等框架的设计理念,同时充分利用 Rust 的语言特性。 核心特性 基于组件的架构 Yew 采用组件化开发模式,类似于 React: 组件是可重用的 UI 构建块 …

毕设 - 数字孪生智慧农场(vue+高德地图)项目分享

感兴趣的同学可以私信我或者在下方添加我的qq 在线地址: 数字孪生智慧农场

深入理解 VMware 虚拟机网络模式:为虚拟化管理铺平道路

随着云计算和虚拟化技术的快速发展,VMware作为行业领军者,在企业的IT基础设施中扮演着越来越重要的角色。无论是开发、测试还是生产环境,虚拟机(VM)都成为了我们不可或缺的工具。在VMware中,网络是虚拟机能…

安恒安全渗透面试题

《网安面试指南》https://mp.weixin.qq.com/s/RIVYDmxI9g_TgGrpbdDKtA?token1860256701&langzh_CN 5000篇网安资料库https://mp.weixin.qq.com/s?__bizMzkwNjY1Mzc0Nw&mid2247486065&idx2&snb30ade8200e842743339d428f414475e&chksmc0e4732df793fa3bf39…

代码随想录算法训练营第五十三天 | 105.有向图的完全可达性 106.岛屿的周长

105.有向图的完全可达性 题目链接:101. 孤岛的总面积 文章讲解:代码随想录 视频讲解:图论:岛屿问题再出新花样 | 深搜优先搜索 | 卡码网:101.孤岛总面积_哔哩哔哩_bilibili 思路: 1.确认递归函数&…

蓝桥杯 18.分考场

分考场 原题目链接 题目描述 有 n 个人参加某项特殊考试。 为了公平,要求任何两个认识的人不能分在同一个考场。 你的任务是求出最少需要分几个考场才能满足这个条件。 输入描述 第一行:一个整数 n,表示参加考试的人数(1 ≤…

分布式光纤测温技术让森林火灾预警快人一步

2025年春季,多地接连发生森林火灾,累计过火面积超 3万公顷。春季历来是森林草原火灾易发、多发期,加之清明节已到来,生产生活用火活跃,民俗祭祀用火集中,森林火灾风险进一步加大。森林防火,人人…

前端笔记-Vue3(上)

学习参考视频:尚硅谷Vue3入门到实战,最新版vue3TypeScript前端开发教程_哔哩哔哩_bilibili vue3学习目标: VUE 31、Vue3架构与设计理念2、组合式API(Composition API)3、常用API:ref、reactive、watch、c…