当前位置:网站首页 > SQL数据库编程 > 正文

pymysql连接池实现(pymysql连接mysql)



Python爬虫几个步骤教你写入mysql数据库

Python爬虫实现爬取网站中的数据并存入MySQL数据库中,在爬取的时候总要涉及到数据持久化存储,当然有很多中存储的方式,简单点的有excel、txt、json、csv等等。存入mysql我觉的有好多操作空间,如果是开发python后端也可以熟悉一下sql语句,存入数据库的方法也是试了些许网上一些方法,现在把完整功能供大家参考。

直接搜索 phpStudy安装即可,按照下图配置数据库。用户名密码自行设置,然后返回首页启动即可。

打开刚安装的phpstudy安装一个mysql客户端连接,数据库是本地的host可以填 127.0.0.1 或 localhost用户名密码是上面设置的

MySQL创建对应的表

构造 SQL 语句的字符串 sql ,然后通过 cursor.excute(sql) 执行,下面简单的封装,直接复制即可用。

这次简单点咱们用xpath就行,有一个小技巧咱们在爬取的网页打开开发都模式F12.如下图红框复制第一个或都第二个就行。

下面代码是实现爬取数据然后存入数据库类,大家可参考

最终效果:

到此这篇pymysql连接池实现(pymysql连接mysql)的文章就介绍到这了,更多相关内容请继续浏览下面的相关推荐文章,希望大家都能在编程的领域有一番成就!

版权声明


相关文章:

  • sqlfor循环用法(sql的foreach循环)2025-11-14 20:45:07
  • sql文件转换成csv(sql文件转json)2025-11-14 20:45:07
  • sqlldr字符集(sqlldr字符编码)2025-11-14 20:45:07
  • sqlldr 用法(sqlldr在哪里执行)2025-11-14 20:45:07
  • mysql查询锁表日志(mysql查询锁表记录)2025-11-14 20:45:07
  • mysql建立主外键关系(mysql怎么创建主外键关系)2025-11-14 20:45:07
  • oracle和mysql的区别和优缺点(oracle与mysql的优缺点对比)2025-11-14 20:45:07
  • pymysql占位符用法(pymysql 占位符)2025-11-14 20:45:07
  • pymysql怎么安装(pymysql下载安装)2025-11-14 20:45:07
  • sql文件在哪个位置打开(sql怎么打开文件)2025-11-14 20:45:07
  • 全屏图片