• 售前

  • 售后

热门帖子
入门百科

Linux中将txt导入到mysql的方法教程

[复制链接]
寻梦敦煌 显示全部楼层 发表于 2021-10-25 19:45:03 |阅读模式 打印 上一主题 下一主题
前言
昨天写小项目的时候碰到了一个需求:把txt文档的数据导入到mysql数据库中,开始本来想直接用Mysql Workbench导入TXT文件,但是最后发现不支持TXT导入,结果我吧嗒吧嗒的去把TXT转了Excel,拿到Linux上导入的时候又发现了各种乱码题目。

抱着没有什么是程序员干不了的原则,我手写了一个Python代码直接操作文件举行导入了。结果大概一万多条的文件,导入时间大概两分钟。

下面是具体的代码:
      
  • mysqlpython.py文件:  自界说的连接mysql数据库的类  
  • importtxt.py文件: 读TXT文件并举行插入操作  
  • dict.txt文件: 要操作的TXT文件
mysqlpython.py文件
  1. from pymysql import *
  2. class Mysqlpython:
  3. def __init__(self,database,host="localhost",
  4.      user="root",password="123456",
  5.      charset="utf8",port=3306):
  6.   self.database = database
  7.   self.host = host
  8.   self.user = user
  9.   self.password = password
  10.   self.charset = charset
  11.   self.port = port
  12.   
  13. # 创建数据连接和游标对象
  14. def open(self):
  15.   self.db = connect(host=self.host,
  16.      user=self.user,
  17.      password=self.password,
  18.      port=self.port,
  19.      database=self.database,
  20.      charset=self.charset)
  21.   self.cur = self.db.cursor()
  22. # 关闭游标对象和数据库连接对象
  23. def close(self):
  24.   self.cur.close()
  25.   self.db.close()
  26. # 执行sql命令
  27. def zhixing(self,sql,L=[]):
  28.   self.open()
  29.   self.cur.execute(sql,L)
  30.   self.db.commit()
  31.   self.close()
  32. # 查询功能
  33. def all(self,sql,L=[]):
  34.   self.open()
  35.   self.cur.execute(sql,L)
  36.   result = self.cur.fetchall()
  37.   return result
  38. if __name__ == "__main__":
  39. sqlh = Mysqlpython("dictionary")
  40. sel = "select * from user"
  41. r = sqlh.all(sel)
  42. print(r)
复制代码
importtxt.py文件
  1. import re
  2. import sys
  3. from mysqlpython import Mysqlpython
  4. sqlh = Mysqlpython("dictionary")
  5. def insert(data):
  6. arr = data.split()
  7. name = arr[0]
  8. description = " ".join(arr[1:])
  9. ins = "insert into words(name,description) values(%s,%s)"
  10. sqlh.zhixing(ins,[name,description])
  11. def get_addr():
  12. f = open('./dict.txt')
  13. lines=f.readlines()
  14. for line in lines:
  15.   insert(line)
  16. f.close()
  17. return ''
  18. if __name__ =='__main__':
  19. print(get_addr())
复制代码
dict.py文件(我复制了几条文件)
  1. a    indef art one
  2. abacus   n.frame with beads that slide along parallel rods, used for teaching numbers to children, and (in some countries) for counting
  3. abandon   v. go away from (a person or thing or place) not intending to return; forsake; desert
  4. abandonment  n. abandoning
  5. abase   v. ~ oneself/sb lower oneself/sb in dignity; degrade oneself/sb ;
  6. abash   to destroy the self-possession or self-confidence of:disconcert
  7. abashed   adj. ~ embarrassed; ashamed
  8. abate   v. make or become less
  9. abattoir   n. = slaughterhouse (slaughter)
复制代码
针对差别的分隔符修改一下正则表达式即可。全部代码都贴上去了,直接复制修改下数据库的配置就可以运行了。
总结:
以上就是这篇文章的全部内容了,渴望本文的内容对各人的学习或者工作具有一定的参考学习代价,如果有疑问各人可以留言互换,谢谢各人对脚本之家的支持。

帖子地址: 

回复

使用道具 举报

分享
推广
火星云矿 | 预约S19Pro,享500抵1000!
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

草根技术分享(草根吧)是全球知名中文IT技术交流平台,创建于2021年,包含原创博客、精品问答、职业培训、技术社区、资源下载等产品服务,提供原创、优质、完整内容的专业IT技术开发社区。
  • 官方手机版

  • 微信公众号

  • 商务合作