处理txt文件并去重处理

1.排序

cat 200W10.txt  200W1.txt  200W3.txt  200W5.txt  200W7.txt  200W9.txt 200W11.txt  200W2.txt  200W4.txt  200W6.txt  200W8.txt  200W.txt

>allw.txt

sort allw.txt | uniq >allnw.txt

2.在user表中创建对应的字段

3.将文本数据导入到数据库中

load data local infile "d:/allw2.txt" into table user fields terminated by '-' lines terminated by '\r\n';

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 1/列出mysql数据库中的所有数据库sqoop list-databases -connect jdbc:mys...
    时待吾阅读 5,136评论 0 0
  • 标签(空格分隔): mysql LOAD DATA INFILE语句用于高速地从一个文本文件中读取行,并写入一个表...
    ahcj_11阅读 33,159评论 0 8
  • 正则表达式 关于正则表达式相信很多学计算机的人都听说过 尤其是做编程行业的人 那什么是正则表达式 正则表达式,又称...
    数据革命阅读 4,406评论 0 1
  • 有段时间真的很埋怨家里人,埋怨爸妈,埋怨舅舅们,埋怨家里的那些亲戚,为什么他们总是让我本就很糟糕的生活愈发的灰暗,...
    戴白子阅读 1,943评论 0 1
  • 上一章 凤九在青丘年轻的一辈里,打架确然算的上是一把好手,况且在课业里面,她能拿得出手的除了和打架有关的外,估计也...
    踏歌娘阅读 103,954评论 16 107