python牛刀小试导入excel数据到Oracle

实践了一把python操作excel,以及cx_Oracle操作oracle,并读取excel表格数据到oracle。

开发环境

windows10 python3.5

excel操作练习

# encoding: utf-8

import xlrd

# 设置GBK编码
xlrd.Book.encoding = "gbk"

excelPath = r"C:\Users\think\Desktop\盘锦项目\盘锦三期\视频集成相关\视频导入模板.xls"

#打开Excel文件读取数据
data = xlrd.open_workbook(excelPath)
#获取一个工作表
#table = data.sheets()[0]          
#通过索引顺序获取 
#table = data.sheet_by_index(0) #通过索引顺序获取
table = data.sheet_by_name(u'Sheet1')#通过名称获取
#获取整行和整列的值(数组)   
print(table.row_values(1))
print(table.col_values(1))
#获取行数和列数
nrows = table.nrows
ncols = table.ncols
#循环行列表数据
for i in range(1,nrows ):
    print(table.row_values(i))
 
#单元格
cell_A1 = table.cell(0,0).value
cell_C4 = table.cell(1,2).value 
#使用行列索引
cell_A1 = table.row(0)[0].value 
cell_A2 = table.col(1)[0].value
#简单的写入
row = 0 
col = 0 
# 类型 0 empty,1 string, 2 number, 3 date, 4 boolean, 5 error
ctype = 1 
value = "单元格的值"
xf = 0 # 扩展的格式化 
table.put_cell(row, col, ctype, value, xf) 
table.cell(0,0)  #单元格的值' 
table.cell(0,0).value #单元格的值'

oracle操作练习

import cx_Oracle

#参数:用户名/密码@监听(server主机:server端口/server名称)
#conn = cx_Oracle.connect("test/root@10.80.17.5:1521/userTest")
#参数为:用户名、密码、监听(server主机:server端口/server名称)
#conn = cx_Oracle.connect("test", "root", "10.80.17.5:1521/userTest")
#参数为:用户名、密码、TSN
conn = cx_Oracle.connect("tyum_um", "DEV_TYUM_UM", "PJDB_215")
#创建cursor
cursor = conn.cursor()
sql = "select * from t_um_ob"
#执行sql语句
cursor.execute(sql)
#获取所有的记录
one = cursor.fetchall()
#一条一条的访问记录
for x in one:
    print(x)   
#关闭cursor
cursor.close()
#关闭连接
conn.close()

读取excel导入到oracle

需求:读取excel数据并更新回oracle,excel表格数据见下图:

excel数据

参考代码如下,做了简单的错误处理:

# encoding: utf-8

import xlrd
import cx_Oracle
import re


####配置项######
# 设置excel GBK编码
xlrd.Book.encoding = "gbk"
#Oracle连接配置:用户名、密码、TSN
conn = cx_Oracle.connect("ty_zhzf", "DEV_TY_ZHZF", "PJDB_215")
cursor = conn.cursor()  
#excel路径
excelPath = r"C:\Users\think\Desktop\盘锦项目\盘锦三期\视频集成相关\宜居乡村视频点位2.0.xlsx"

class Camera(object):
    pass

def getFloatValue(value , default=0.0):    
    if( value == None or len(str(value))==0):
        return default
    else:
        return float(value)

def run():
    #打开Excel文件读取数据
    data = xlrd.open_workbook(excelPath)
    table = data.sheets()[0] 
    #获取行数和列数
    nrows = table.nrows   
    ncols = table.ncols


    sql = """update t_sp_video set c_x=:c_x,c_y=:c_y where c_camera_name =:c_camera_name"""


    colName=""
    cameraFullName=""
    cameraName=""
    lon=0.0
    lat=0.0
    cellRowNum=-1
    lstCameraName=[]
    camera=None
    lstCamera =[]
    lstFails =[]

    #遍历excel表
    if(nrows>0):
        #循环行列表数据,从第1行开始;
        for i in range(0,nrows ):
            
            try:
                colName = table.row_values(i)[0]
                if(colName =="点位名称") :
                    cameraFullName = table.row_values(i)[1]
                    regex = re.search('(?<=[村| 会])[\s|\S]*?(?=[\(|\(])',str(cameraFullName))
                    
                    if(regex == None):
                        #cameraName = cameraFullName[-11:-7]
                        cameraName =""                       
                        print("第 {0} 行解析摄像头名称失败!原文:{1}".format(i+1,str(cameraFullName)))
                        cameraFullName=""
                        continue
                    else :
                        cameraName = regex.group()
                        lstCameraName.append(cameraName)
                        cellRowNum = i+1
                        continue
                if(colName =="纬度") :
                    lat = getFloatValue(table.row_values(i)[1])
                    continue
                if(colName =="经度") :
                    lon = getFloatValue(table.row_values(i)[1])
                    
                if(lat>0 and lon >0 and len(cameraName)>0) :                    
                    camera = Camera()
                    camera.cameraName = cameraName
                    camera.lat=lat
                    camera.lon=lon
                    camera.fullName=cameraFullName
                    camera.cellRowNum=cellRowNum
                    lstCamera.append(camera)                   
            except Exception as ex:
                print("第 {0} 行解析摄像头名称失败!,失败原因:{1}".format(i+1,str(ex)))
            lon=-0.0
            lat=-0.0
        
        
        # #查找重复的
        # duplicates    =   set([x  for x   in  lstCamera   if  lstCameraName.count(x.cameraName)>1]) #count()=>total number of occurrences of x in s
        # for item in duplicates :
        #     print(item)
        for item in lstCamera :
            if(lstCameraName.count(item.cameraName)>1):
                lstCamera.remove(item)
                print("ERROR! 第 {0} 行摄像头名称有重复!原文:{1}".format(item.cellRowNum,item.fullName))
                lstFails.append(item.cellRowNum)
            else :                
                cursor.execute(sql,{
                    'c_x' :  item.lon,
                    'c_y': item.lat,
                    'c_camera_name' : item.cameraName                                  
                    })
                rowCount = cursor.rowcount
                if(rowCount==1):
                    # print("第 {0} 行导入成功!原文:{1} 受影响行数 {2}".format(item.cellRowNum,item.fullName,rowCount))
                    pass
                elif (rowCount >1) :
                    print("ERROR! 第 {0} 行导入有重复!原文:{1} 受影响行数 {2}".format(item.cellRowNum,item.fullName,rowCount))
                    lstFails.append(item.cellRowNum)
                elif (rowCount <=0) :
                    print("第 {0} 行导入失败!原文:{1}".format(item.cellRowNum,item.fullName))
                    lstFails.append(item.cellRowNum)
                    
        conn.commit()
        cursor.close()
        conn.close()  
        print(lstFails)   
        print(len(lstFails))   
        
run()

总体感觉比写强类型开发语言要爽一些,和写JS一样,爽得一B。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,332评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,508评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,812评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,607评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,728评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,919评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,071评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,802评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,256评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,576评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,712评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,389评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,032评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,798评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,026评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,473评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,606评论 2 350

推荐阅读更多精彩内容