如何在 Python 中读取 cx_Oracle.LOB 数据？

Question

我有这样的代码：

    dsn = cx_Oracle.makedsn(hostname, port, sid)
    orcl = cx_Oracle.connect(username + '/' + password + '@' + dsn)
    curs = orcl.cursor()
    sql = "select TEMPLATE from my_table where id ='6'"
    curs.execute(sql)
    rows = curs.fetchall()
    print rows
    template = rows[0][0]
    orcl.close()
    print template.read()

当我执行print rows时，我得到这个：

[(<cx_Oracle.LOB object at 0x0000000001D49990>,)]

但是，当我执行print template.read()时，我收到此错误：

cx_Oracle.DatabaseError：句柄无效！

我如何获取和读取这些数据？谢谢。

Answer 1

我发现在使用 cx_Oracle.LOB.read() 方法之前关闭与 Oracle 的连接时会发生这种情况。

orcl = cx_Oracle.connect(usrpass+'@'+dbase)
c = orcl.cursor()
c.execute(sq)
dane =  c.fetchall()

orcl.close() # before reading LOB to str

wkt = dane[0][0].read()

我得到：数据库错误：无效句柄！

但是下面的代码可以工作：

orcl = cx_Oracle.connect(usrpass+'@'+dbase)
c = orcl.cursor()
c.execute(sq)
dane =  c.fetchall()

wkt = dane[0][0].read()

orcl.close() # after reading LOB to str

Answer 2

想通了。我必须做这样的事情：

curs.execute(sql)        
for row in curs:
    print row[0].read()

Answer 3

我在稍微不同的环境中遇到了同样的问题。我需要查询一个+27000行的表，结果发现cx_Oracle在一段时间后切断了与数据库的连接。

当与数据库的连接打开时，您可以使用 cx_Oracle.Lob 对象的 read() 方法将其转换为字符串。但是，如果查询带来的表太大，它将无法工作，因为连接将在某个时刻停止，并且当您想要从查询中读取结果时，您将在 cx_Oracle 对象上出现错误。

我尝试了很多事情，比如设置
connection.callTimeout = 0（根据文档，这意味着它将无限期地等待），使用 fetchall() ，然后将结果放在数据帧或 numpy 数组上，但我永远无法读取 cx_Oracle.Lob 对象。

如果我尝试使用 pandas.DataFrame.read_sql(query, connection) 运行查询，数据帧将包含连接关闭的 cx_Oracle.Lob 对象，从而使它们无用。 （同样，只有当表非常大时才会发生这种情况）

最后，我找到了一种通过立即查询和创建 csv 文件来解决这个问题的方法，尽管我知道这并不理想。

def csv_from_sql(sql: str, path: str="dataframe.csv") -> bool:
try: 
    with cx_Oracle.connect(config.username, config.password, config.database, encoding=config.encoding) as connection:
        connection.callTimeout = 0
        data = pd.read_sql(sql, con=connection)
        data.to_csv(path)
        print("FILE CREATED")
except cx_Oracle.Error as error: 
    print(error)
    return False
finally: 
    print("PROCESS ENDED\n")
    return True

def make_query(sql: str, path: str="dataframe.csv") -> pd.DataFrame:
if csv_from_sql(sql, path):
    dataframe = pd.read_csv("dataframe.csv")
    return dataframe
return pd.DataFrame()

这花了很长时间（大约 4 到 5 分钟）才带来了我的 +27000 行表，但当其他一切都不起作用时它就起作用了。

如果有人知道更好的方法，这对我也会有帮助。

Answer 4

你基本上必须循环遍历 fetchall 对象

dsn = cx_Oracle.makedsn(hostname, port, sid)
orcl = cx_Oracle.connect(username + '/' + password + '@' + dsn)
curs = orcl.cursor()
sql = "select TEMPLATE from my_table where id ='6'"
curs.execute(sql)
rows = curs.fetchall()
for x in rows:
   list_ = list(x)
   print(list_)

Answer 5

for循环中应该有一个额外的逗号，请参见下面的代码，我在for循环中的x后面提供了一个额外的逗号。

dsn = cx_Oracle.makedsn(hostname, port, sid)
orcl = cx_Oracle.connect(username + '/' + password + '@' + dsn)
curs = orcl.cursor()
sql = "select TEMPLATE from my_table where id ='6'"
curs.execute(sql)
rows = curs.fetchall()
for x, in rows:
    print(x)