python 读取 postgreSQL 数据保存CSV文件


self.cursor.copy_expert("COPY (%s) TO STDOUT DELIMITER '`'"%(cmd),open(self.dump_file,"w"))



import psycopg2
import os
import csv
ROOT_DIR = os.path.join(os.path.dirname(os.path.abspath(__file__)),"..")
CSV_SEP = '`'

class Test():
def __init__(self):
self.database = 'test'
self.user = '###'
self.host = '###'
self.password = '###'
self.conn = psycopg2.connect("dbname='" + self.database + "' user='" + self.user + "' host='" + self.host + "' password='" + self.password + "'")
self.cursor = self.conn.cursor()
self.dump_file = 'test'

def dump_Test(self):
cmd='select * from public."Table1"'
print cmd
f = "%s_navstrand.csv" % (self.dump_file)
self.cursor.copy_expert("COPY (%s) TO STDOUT DELIMITER '`' CSV " % (cmd), open(f, "w"))

def read_csv2(self):
processcount = 0
f = "%s_navstrand" % (self.dump_file)
with open(f, "r", 1024 * 1024 * 1024) as csv_f:
for line in csv_f:
print line
def read_csv(self):
processcount = 0
f = "%s_navstrand.csv" % (self.dump_file)
with open(f) as csvfile:
lines = csv.reader(csvfile,delimiter='`')
for line in lines:
print line
def get_statistic(self):
self.dump_Test()
self.read_csv()

if __name__ == "__main__":
t = Test()
t.get_statistic()

转载于:https://www.cnblogs.com/dasheng-maritime/p/7153784.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python中,数据读取是非常常见的任务,因为Python支持多种类型的数据源和格式。以下是一些主要的数据读取方法: 1. **文本文件(txt、csv)**:`open()` 函数用于打开文件,然后可以使用 `read()` 或 `readlines()` 方法读取内容。对于CSV文件,pandas库(`pd.read_csv()`)更方便。 ```python with open('file.txt', 'r') as file: data = file.read() ``` 2. **CSV文件**:`pandas` 库提供了 `DataFrame.from_csv()` 或 `pd.read_csv()` 函数来直接加载CSV文件。 ```python import pandas as pd df = pd.read_csv('data.csv') ``` 3. **Excel文件**:`pandas` 使用 `pd.read_excel()` 来处理Excel文件。 ```python df = pd.read_excel('file.xlsx') ``` 4. **JSON文件**:`json` 标准库提供 `json.load()` 函数解析JSON数据,或 `json.loads()` 解析字符串。 ```python import json with open('data.json', 'r') as file: data = json.load(file) ``` 5. **数据库(如SQL、MySQL等)**:Python有许多数据库适配器库(例如`sqlite3`, `psycopg2` for PostgreSQL, `pyodbc` for ODBC连接),使用特定库的接口执行SQL查询。 ```python import sqlite3 conn = sqlite3.connect('database.db') cursor = conn.cursor() rows = cursor.execute("SELECT * FROM table") ``` 6. **网络请求**:`requests` 库可用于从Web获取HTML或API数据。 ```python import requests response = requests.get('https://api.example.com/data') data = response.json() # 假设返回的是JSON ``` 相关问题: 1. 如何处理大数据量的文本文件读取? 2. Python如何读取和写入二进制文件? 3. 如何使用Python从URL下载并保存远程文件
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值