Dash-下载较大数据的csv

10 篇文章 3 订阅

在上一篇实现了下载数据的功能,但是我在实际使用过程中,如果数据超过2M,在谷歌浏览器下面就下载失败,后面查了下原因,是因为有些浏览器限制的url的大小。

数据URI限制
数据URI规范未定义大小限制,但表示应用程序可以强加自己的大小。

  • Chrome-2MB
  • Firefox-无限制
  • IE≥9&Edge-4GB
  • Safari和移动Safari-?

那么数据大的要怎么做呢?只要在原来的基础上改动下就可以了:

import dash
import dash_core_components as dcc
import dash_html_components as html
import pandas as pd
import urllib.parse as url_parse
import flask # 主要是这个包
from io import StringIO, BytesIO # 这个是读取内存中的数据用的接口
 
df = pd.DataFrame({
    'a': [1, 2, 3, 4],
    'b': [2, 1, 5, 6],
    'c': ['x', 'x', 'y', 'y']
})
 
 
def generate_table(dataframe, max_rows=10):
    return html.Table(
        # Header
        [html.Tr([html.Th(col) for col in dataframe.columns])] +
 
        # Body
        [html.Tr([
            html.Td(dataframe.iloc[i][col]) for col in dataframe.columns
        ]) for i in range(min(len(dataframe), max_rows))]
    )
 
 
app = dash.Dash(__name__)
app.css.append_css({"external_url": "https://codepen.io/chriddyp/pen/bWLwgP.css"})
app.layout = html.Div([
    html.Label('Filter'),
 
    dcc.Dropdown(
        id='field-dropdown',
        options=[
            {'label': i, 'value': i} for i in
            (['all'] + list(df['c'].unique()))],
        value='all'
    ),
    html.Div(id='table'),
    html.A(
        'Download Data',
        id='download-link',
        download="rawdata.csv",
        href="",
        target="_blank"
    )
])
 
 
def filter_data(value):
    if value == 'all':
        return df
    else:
        return df[df['c'] == value]
 
 
@app.callback(
    dash.dependencies.Output('table', 'children'),
    [dash.dependencies.Input('field-dropdown', 'value')])
def update_table(filter_value):
    dff = filter_data(filter_value)
    return generate_table(dff)
 
 
@app.callback(
    dash.dependencies.Output('download-link', 'href'),
    [dash.dependencies.Input('field-dropdown', 'value')])
def update_download_link(filter_value):
    return f'/download?value={filter_value}' # 如果有多个参数,可以 ?a=1&b=2&c=3 这样

@app.server.route('/download')
def Download_csv():
    filter_value = flask.request.args.get('value')
    # 如果有多个参数,直接通过参数名获取, get('a'),get('b'),get('c')等等
    dff = filter_data(filter_value) # 根据需要,将数据筛选出需要的
    strIO = StringIO()
    dff.to_csv(strIO, index=False, encoding='utf-8') # 把数据写入内存
    mem = BytesIO() # 必须要这么做,如果直接传递的 StringIO,下载下来的是空文件
    mem.write(strIO.getvalue().encode('utf-8')) # 转换数据
    mem.seek(0)
    strIO.close()
    return flask.send_file(
        mem,
        mimetype='text/csv',
        attachment_filename=f'daily_user_{name}.csv',
        as_attachment=True
    )
 
 
if __name__ == '__main__':
    app.run_server(debug=True)

这种方式就可以下载大数据了,具体能下多少,没有试过,但是可以下载大于几十兆的数据了。

另外,找到了另一个下载的方法:

https://github.com/plotly/dash-recipes/blob/master/dash-download-file-link-server.py

可以参考下~

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

苏小败在路上

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值