关于将数据写入CSV，“日期格式”类型数据变化的一个解决方案

最新推荐文章于 2025-07-11 13:05:40 发布
最新推荐文章于 2025-07-11 13:05:40 发布
阅读量6.3k 收藏 7
点赞数 2
CC 4.0 BY-SA版权
文章标签： java csv
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35198929/article/details/122092681
本文讨论了将特定格式的数据写入CSV文件时遇到的问题，即原本不是日期格式的数据被错误地转换成了日期格式。通过在字符串末尾添加特殊字符来规避这一问题，并探讨更优解决方案。

问题描述：将数据读取为byte[]数组之后，其中有的数据并非笔者并不期望它是日期格式，但是形式和日期格式一样，这样写出到CSV的时候会将其默认转化为日期斜杠形式。例如：2021-12-22数据，写到csv中变成了2021/12/22。这并非笔者期望。

解决办法（并不推荐）：读取每个String字符串，在此字符串后面加入"\t"，可以避免CSV的默认转换。

副作用：这样会导致数据本身被修改了，加入“\t”本质是修改了这个字符串。并且产生的CSV此字段在选择的时候会出现多余的留白。所以并不推荐。

笔者暂时也没有想到什么更好的方法，有什么好的方法也欢迎评论区交流！！！

YROOM
关注
格式错误的转换处理（含日期格式以及编码格式错误）
不曾走远的博客
05-28 2763
在工作中，碰到了load CSV文件时，日期格式读写错误的情况，CSV文件的日期格式显示为date的格式，即为yyyy-MM-dd hh:mm:ss,但hive在读取日期格式的数据时，自行转换成了yyyy/MM/dd的这种字符串格式。
用Python和SQLite存储时间序列数据：高效与低成本的解决方案
AI天才研究院
07-19 3620
作者：禅与计算机程序设计艺术 时序数据库是专门处理和分析结构化、时间相关的数据的一种数据库系统。它能够对按照时间顺序排列的数据进行快速高效地查询、聚合、统计等操作。时序数据的特点是随着时间的推移而增长，记录了实体在不同时刻或状态的变化情况，因此需要一种有效率的方式来管理这些数据。目前，主流的时序数据库包括InfluxDB、TimeScal
两种方法修改CSV文件里数据的日期格式 python 和 excel
热门推荐
A Little Bean
05-09 1万+
如何修改CSV文件里的日期格式
从csv读取一列时间数据，并把日/月/年的时间数据格式转化成年/月/日？
weixin_42589700的博客
01-10 1419
我们可以使用 Python 的 datetime 库来实现。 首先，我们需要从 CSV 文件中读取时间数据，这可以使用 Python 的 csv 库来实现。例如： import csv # 读取 CSV 文件中的时间数据 with open('data.csv', 'r') as f: reader = csv.reader(f) dates = [row[0] for row ...
导出csv文件时间等字段会自动改变格式的问题
qq_38978882的博客
08-06 3983
导出csv文件时间等字段会自动改变格式的问题
R语言 在将数据框内容导出为csv文件保存时，将数据2-3错误识别成了日期格式，怎么解决啊
qq_44133944的博客
05-24 1018
write.table(result_first_f,file= paste0(wd2,"孕早期尿常规2.csv"),在Rstudio里面看还是正常的，但是保存为csv打开就变成日期了。而且我查了这一列也的确是character数据格式。本来的数据格式应该是1-3，结果被识别成了日期。用这行语句保存的csv格式。
数据导入导出神技：CSV中文乱码零容忍解决方案
CSV文件（逗号分隔值文件）是一种常用的数据存储格式，以其简单和兼容性广被广泛应用。然而，CSV在处理不同语言和特殊字符时，常常出现编码问题，尤其是中文乱码问题。编码问题不仅影响数据的准确性和可读性，还可能...
【温度数据导出全方案】：CSV与Excel格式保存的高效实现
本文系统分析了温度数据导出的需求，比较了CSV与Excel两种主流文件格式的技术特性与适用场景，并深入探讨了数据采集、清洗、组织与写入的核心技术原理。基于Python语言，分别实现了CSV与Excel格式的温度数据导出功能...
【CSV文件转换工具】：一步到位，将.csv文件转换为其他格式的解决方案
CSV文件作为一种简单且广泛使用的数据存储格式，在数据迁移、交换和备份中扮演着重要角色。本文首先介绍了CSV文件转换工具的概念和对CSV文件结构的基本理解，接着探讨了文件转换的需求和挑战。在理论基础章节中，...
33、数据建模、使用与批量处理解决方案
tgb345678的博客
07-11 43
本博客深入探讨了使用 Azure 机器学习（AML）进行数据建模、模型使用以及批量处理解决方案的设计与开发。内容涵盖从数据建模流程、模型部署与使用，到批量处理的调度策略、监控指标与优化建议，同时结合实际案例分析了数据处理的关键概念与应用场景，旨在帮助读者构建高效、稳定的数据处理系统。
记一次导出csv文件日期格式错乱
fanyicheng1465的博客
03-12 4272
csv日期格式错乱
【Python/csv】数据以追加的形式保存到一个存在的csv文件中+解决时间格式写入csv文件出错
...
04-09 1309
话不多说，直接上代码！ name=['Data',"Time","Energy"] def write_data(ans): try: t = pd.DataFrame(columns=name, data=ans) t['Data'] = pd.to_datetime(t['Data']) t.to_csv(r"2021.csv", mode='a', header=False) except Exception: print
PHP 处理导入CSV 时间格式
李虎
01-05 1821
/** * 处理csv导入的时间格式数据 * @param $strTime string 导入时间字符串 * @return $strtotimr int 转换后的时间戳 * @author lihu */ function disposeImportTimeData($strTime){ $strtoTime = strtotime($strTime); //如果st
亲测有效解决：excel把CSV数字转化成了日期导致数据处理出问题
狂小虎/Anthony Dave的博客 KuangXiaoHu's Blogs
11-01 5540
不要用excel打开直接处理数据，将csv默认打开软件设置为记事本。如果想要打开csv文件，可以尝试使用CSVed等软件替代。
【解决】Python数据保存为csv再读取后部分数据的格式被更改
weixin_46599926的博客
06-16 1927
我们可以在每次读取数据之后加多一步，将所有非数字列转换为全字符串类型。这是一开始读取出来的数据，全部都是字符串。调用一下这个函数即可解决这个问题。
Java生成CSV文件时间格式不对问题
轩1024的博客
12-31 3092
Java生成CSV文件时间格式不对问题
关于csv文件用excel打开修改后时间字段错误解决方案
拐角的蓝色的博客
11-08 2836
csv文件修改后时间错乱
python excel转csv日期变数字_将Excel转换为CSV正确转换日期字段
weixin_35907638的博客
01-14 1180
因此，我现在有了Excel2CSV函数，但遇到了另一个问题，即Excel文件中的日期字段('Date Opened'、'Date Closed')在Excel中被格式化为日期，当转换为CSV时，这些字段被写为整数值(例如，1995年5月1日改为34820)。在我希望它只是把这些日期写成纯文本(比如1995年5月1日，或者1995年5月1日，或者类似的东西)。人类可读的东西。)def Excel2C...
csv文件，更改日期格式
lwprain的专栏
06-24 1377
近几天要完成一个申报，系统导出来的文件有些问题，日期采出来是类似2023-01-01的格式，但是需要用20230101格式，同时还要规避掉，使用excel时，会主动把比如2210.10更改为2210.1的问题，干脆就写了一个小脚本。弄完后，改名覆盖原文件就可以了。原文件内容，excel打开的样子。
编辑一个能把网站数据实时更新在通达信的的程序、
最新发布
07-28
<think>由于通达信软件本身是一个股票交易软件，它支持自定义指标公式和外部数据导入。但是，实时更新网站数据到通达信，通常需要以下步骤： 1. 从目标网站获取数据（可能需要网络爬虫或调用API） 2. 将数据处理成通达信可以识别的格式（通常为.txt或.csv文件，并放在通达信指定的目录下） 3. 通达信软件通过读取外部数据文件来显示自定义数据 但是，通达信本身不支持直接通过外部程序实时写入数据到其运行内存中，所以一般做法是定期（比如每分钟）更新数据文件，然后通达信软件会定期（比如每分钟）重新加载外部数据。 下面是一个简单的Python程序示例，用于定期从网站获取数据并更新到通达信的外部数据目录中。 注意：这个程序需要根据具体的网站和数据结构进行调整。同时，通达信的外部数据导入功能需要先进行设置（在通达信中，通常通过“自定义数据管理”来创建新的数据项，并指向特定的文件路径）。 步骤： 1. 确定要抓取的网站和数据结构。 2. 确定通达信外部数据存放的路径（例如：通达信安装目录下的T0002/dradis/目录）。 3. 编写爬虫或调用API获取数据，并按照通达信要求的格式保存为文本文件（每行格式：股票代码,数据值）。 4. 设置定时任务，定期更新数据文件。 以下是一个示例代码，假设我们要从某个API获取股票的最新温度数据（假设的），并更新到通达信。这里使用requests库获取数据，并假设返回的是JSON格式。 注意：在实际应用中，请确保遵守网站的使用条款，不要频繁请求以免被封IP。 代码结构： - 定义要请求的URL（假设为某个提供股票相关数据的API） - 定义通达信数据文件存放路径 - 编写函数获取数据并解析 - 将数据按照通达信外部数据格式保存 - 设置定时任务，每隔一段时间运行一次 由于不同网站返回的数据格式不同，这里仅提供一个框架。 假设通达信要求的外部数据格式为： 股票代码1, 数据值1 股票代码2, 数据值2 例如： 600000, 25.3 600001, 26.5 注意：股票代码要带市场前缀，如沪市为sh，深市为sz，但在通达信中，外部数据文件中的股票代码通常与通达信内部表示一致（例如，沪市为6开头，深市为0或3开头，并且不带市场前缀）。具体需要根据通达信的要求来定。 以下代码示例：</think>### 解决方案：将网站数据实时更新到通达信 以下是使用Python开发的完整解决方案，通过HTTP请求获取网站数据，解析后生成通达信可识别的`.csv`或`.txt`文件，并利用通达信的外部数据接口实现实时更新。 #### 核心步骤： 1. **数据获取**：使用Python爬取目标网站数据 2. **数据处理**：转换为通达信要求的格式 3. **文件生成**：输出到通达信指定目录 4. **实时更新**：通过定时任务/文件监控实现数据刷新 --- ### 完整代码实现 ```python import requests import pandas as pd import time import os from watchdog.observers import Observer from watchdog.events import FileSystemEventHandler # 配置参数 TARGET_URL = "https://api.example.com/finance-data" # 替换为实际数据源URL TONGDAXIN_DIR = "C:/new_tdx/vipdoc/cw/stock" # 通达信自定义数据存放路径 UPDATE_INTERVAL = 60 # 数据更新频率（秒） def fetch_website_data(): """从目标网站获取实时数据""" try: response = requests.get( TARGET_URL, headers={"User-Agent": "Mozilla/5.0"}, timeout=10 ) response.raise_for_status() return response.json() # 假设返回JSON格式数据 except Exception as e: print(f"数据获取失败: {e}") return None def process_data(raw_data): """处理数据为通达信可识别格式""" # 示例：假设原始数据格式为 [{"code": "600000", "value": 25.3}, ...] processed = [] for item in raw_data["data"]: # 通达信要求格式：股票代码, 数据值 # 注意：股票代码需转换为6位字符串（沪市6开头，深市0/3开头） code = item["code"].zfill(6) processed.append({ "code": code, "value": item["value"] }) return pd.DataFrame(processed) def save_to_tdx_format(df): """保存为通达信可读取的CSV文件""" # 生成符合通达信格式的文件名：sh/sz+6位代码.csv for _, row in df.iterrows(): market_prefix = "sh" if row["code"].startswith("6") else "sz" filename = f"{market_prefix}{row['code']}.csv" filepath = os.path.join(TONGDAXIN_DIR, filename) # 写入数据（通达信要求：日期,开盘,最高,最低,收盘,成交量,成交额） with open(filepath, "w") as f: f.write(f"20240501,{row['value']},,,,,\n") # 示例数据格式 class FileChangeHandler(FileSystemEventHandler): """监控文件变化并刷新通达信数据""" def on_modified(self, event): if not event.is_directory: print(f"检测到文件更新: {event.src_path}") # 此处可添加通达信数据刷新指令（需通过通达信插件实现） def start_monitoring(): """启动文件监控服务""" event_handler = FileChangeHandler() observer = Observer() observer.schedule(event_handler, TONGDAXIN_DIR, recursive=True) observer.start() print(f"开始监控目录: {TONGDAXIN_DIR}") return observer def main(): observer = start_monitoring() try: while True: print(f"开始数据更新循环...") raw_data = fetch_website_data() if raw_data: df = process_data(raw_data) save_to_tdx_format(df) print(f"成功更新 {len(df)} 条数据") time.sleep(UPDATE_INTERVAL) except KeyboardInterrupt: observer.stop() observer.join() if __name__ == "__main__": main() ``` --- ### 关键代码解析 1. **数据获取模块**： - 使用`requests`库获取网站数据 - 添加超时和异常处理保证稳定性 - 建议设置合理的请求头避免被反爬 2. **数据处理模块**： - 将原始数据转换为DataFrame - 股票代码补全至6位（通达信要求） - 区分沪市(sh)/深市(sz)前缀 3. **文件输出模块**： - 生成通达信标准文件名格式：`sh600000.csv` - 写入CSV文件（日期,开盘,最高,最低,收盘,成交量,成交额） - 文件存放至通达信自定义数据目录 4. **实时更新机制**： - 通过`time.sleep(UPDATE_INTERVAL)`定时更新 - 使用`watchdog`监控文件变化 - 文件更新时触发通达信数据刷新（需配合通达信插件） --- ### 通达信端配置步骤 1. **放置数据文件**： - 将程序输出的CSV文件放入通达信目录： ``` C:/new_tdx/vipdoc/cw/stock # 自定义数据存放路径 ``` 2. **导入外部数据**： - 打开通达信 → 功能 → 定制品种 → 数据管理 - 选择"导入数据" → 指定CSV文件所在目录 - 设置数据对应关系（日期→日期，数值→收盘价等） 3. **实时刷新**（两种方法）： - **手动刷新**：在K线图界面按`F11` - **自动刷新**（需额外开发）： ```python # 通达信插件示例（需使用通达信API） import win32com.client tdx = win32com.client.Dispatch("TdxW_Main.TdxMain") tdx.RefreshData() # 刷新数据 ``` --- ### 注意事项 1. **数据源兼容性**： - 需要根据实际网站返回格式调整JSON解析逻辑 - 金融数据源推荐使用免费API（如Alpha Vantage、Tiingo等） 2. **通达信限制**： - 自定义数据更新频率最低为3秒 - 单文件最大支持100万行数据 - 需关闭通达信"只读模式"才能写入文件 3. **部署建议**： - 使用Windows任务计划定期运行脚本 - 在云服务器部署实现24小时更新 - 添加日志记录功能（如`logging`模块） --- ### 替代方案：DLL插件开发 对于更高实时性要求，可开发通达信DLL插件： ```cpp // 示例：通达信DLL插件框架（C++） __declspec(dllexport) int __stdcall Tdx_Plugin(int code, void* pData) { if (code == 0x100) { // 初始化消息 // 创建定时器/线程获取数据 } else if (code == 0x200) { // 实时行情消息 // 更新内存数据 } return 0; } ``` 需配合通达信SDK开发包（官方未公开，需第三方逆向） ---
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值