- 博客(7)
- 收藏
- 关注
RSS订阅原创 极客时间微调课程学习总结
隐约记得，大模型刚刚出现在视野是在2022年底，朋友圈里面刚刚有一些帖子讨论“ChatGPT会成为下一代搜索引擎么？”再看现在，2024年7月份，短短一年半的时间，以ChatGPT为代表的一众智能助手，已经成为程序员、文字工作者、知识密集型白领工作中不可替代的提效工具，并在不断高速扩展着它们的影响力。以大模型为中心的四层架构（芯片、深度学习框架、大模型、大模型应用），都在以不可置信的速度迭代着，迭代的速度甚至超出了摩尔定律。
2024-07-21 00:12:33
372
原创 python文件读取迭代器的源码实现
类，它们实现了文件的二进制读取、文本解码以及缓存等操作，从而支持了基于迭代器的文件读取方式。方法从文件中读取数据，并将数据缓存到内存中，以提高读取效率。综上所述，Python 文件读取迭代器的实现方式主要依赖于。接口，从而实现了文件读取的迭代器。类实例化时，会根据文件的编码类型创建一个。Python 文件读取的迭代器源码实现在。对象，用于将二进制数据流转换为字符串。方法实现了迭代器协议，它会调用。模块中，具体来说，主要涉及到。方法逐行读取文件内容，并使用。对象将每行数据转换为字符串。类会根据需要自动调用。
2023-05-02 16:40:22
211
原创 python读取大文件时，为了减少内存占用，通常采用哪种读取方式？
需要注意的是，这两种方式都是基于文件对象的迭代器实现的，不需要一次性将整个文件读入内存。但是，在处理某些特殊类型的文件（例如二进制文件或CSV文件等）时，可能需要使用其他专门的库或工具来读取文件内容。方法会读取文件中的一行内容，每次读取一行后将其处理后再读取下一行。为了减少内存占用，Python在读取大文件时通常采用逐行读取的方式。循环遍历文件对象来逐行读取文件内容。这种方式也只会将当前行的内容读入内存，适用于处理大文件。2.使用文件对象的迭代器遍历文件内容：文件对象本身就是一个可迭代对象，我们可以使用。
2023-05-02 16:15:37
754
原创 mac中招search baron病毒解决方法
不多说，这个病毒是浏览器劫持的程序，在打开新页面时redirect到bing，search1.com等网站，做导流。并且可能还会给其他恶意病毒开后门，泄露你的隐私信息，所以不得不防。而且这个病毒也困扰了了我很长时间，主要是因为mac 的ios系统未开源，系统重装啥的也比较麻烦，毕竟涉及到很多设置，下面说一下我误打误撞的解决方法。
2022-09-27 00:27:33
1066
原创 kibana monitor时间显示问题
Kibana时区问题默认的kibana monitor在显示时的时候不会兼容浏览器的时区，造成监控信息查看不到，需要主动加8个小时才能找到当前的日志，所以需要主动设置一下在timezone for date formating中设置时区为 Asia/Shanghai即可...
2020-04-29 19:24:23
709
原创 spark实践遇到的问题
WARNING: An illegal reflective access operation has occurredWARNING: Illegal reflective access by org.apache.spark.unsafe.Platform (file:/usr/local/spark/jars/spark-unsafe_2.11-2.4.3.jar) to method ...
2019-06-06 20:55:14
3056
原创 关于pymongo两种连接方法MongoClient和Connection连接mongodb的写入效率分析
最近项目在使用mongoDB，用起来是挺好用的，但是用户上量之后，明显就感觉有点慢，为什么这么慢，我就开始慢慢的寻找原因。结合网上的测试脚本以及一些朋友们的测试结果和我自己测试的结果，我发现mongoDB真的没有那么慢，那是我哪里写错了？我就开始排查项目代码中中哪里和测试脚本中写的不一样，结果就找到了数据库的连接方式，项目中一开始采用的是现在pymongo推荐的MongoClient(ip
2015-08-13 21:23:08
4756
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人