qianyuanruqu的博客

原创 Dspy之BootStrapFewShot内部工作原理分析

4、使用训练集和教师模型输出的预测集作为LabelFewShot优化器输入来启动教师模型，并生成max_bootstrapped_demos例子。6、如果教师模型生成了满足指标的prediction，此predicttion将包含模型接收的输入及模型输出，也即成功生成了一组demo。2、教师模型随机从训练集中选取max_labeled_demos添加到教师模型的demo中，使用LabelFewShot来优化。1、初始化学生模型和教师模型，如果教师模型没有指定，就复制一个学生模型作为老师模型。

原创 私有化文本嵌入（Embedding） + Weaviate

本文重点讨论通过本地模型文件（词嵌入模型gte-large-zh）来构建自定义Transformers模型镜像，通过与weaviate模块集成赋予weaviate文本嵌入功能。同时weaviate也可以与Transformers库无缝集成，允许用户直接在Weaviate数据库中利用兼容的模型。设置ENABLE_CUDA= '1'，表示启用GPU，如果要启用GPU需要提供对gpu支持的容器。weavaite向量库可以集成第三方托管的模型，这使得开发体验得到了增强，例如。# nvidia GPU支持配置。

原创 weaviate配置基本操作

此为容器的路径，home目录在此目录里面。

原创 linux环境下升级sqlite3

【代码】linux环境下升级sqlite3。

原创 LangServe APIHandler：定制化LangChain REST API

在客户端，获取到RemoteRunnable后，通过invoke往服务端传递input参数，参数类型要与服务端类型一致，在上例子，服务端接收的是dict,在客户端需要传递的是dict，最后在服务端解析input，根据解析的参数来获取上下文。值得注意的是，LangServe不仅提供了Python SDK，还支持TypeScript，这意味着前端开发者同样能在JavaScript环境中调用这些服务，开拓了从前端实现复杂逻辑，如流式输出，的可能性。更令人兴奋的是，通过LangServe提供的。

原创 ollama在Linux中部署大模型步骤

3）默认情况下，ollama会默认保持5分钟的活跃状态，超过五分钟没有操作，服务会自动退出，为了避免在调用大模型服务时的冷启动，可以通过环境变量OLLAMA_KEEP_ALIVE来设置活跃状态的时间。2) 默认情况下，通过ollama部署的大模型是阻塞的，为了提高大模型的并发性，可以通过添加OLLAMA_NUM_PARALLEL来配置同时并发的数量。注意：每次修改配置文件后，需要关停ollama服务，重启后才生效。第二步：将Ollama添加为启动服务。第三步：创建服务文件，并添加配置。

原创 sql update 多表关联更新方法总结

格式：update 表1 set 表1.fields1=表2.field1 ，表1.fields2=表2.field2 .......from 表1inner join 表2on 表1与表2的关联条件例子如下：update branchMapping_bak1 set vo=branchMapping_bak.virtualoffice from branchMapping_ba...

原创 sqlserver表数据去重

sqlserver没有类似Oracle的行id字段，但sqlserver有row_number over(表字段 order by desc|asc)句法，因此我们可以通过自连接的方式来删除表中重复行例如 表C a b北京 朝阳北京 朝阳浙江 杭州浙江 绍兴表中存在<北京 朝阳>重复，由于没有主键，这里通过刚才提到的句法来实现自连接删除首...

原创 Python爬虫商业项目实战，python中Counter用法实例

爬虫案例，对美国总统的一篇演讲稿分析要点：1、Counter用法：统计分析，类似于tf-itf词频统计 常用的函数有subtract update2、python中'delimer'.JOIN(sentence)的使用 对sentence按照delimer分割from urllib.request import urlopenfrom bs4 import BeautifulSoup...

原创 hadoop读写文件内部机制

写文件现在我们来看一下Hadoop中的写文件机制解析，通过写文件机制我们可以更好的了解一下Hadoop中的一致性模型。上图为我们展示了一个创建一个新文件并向其中写数据的例子。　　首先客户端通过DistributedFileSystem上的create()方法指明一个欲创建的文件的文件名（第一步），DistributedFileSystem再通过RPC调用向NameNod...

原创 Spring依赖注入

注入的方式方式一private TestService testService;public void setTestService(TestService testService){this.testService=testService;}在Spring中配置<bean id="testActionclass="zj.hz.zjcitech.testAct...

原创 mergin into的使用

语法：MERGE INTO [your table-name] [rename your table here] USING ( [write your query here] )[rename your query-sql and using just like a table] ON...

原创 sql集合

执行效率高 执行效率低A union B except B == A except A intersect B可与left join 替换

原创 服务器未能识别http标头SOAPAction的值

问题原因：在webservice开发架构下，团队开发所提交的代码并不能在本地自动加载，需要svn更新后才能同步到最新的代码，如果在本地没有更新，通过前台调用服务端最新代码，会导致报此类错误。解决方案：1、更新到最新版本的代码 2、在配置文件中设置为本地访问路径，不直接访问服务器端服务...

原创 rdlc报表重新加载数据无法更新

原创 无法绑定由多个部分组成的标识符

无法绑定由多个部分组成的标识符小象机器学习链接with temp as(select branchGuid, n.branchname,right(b.branchname,len(b.branchname)-3) brname from branch binner join old o on b.branchname=o.branchnameinner join new n ...

原创 order by 子句 后面跟 case when

order by 子句 后面跟 case when 不再是排序可以理解为分组排序（group by）比如说，学生排队，凡是姓张的，我们给他们贴个标签“1”，凡是姓李的，我们给他们贴个标签“2”，凡是姓王的，我们给他们贴个标签“3”。然后按照 1 2 3 排序select plannum,fixednum,forenum,PZXS,DimProduct,demo from vs_Wee...

转载 消息转换器MessageConverter

1.4     消息转换器MessageConverterMessageConverter的作用主要有两方面，一方面它可以把我们的非标准化Message对象转换成我们的目标Message对象，这主要是用在发送消息的时候；另一方面它又可以把我们的Message对象转换成对应的目标对象，这主要是用在接收消息的时候。下面我们就拿发送一个对象消息来举例，假设我们有这样一个需求：我们平台有一个发送邮

原创 json对象后台处理心得

后台处理大量的json类型的数据时处理的一种思路：将json属性建立在数据库中1、建立json属性的Javabean2、通过hibernate持久化属性到数据库中ApplicationContext ctx=new ClassPathXmlApplicationContext("applicationContext.ml");SessionFactory sessionFact

原创 union all

with temp as(select a.complain_person,a.accept_id,(case when b.degree>='5' then '满意' else '' end) as score1,(case when b.degreefrom CS_ACCEPT_MAIN a,CS_ACCEPT_CALLBACK_RESULTS b where a.accept

原创 BeanUtils.copyProperties使用

Department department = new Department();//参数拦截器将页面的值自动填充到model中Department model = this.getModel();BeanUtils.copyProperties(this.getModel(),department);//值是由前面赋给后面departmentService.addEntry(depa

原创 JSONObject

import net.sf.json.JSONArray;import net.sf.json.JSONObject;public class UniteWorkParameter {public Integer pageNumber;public Integer pageSize;public String recUserId;public String stat

原创 hibernate联合主键

第一步：建立复合主键类public class CompositeKeys implements Serializable{private String userName;private String address;public String getUserName() {return userName;}public void setUserName

原创 win10 64位免安装版mysql-5.7.16-winx64安装步骤

1、解压mysql-5.7.16-winx64到指定目录下，例如C:\mysql\mysql-5.7.17-winx642、在C:\mysql\mysql-5.7.17-winx64路径下添加my-defaults.init配置文件的相关属性分别设置basedir,datadir,port.basedir =C:\mysql\mysql-5.7.17-winx64datadir =

原创 叠加报表

username month salaryA 2015-01 15 B 2015-01 5  A 2015-01 8  B 2015-01 25 A 2015-01 5  A 2015-02 4  A 2015-02 6  B 2015-02 10 B 2015-02 5 

原创 反射的理解总结

反射：就是通过class文件对象，去使用该文件中的成员变量，构造方法，成员方法。----》要想这样使用，首先你必须得到class文件对象，其实也就是得到Class类的对象。 获取class文件对象的方式：  A:Object类的getClass()方法 Person p = new Person();Class c = p.getClass();  B:数据类型的静态属

原创 各请求路径的区别

basePath:http://localhost:8080/test/getContextPath:/test getServletPath:/test.jsp getRequestURI:/test/test.jsp getRequestURL:http://localhost:8080/test/test.jsp getRealPath:D:\Tomcat 6.0\w

原创 自定义outputformat

/** * maptask或者reducetask在最终输出时，先调用OutputFormat的getRecordWriter方法拿到一个RecordWriter * 然后再调用RecordWriter的write(k,v)方法将数据写出 *  * @author *  */public class LogEnhanceOutputFormat extends File

原创 自定义groupingcomparator

//OrderBean：将需要组合在一起的字段组合成一个bean类。其中字段itemId用来分区，amount用来排序public class OrderBean implements WritableComparable {private Text itemId;private DoubleWritable amount;//必须有默认的构造器皿，这样Mapreduce方法才

转载 hadoop读写机制

程序员12月书讯，写书评领书啦~      <a target="_blank" href="http://e.cn.miaozhen.com/r/k=6002004&p=4b0&ctid=1&rt=2&ns=__IP__&ni=__IESID__&v=__LOC__&vo=3b56fd611&vr=2&o=http%3A%2F%2Fwww.ibm.com%2Fdeveloperworks%2Fc