tang_xiaotang的博客

AttributeError: module 'pyparsing' has no attribute 'downcaseTokens'

Python面试题-mysqlmysql执行顺序from表on过滤添加外部表where过滤group byhaving 过滤select字段distinct子句order by 排序sql执行过程一：把sql交给数据库服务器二：服务器解析sql 1：检查是否有执行计划，有则调用执行计划 2：检查返回数据是否已经存在数据缓存储存区中，有则从缓存中取数据 3：进行语法校验 4：进行语义检验，例如表名是否存在 5：获得对象的解析锁，为了保证数据的一致性，在读

linux下python3创建虚拟环境venv用最简单的方式安装python3，并创建虚拟环境，创建虚拟环境的原因是防止不同版本冲突安装python3yum install python3-pip安装虚拟环境venv1.在要安装虚拟环境的地方创建文件夹，以/home为例mkdir /home/venv2.创建虚拟环境python3 -m venv .3.激活虚拟环境,进入/home/venv目录，注意：命令最前方有个 .. bin/activate...

python报错：More than 4094 XFs (styles)1.在用python xlwt写入excel的时候的时候，遇到了这个错误。2.意思是xlwt最多只能有4094个样式，超出这个样式数量就报错了。解决方法：1.把样式放在for循坏之外。file_style = xlwt.XFStyle()for i in 10000： table.write(self.ta...

使用 Flask-Docs 自动生成 Api 文档记录一下flask-docs,转载自：添加链接描述

scala是用java封装得，所以可以打包放在服务器上用java命令运行。打包1.点击Maven Projects2.点击clean3.点击package这样就成功啦上传到服务器运行java -cp 包地址 程序路径 参数java -cp Mark-1.0-SNAPSHOT.jar pan.dataPlatform.Update 北京...

用spark实现读取csv文件val conf = new SparkConf() .setAppName("用户标签") .setMaster("local[*]") val sc = new SparkContext(conf) val sqlContext = new SQLContext(sc) val arr = ArrayBuff...

1.改，update//连接信息 val onlineUrl = "jdbc:mysql://" val username = "root" val password = "1234" def getOnlineConnection(): sql.Connection = { DriverManager.getConnection(onlineUrl...

需求：需要写接口查数据库数据，并返回给前端。思路：这个需求要求是用最快的方式出一个demo，所以选择用python flack编写，它比较轻量级。代码实现，用几个例子说明一下用法1.直接返回字符串，并用json返回#coding:utf-8from flask import Flask, requestimport pymysqlimport jsonapp = Flas...

上篇文章写了利用百度api实现图像识别提取图片上的文字，但是发现不是那么准确，所以现在结合OpenCV-Python找出图片上的文字，再把需要的文字切分出来，再调用接口识别，这样就会精确很多，附上参考的资料，多不多说，开干。1.读取文件，并专成灰度图imagePath = "20190610181452.png"img = cv2.imread(imagePath)gray = cv2.c...

现在百度AI可以调用图像识别，有一些免费的可以玩一下。地址1.需要的库import base64import urllibfrom typing import BinaryIOfrom urllib.parse import urlencodefrom urllib import requestimport requestsfrom urllib.request import ur...

flink优点现在主流的实时处理引擎有storm，sparkstreaming，flink。storm实现了低延迟，但是没有实现高吞吐，也没有能够在出现故障是准确处理计算状态（将数据从一个事件保存到另一个事件）。spark streaming通过微批处理实现了高吞吐，高可用，但是不能做到低延迟，也不能使用窗口（把无限个stream拆分成有限个buckets，就可以在这些buckets上面做计...

无法连接到WMI提供程序，您没有权限或者该服务器无法访问-解决问题描述准备给数据库配置自动备份的时候，安装sql server之后，打开sql server 2017 配置管理器的时候报错！解决历程打开sqlserver报错如下解决方法：1.找到sqlmgmproviderxpsp2up.mof这个文件所在的路径，一般会在“ C:\Program Files\Microso...

mysql通过字符串计算hashcode更新到原表和多表关联优化一. 需求描述现有表a，要求通过每条数据中的三个字段计算hashcode值更新到原表做为shopid.二. 第一种做法最好的方式是通过spark sql计算出来更新，但是spark sql不能update，要想update要设计到改源码。所以就退而求其次选择用JDBC更新，缺点是慢。把主要代码贴一下：result.for...

需求现有美食的标签30个，要按照指定的规则重新打标签。举例如下 汉堡薯条 二级 异国料理-西式快餐 汉堡面包 二级 异国料理-西式快餐 法意牛排 二级 异国料理-西式快餐 炸鸡汉堡 二级 异国料理-西式快餐 炸鸡炸串 二级 异国料理-西式快餐 轻食西餐 二级 异国料理-西式快餐 日料...

1.把表导出到hdfs上hbase org.apache.hadoop.hbase.mapreduce.Export 表名 数据文件位置 版本 开始时间 结束时间//eg:hbase org.apache.hadoop.hbase.mapreduce.Export test_table /opt/hbase-data-back/test_tabletest_table :表名 /op...

问题描述在程序中用到了从数据库中读数据，在本地测试的时候没有问题。但是提交到spark上运行就会报错： Exception in thread “main” java.sql.SQLException: No suitable driver 就是spark-submit找不到jdbc的驱动解决方法解决方法也很简单，那就是告诉它，让它找到就行了。 在代码中，jdbc配置的地方加上下...

废话少说，直接上代码。 val now: Date = new Date() val gt = now.getTime var time = gt + "" val client: HttpClient = new HttpClient val method: GetMethod = new GetMethod(url) client.exec...