python
图特摩斯科技
数据库方向-图数仓的发明者,时序、多维、异构、动态+静态知识图谱数据库AbutionGraph发明者。
展开
-
ubuntu安装pip+python27+ipython+scrapy+zlib-及遇到的各种问题解决
=====================(从文章中间开始为正确安装的解决方案)======(1)# xz -d Python-2.7.11.tar.xz# tar xvf Python-2.7.11.tar# cd Python-2.7.11/# ./configure # make && make install(2):~$ sudo apt-get install pyth原创 2016-04-13 21:54:00 · 1873 阅读 · 0 评论 -
node2vec: 网络结构特征提取、论文、算法python实现
概述论文主要观点本文将抽取网络中节点的特征转化成最优化一个“可能性”目标函数问题,这个“可能性”是该节点可以保存其邻居节点的信息。成果node2vec,如上述,利用SGD优化,高效“随机选择邻居”算法,可让node2vec可适应不同的网络方法模型定义可能性,并且给予两个条件,构成要优化的目标函数; 条件独立性: 节点之间对称性转载 2017-12-13 09:49:52 · 6976 阅读 · 2 评论 -
[Jep]Scala与Python混编 - 遇到的问题(未解决)
本人觉得在spark里使用scala与python两种优秀的编程语言进行编程实现逻辑是件非常酷的事情,于是就实验了各种可行性,Jep算是最出众的工具,可惜由于python的不兼容问题...这是蛮久之前的实验了,,未成功,也没时间继续,,所以本篇文章只是作为记录,,后续有时间再跟近,,顺便说一下python问题解决思路,因为系统版本是py-2.6, spark需要py-2.7+,,而原创 2017-11-29 18:43:56 · 3321 阅读 · 0 评论 -
使用Python读取C语言.so文件-: libmysqlclient.so.16: cannot open shared object file: No such file o
imp主要有两种用法(1)imp.find_module(name[,path]) 如果path为空,则按照sys.path路径搜索模块名, 返回三元组(file, pathname, description).file为刚打开的模块文件, pathname为模块的路径, description为imp.get_suffixes()返回的元组. 如果模块为包,file返回N原创 2017-11-28 18:05:11 · 3030 阅读 · 0 评论 -
Python中用json.loads解码字符串出错:ValueError: No JSON object could be decoded
执行:raini@biyuzhe:~/pyspark_project/mysql1/anqu/python/anquProduct/Server/insertDataHql$curl -i -H "Content-Type: application/json" -X POST -d '{"appIds": [{"appid": "1076877374"}, {"appid": "1原创 2017-05-11 15:21:19 · 9692 阅读 · 0 评论 -
flask 设置headers['Access-Control-Allow-Origin']='*'实现跨域访问
需要flask将数据发送到web前端,定义一个路由,访问该路由获取数据。 res= make_response(json.dumps(result)): 通过make_response封装数据及类型转换,返回res即可。 rst = make_response(result_text) rst.headers['Access-Control-Allow-Origin'] = '*'原创 2016-09-19 11:59:10 · 28637 阅读 · 0 评论 -
SparkSQL实现查找Hive表集合中的多个元素匹配
sqlContext.sql("select app, word, priority, searchapp, searchcount, genre, type from ansearchapp LATERAL VIEW OUTER explode(searchapp) s AS app where app = %d " %g)原创 2016-08-11 19:31:29 · 4088 阅读 · 0 评论 -
python实现RDD转成聚类输入矩阵
//---------------------------- text = sc.textFile("file:///home/mysql1/word_text_new1/part-00000",1).map(lambda x: x.split("\t"))# text.first()//-------------------------------------初始化数据# 提取原创 2016-08-11 19:21:13 · 2112 阅读 · 0 评论 -
Python Web框架 flask post JSON数据获取方式总结
提交任务:curl -i -H "Content-Type: application/json" -X POST -d '{" data = request.data ----获取的是字符串 data = request.get_data()原创 2016-08-18 19:53:38 · 33708 阅读 · 0 评论 -
ubuntu安装pip+python27+ipython+scrapy+zlib+libssl-dev-及遇到的各种问题解决
ubuntu安装pip+python27+ipython+scrapy+zlib+libssl-dev-及遇到的各种问题解决原创 2016-04-08 23:38:08 · 2112 阅读 · 0 评论 -
ubuntu-pip+python27+ipython-安装-及遇到的各种问题解决
=====================(从文章中间开始为正确安装的解决方案)======(1)# xz -d Python-2.7.11.tar.xz# tar xvf Python-2.7.11.tar# cd Python-2.7.11/# ./configure # make && make install(2):~$ sudo apt-get install pyth原创 2016-04-13 21:54:39 · 12725 阅读 · 0 评论 -
分布式算法调参神器HyperOptSearch-[增强学习Ray.tune]-使用XGboost举例
分布式增强学习Ray.tune调参神器HyperOptSearch近日在研究分布式增强学习框架Ray.tune(深度学习参数优化)模块时,发现里面使用的HyperOptSearch其实是基于HyperOpt(最后章节讲解)(https://github.com/hyperopt/hyperopt)支持的SearchAlgorithm,用于执行基于模型的顺序超参数优化,但是又结合了一些新的算法进...原创 2018-12-06 18:22:18 · 4473 阅读 · 10 评论