Trouble Shooting
图特摩斯科技
数据库方向-图数仓的发明者,时序、多维、异构、动态+静态知识图谱数据库AbutionGraph发明者。
展开
-
ubuntu安装pip+python27+ipython+scrapy+zlib+libssl-dev-及遇到的各种问题解决
ubuntu安装pip+python27+ipython+scrapy+zlib+libssl-dev-及遇到的各种问题解决原创 2016-04-08 23:38:08 · 2118 阅读 · 0 评论 -
tensorflow代码运行的最后抛出异常:TypeError: 'NoneType' object is not callable
tensorflow代码运行的最后抛出异常:问题:Exception ignored in: <bound method BaseSession.__del__ of <tensorflow.python.client.session.Session object at 0x7f15b0500400>>Traceback (most recent call last)...原创 2018-06-08 11:30:47 · 21324 阅读 · 7 评论 -
ubuntu 安装cuda9.0+cudnn7.1-与cuda8.0共存
为了使用tensorflow目标检测API的所有算法,所以打算升级一下CUDA版本以支持tf-gpu 1.5++,但原本项目都是基于tf-gpu 1.4 的(tf-gpu 1.5以下都只能使用CUDA_8.0),所以保留了cuda-8.0的情况下安装cuda-9.0。系统信息:byz@ubuntu:~$ nvidia-smi -(在cuda-8时就已经安装好了的驱动,所以下面选择安装驱动时选No首...原创 2018-06-15 16:16:50 · 9283 阅读 · 5 评论 -
TF目标检测API-Error: Argument must be a dense tensor: range(0, 3) - got shape [3], but wanted [].
此错误搞了大半天,翻看了很多很多文章,头痛。。ValueError: Tried to convert 't' to a tensor and failed. Error: Argument must be a dense tensor: range(0, 3) - got shape [3], but wanted [].执行检测任务:raini@biyuzhe:~/pro/tf_models/...原创 2018-06-12 18:02:38 · 5682 阅读 · 11 评论 -
[Jep]Scala与Python混编 - 遇到的问题(未解决)
本人觉得在spark里使用scala与python两种优秀的编程语言进行编程实现逻辑是件非常酷的事情,于是就实验了各种可行性,Jep算是最出众的工具,可惜由于python的不兼容问题...这是蛮久之前的实验了,,未成功,也没时间继续,,所以本篇文章只是作为记录,,后续有时间再跟近,,顺便说一下python问题解决思路,因为系统版本是py-2.6, spark需要py-2.7+,,而原创 2017-11-29 18:43:56 · 3336 阅读 · 0 评论 -
使用Python读取C语言.so文件-: libmysqlclient.so.16: cannot open shared object file: No such file o
imp主要有两种用法(1)imp.find_module(name[,path]) 如果path为空,则按照sys.path路径搜索模块名, 返回三元组(file, pathname, description).file为刚打开的模块文件, pathname为模块的路径, description为imp.get_suffixes()返回的元组. 如果模块为包,file返回N原创 2017-11-28 18:05:11 · 3056 阅读 · 0 评论 -
Caused by: java.io.NotSerializableException: org.apache.spark.SparkContext
当你执行各种转换(map,flatMap,filter等等)的时候,会有以下转换:1、在driver节点上序列化,2、上传到合适的集群中的节点,3、在节点上执行反序列化,4、最后在节点上执行。当然你也可以在本地运行,除了没有网络传输,其他的过程都一样的,这样的好处就是方便调试在你部署之前。在这个例子中,你在class Test1中定义了一个方法,并运用在了map中,Spar原创 2017-09-29 14:54:31 · 6123 阅读 · 0 评论 -
mysql>导出数据为txt时报错:The MySQL server is running with the --secure-file-priv option so it cannot execut
mysql> select * from anserchapp.searchApp into outfile '/home/data/searchApp/en/searchApp_cn.txt';ERROR 1290 (HY000): The MySQL server is running with the --secure-file-priv option so it cannot exec原创 2017-05-15 11:20:37 · 3403 阅读 · 0 评论 -
「Hive元数据问题」hive.metastore.HiveMetaException: Failed to get schema version.
raini@biyuzhe:~$ schematool -dbType mysql -initSchemaSLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/home/raini/app/apache-hive-2.1.1-bin/lib/log4j-slf4j-impl原创 2017-05-11 22:35:50 · 25262 阅读 · 0 评论 -
Caused by: MetaException(message:Hive Schema version 2.1.0 does not match metastore's schema version
问题原因:从hive1.2升级到hive-2.0.0 时没有问题。现在升级到hive-2.1.1之后,元数据就不匹配了。解决:(1)删除HDFS上的hive数据与hive数据库 hadoop fs -rm -r -f /tmp/hive hadoop fs -rm -r -f /user/hive(2)删除MySQL上的hive的元数据信息 mysql原创 2017-05-11 15:24:12 · 2599 阅读 · 0 评论 -
Python中用json.loads解码字符串出错:ValueError: No JSON object could be decoded
执行:raini@biyuzhe:~/pyspark_project/mysql1/anqu/python/anquProduct/Server/insertDataHql$curl -i -H "Content-Type: application/json" -X POST -d '{"appIds": [{"appid": "1076877374"}, {"appid": "1原创 2017-05-11 15:21:19 · 9706 阅读 · 0 评论 -
put: Cannot create file/database/test/asoku_us_2016-07-13._COPYING_. Name node is in safe mode.
[root@master home]# hadoop fs -put /home/tmp/test.txt /database/test/asoku_us_2016-07-13put: Cannot create file/database/test/asoku_us_2016-07-13._COPYING_. Name node is in safe mode.解决:原创 2016-08-12 20:00:27 · 3780 阅读 · 0 评论 -
erImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are
erImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources原创 2016-08-27 17:28:14 · 1344 阅读 · 0 评论 -
Spark Worker: Failed to connect to master master:7077
slave 不能工作,失去联系。 WARN Worker: Failed to connect to master master:7077java.io.IOException: Failed to connect to master:7077... ERROR Worker: All masters are unresponsive! Giving up.原创 2016-08-27 17:26:25 · 13210 阅读 · 0 评论 -
在spark中使用Hive报错error: not found: value sqlContext
<console>:16: error: not found: value sqlContext import sqlContext.implicits._ ^<console>:16: error: not found: value sqlContext import sqlContext.sql ^raini@biyuzhe:~$ spark-shell --jars /home/raini/spa原创 2016-05-15 19:20:10 · 14165 阅读 · 4 评论 -
[keras] FailedPreconditionError: Attempting to use uninitialized value batchnormalization_
使用keras编译模型时的错误:FailedPreconditionError: Attempting to use uninitialized value batchnormalization_1_running_mean/biased尝试在Fit之前调用: keras.backend.get_session().run(tf.global_variables_initializer())...原创 2018-07-06 10:15:13 · 3655 阅读 · 0 评论