解决的问题、疑惑
文章平均质量分 88
haixwang
。。。。。。
展开
-
超详的Apache安装配置问题操作图文实录
从下载到检测,所有的图文步骤,都是亲身一步一步实践的,绝对非常的详细。<br />目录: ● 下载 ● 版本选择 ● 配置 ● 安装原创 2017-03-30 17:14:02 · 670 阅读 · 0 评论 -
Elasticsearch进阶(一)写入性能基准测试写入性能优化(56小时到5小时),chunk_size探讨
进入正题之前,解决之前的一个疑问:Elasticsearch集群是否已经正确工作?截图时,只上传过一次数据(143万条),设置为:&amp;amp;amp;amp;amp;amp;amp;amp;amp;quot;number_of_shards&amp;amp;amp;amp;amp;amp;amp;amp;amp;quot;: 5,&amp;amp;amp;amp;amp;amp;amp;amp;amp;quot;number_of_repl原创 2018-06-28 22:34:40 · 13793 阅读 · 0 评论 -
升级Centos的Python版本,安装使用elasticSearch-py,bulk跳过错误文档
升级服务器(centos6.9)Python2.6.6到2.7.15Python -Vcd /optwget --no-check-certificate https://www.python.org/ftp/python/2.7.15/Python-2.7.15.tar.xztar -xf ./Python-2.7.15.tar.xz【报错】:tar (child): xz...原创 2018-06-28 10:54:37 · 1391 阅读 · 0 评论 -
TODO集合
从今天开始,我把所有18年起的TODO,都同步到这篇文章。 一方面是方便自己常“回来看看“,记得解决这些疑惑; 另一方面,希望知道/有解决思路的前辈们能留言或者(QQ911283415)指点一二,感激! (序列中所有非链接字体以及【】中的文字,可在文章中搜索定位)九、2018年06月23日:关于Object类一些重要方法的深入理解及重载第一段测试代码中,两个Integer引用未一...原创 2018-06-23 22:23:44 · 354 阅读 · 0 评论 -
linux-like相关erros解决
以后将所有类linux系统的报错行为以及解决过程都记录在这篇博客,避免再次遇见时又犯难。尽信书,不如无书。每个人遇见的问题虽然相似但是不一定完全相同,一定要根据实际情况解决问题。ubuntu安装软件报错:【有的包未满足包依赖关系】 You might want to run ‘apt-get -f install’ to correct these: The follow...原创 2018-04-30 22:13:49 · 776 阅读 · 0 评论 -
虚拟机\物理机上5台服务器cloudrea manager5.12大数据平台搭建(持续更新)
前言操作步骤VirtualBox5.2.8CentOS6.9节点网络配置ssh配置cloudera以及JDK以及Mysql版本选择【必读】其他注意事项JDK安装mysql5.7安装防火墙正题CDH集群安装其他虚拟机扩容TODO参考前言 全文共1.4w字(仅安装整个大数据平台,关于cdh manager管理,会单独记录)。相比...原创 2018-03-31 22:35:07 · 2243 阅读 · 0 评论 -
详细的Tomcat 8.5.12安装配置问题操作实录
目录:Apache Tomcat版本的选择下载安装配置CATALINA_HOME和CATALINA_BASE的区别检验(如果该文章解决了你的问题,请在文章末端顶一下,没有解决的话,欢迎留言)一、Apache Tomcat版本的选择alpha:含有大量的缺失/未测试功能,有跟多bug,任何一段时间都可能运行不稳定。Beta:有一些未经测原创 2017-03-30 15:01:57 · 15935 阅读 · 4 评论 -
HDFS容量究竟来自何处?以及在节点内部“横向”扩容
今天在Ambari web界面中注意到警告: 我去,使用了92%,这还得了?还让不让人学习了?最开始我认为是一前朋友将namenode节点也设置为了datanode节点的原因,导致namenode“压力”大。但是细一看,不对啊,也不可能才52.7GB总容量啊,开玩笑呢。于是乎怀疑Ambari。。。去50070一看: 纳闷了,怎么这么少?然后查看了各个机器的硬盘信息 发现两个原创 2018-01-04 18:36:14 · 1209 阅读 · 3 评论 -
Spark使用VectorAssembler时:IllegalArgumentException: Data type StringType is not supported
我的处理顺序: 因为我在另外一个scala文件中已经将csv分割为了训练集和测试集,并且为了后续计算各个filed之间的相关系数而把所有filed的类型都已经改为了Double型,所以我就没有考虑我的数据会有问题。 所以我怀疑是文件第一行的列名在搞鬼,然后我就去除了文件的第一行:然后:org.apache.hadoop.fs.ChecksumException: Checksum er原创 2018-01-02 11:41:02 · 5148 阅读 · 6 评论 -
唉
一不小心半年又过了,转眼2018。半年前学的好多感觉又忘了。回头看最近半年的文,大都是什么安装啊、搭建环境啊、翻译啊、源码阅读之类水文。 明年干货比例不能低于0.5,艹!原创 2017-12-26 16:37:36 · 267 阅读 · 0 评论 -
centos7.5英伟达驱动:unable to find the kernel source tree for current running kernel;nvidia-smi has faild
1安装cuda_10.0.130_410.48_linux.run自带的410.48 driver成功,但是nvidia-smi显示查看NVIDIA显卡驱动版本cat /proc/driver/nvidia/version显示驱动安装成功lspci | grep -i nvidia显示pci插槽有两块nvidia显卡2./usr/bin/nvidia-uninstall卸载驱动然...原创 2019-05-21 16:49:37 · 19175 阅读 · 13 评论