![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
Python私教
收徒弟,接私活,有直播课和私教课,可以做家教和川渝线下教学,包教会 18010070052。
展开
-
使用Python操作ElasticSearch原来可以如此简单,发现了一个超好用的Python库
zapi_elastic_searchpython快速操作ElasticSearch的组件项目地址:https://github.com/zhangdapeng520/zapi_elastic_search一、快速入门案例安装pip install zapi_elastic_search增删改查案例# 使用python操作ElasticSearchfrom zapi_elastic_search import EsClient# 连接ESes = EsClient()print(e原创 2021-12-02 21:45:29 · 1563 阅读 · 2 评论 -
理想国windows搭建spark+hadoop大数据开发环境教程
01.简介在python中使用pyspark并不是单纯的导入pyspark包就可以实现的。需要由不同的环境共同搭建spark环境,才可以在python中使用pyspark。搭建pyspark所需环境:python3,jdk,spark,Scala,Hadoop(可选)02.jdk下载安装下载地址:联系作者从百度网盘下载打开Windows中的环境变量:创建JAVA_HOME:C:\Program Files\Java\jdk1.8.0_181创建CLASSPATH:.;%JAVA_HOME%原创 2021-01-23 12:30:24 · 234 阅读 · 0 评论 -
理想国docker安装spark教程
方法1Sequenceiq 公司提供了一个docker容器,里面安装好了spark,你只要从docker hub上pull下来就行了。docker pull sequenceiq/spark:1.5.1执行下面命令来运行一下:sudo docker run -it sequenceiq/spark:1.5.1 bash首先用ifconfig得到ip地址,我的ip是172.17.0.3,然后:bash-4.1# cd /usr/local/sparkbash-4.1# cp conf/spa原创 2021-01-23 11:01:29 · 481 阅读 · 0 评论 -
理想国Elasticsearch入门教程
01.简介what:是什么全文搜索引擎技术支持PB级的快速搜索Elaticsearch,简称为es, es是一个开源的高扩展的分布式全文检索引擎,它可以近乎实时的检索数据;本身扩展性很好,可以扩展到上百台服务器,处理PB级别的数据。ES使用Java开发。Lucene作为其核心来实现所有索引和搜索的功能,但是它的目的是通过简单的RESTful API来隐藏Lucene的复杂性,从而让全文搜索变得简单。why:为什么使用非常流行,且免费开源where:在哪里用大部分Web项目都可以用原创 2020-12-22 10:47:35 · 438 阅读 · 0 评论