- 博客(18)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 Hadoop HDFS 安装详细步骤
执行完后，在当前的目录下会出现一个名为 hadoop-2.7.5 的文件目录，这个目录就是 hadoop 的安装目录。1 无法http://meater/dfshealth.html 中显示 其他datenode 节点。到目前为止，HDFS 的配置已经全部结束，接下来我们启动 HDFS 集群，并且验证。检查 Hadopp 和 java 版本是否对应，在官网中查。pc： ~/.ssh/konwn_hosts 中。配置 Hadoop 依赖的 JAVA_HOME。在 hdfs-site.xml 配置文件最加。
2023-07-03 16:11:57
2191
1
原创 superset权限设置
can_save_changed_dashboard_on_explore：可以保存对探索结果所做的更改。can_export_query：可以将SQL查询导出为Python文件。can_all_datasource_access：可以访问所有数据源。can_all_database_access：可以访问所有的数据库。can_explore：可以探索数据源，创建新的查询和可视化图表。can_set_filter：可以设置和使用查询过滤器。can_renew_mv：可以重新生成全局中的移动视图。
2023-04-19 21:53:42
1130
原创 python高级技能笔记
容器对象class 动态处理对象class str 和 repr 魔术方法克隆python对象提升Python技能 更多Pythonic类约定 自定义异常类adc 模块 抽象基类实现接口 ，给指定契约，设计蓝图
2022-11-28 14:52:48
190
转载 python excel添加加颜色参考
import openpyxlimport openpyxl.stylesfrom openpyxl.styles import PatternFill#新建一个空excel 表名为sheet 文件名为testwb=openpyxl.Workbook()wb.save(“test.xlsx”)#打开excel表wb=openpyxl.load_workbook(“test.xlsx”)#新建sheet表wb.create_sheet(title=“sheet1”)#获取所有的sheet
2021-11-05 22:42:02
573
原创 python字典分组
target_list = []n = 0m = 0k = 0item_list = {}for index, value in dict(data_df[‘data’]).items():if value == ‘A’ and n == 0 :item_list[value] = indexn = 1if value == ‘B’ and m == 0:item_list[value] = indexm =1elif value == ‘B’ and m != 0:item
2021-05-26 23:07:45
268
原创 pandas数据库操作
# 连接 mysql conn = pymysql.connect(host="", user="", passwd="", db="", charset="utf8") sql_query = 'SELECT * FROM modulus' data_task = pd.read_sql(sql_query, con=conn) del data_task["id"] # 连接 psycopg2 postmysql conn_tc.
2021-03-28 20:39:14
71
原创 pyinstaller打包exe文件
pyinstaller -F -w 文件.py --noconsole。执行命令，注意此时对xxx.spec文件执行，完成exe打包。报错后，找到当前目录下的xxx.spec，在此文件开头添加。
2021-03-26 14:30:38
174
原创 pandas 模糊合并两个dataframe
import pandas as pdfrom fuzzywuzzy import fuzzfrom fuzzywuzzy import processinp = [{'c1':10, 'ID':"CMCC_VOLTE_Ainter_15.8"}, {'c1':11,'ID':"CMCC_VOLTE_Ainter_15.9"}, {'c1':12,'ID':"CMCC_VOLTE_Ainter_15.7"}]df1 = pd.DataFrame(inp)df["id_split"] = df["I
2021-01-28 22:26:10
442
原创 centos7.5环境部署python，mysql
centos7.2重新安装yum安装Linux下安装Anaconda(64位) ： https://blog.csdn.net/ychgyyn/article/details/822581361 问题：安装python 执行./configure 报错如下：configure: error: no acceptable C compiler found in $PATH See `config.log' for more details原因：由于本机缺少gcc编译环境 1、通过y
2020-11-22 16:14:49
336
原创 时间处理
年月转换第几周import timefrom datetime import datetime#52 今天是52周# print(time.strftime("%W"))#2，因为今天是周三，周一是0# today = datetime.now().weekday()# print(today)#52 20171225是52周a = "2020-01-01".replace("-","")week = datetime.strptime("20200811","%Y%m%d").strf
2020-08-12 10:28:03
75
原创 数据分析
if contains([project],‘OP01’)or contains([project],‘op01’)or contains([projectmodel],‘OP01’)or contains([projectmodel],‘op01’)or contains([project],‘CMCC’)or contains([notes],‘CMCC’)or contains([title],‘CMCC’)then ‘CMCC’elseif contains([project],‘O
2020-06-04 22:23:41
618
原创 python随身笔记
笔记单词新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入单词Measurement report 测量报告...
2020-03-24 14:15:15
216
原创 遍历文件夹Excel path添加列表中
import xlsxwriterimport osclass Dir_Path(): def __init__(self, suffix,path): self.list_all = [] self.dir_path = path self.suffix = suffix def foldername(self,dir_path...
2020-01-10 10:08:27
518
原创 小米微信自动加好友appium
本人小菜，喜欢编程，初来乍到，请多多关照，只可以加能搜索到的好友。。。from appium import webdriverfrom time import sleepclass Wecher(object): def __init__(self): desired_caps = {} desired_caps['platformName'] = ...
2019-03-27 21:36:15
558
原创 ModuleNotFoundError: No module named 'twisted.persisted'
使用scrapy提示报错 pip安装多次无果解决方法：（pip/pip3）1.pip uninstall twisted2.wget https://twistedmatrix.com/Releases/Twisted/17.9/Twisted-17.9.0.tar.bz23.tar -xvf Twisted-17.9.0.tar.bz24. cd Twisted-17.9.05.pyth...
2019-03-16 13:16:37
357
转载 centos7.0 安装scrapy出错Could not find a version that satisfies the requirement Twisted>=13.1.0
1错误原因，通过pip install 安装scrapy是报错Could not find a version that satisfies the requirement Twisted>=13.1.0 (from Scrapy) (from versions: )No matching distribution found for Twisted>=13.1.0 (from Sc...
2019-03-16 10:51:39
391
原创 centos7.2下安装python3.6.2 以及 centos下安装pip
centos7.2重新安装mysql，python32 如果没有 yum 需要下载:下载这些yum包：在执行 yum install -y gcc 就可以下载了centos7.2下安装python3.6.2 以及 centos下安装pip时：安装pip 2出现问题： zlib1 问题：安装python 执行./configure 报错如下：configure: error: no acc...
2019-03-12 22:40:01
246
空空如也
python字典数据分组
2021-05-27
TA创建的收藏夹 TA关注的收藏夹
TA关注的人