大数据流浪法师的学习笔记与分享

带你分析Spark源码，0基础也能看懂(1)

问题描述：重新安装AndroidStudio后，打开之前创建的一个测试项目，进去之后报错：解决方案：在Project Structure里设置：然后我猜测是在这里点击然后就正常了，嘿嘿????

问题描述：解决方案：删除disabled_plugins.txt这个文件，在这个目录下：C:\Users\admin\AppData\Roaming\Google\AndroidStudio2020.3\删除后重新启动，问题解决????

文章目录存储对象存储过程存储函数触发器事件视图存储对象的层级存储对象要逐渐深入学习MySQL，就绕不开存储对象。存储对象-顾名思义，就是MySQL里能存储起来，下次还能用的对象。存储对象分为以下几大类：存储过程存储函数触发器事件视图先来简单了解一下每种存储对象的含义吧。存储过程它使用如下语句创建：CREATE PROCEDURE 并使用如下语句调用： CALL存储过程没有返回值，但可以修改其参数，以便调用者以后检查。它还可以生成返回给客户端程序的结果集。存储函数

文章目录【坑】Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running?【坑】Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running?运行docker images出现这个错误。这是因为docker服务没有启动导致的，运行syste

文章目录【BUG】TCP connection reset by peer【BUG】TCP connection reset by peer[root@node01 compile]# sudo curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose % Total %

pycharm里这玩意儿老爆红，但是不影响运行这时候我安装的tensorflow是2.x的，可以运行但是爆红。如果看着难受，可以把tensorflow换成1.0版本，然后直接import tensorflow as tf就解决了。看着闹心，但是用起来不影响。...

这里我的python版本是3.8，然后安装tensorflow1.15，提示找不到(base) D:\codes\pythons\WeChat_Big_Data_Challenge>pip install tensorflow==1.15.0 -i https://pypi.tuna.tsinghua.edu.cn/simple/Looking in indexes: https://pypi.tuna.tsinghua.edu.cn/simple/ERROR: Could not find a

问题描述：在向本地MySQL中插入数据时，可以插入在向服务器MySQL插入数据时，无法插入服务器上的表有外键，但是本地的表是单独的Exception in thread "main" java.sql.SQLIntegrityConstraintViolationException: Cannot delete or update a parent row: a foreign key constraint fails at com.mysql.cj.jdbc.exceptions.SQLErro

centos7.5扩展根目录下空间大小，解决程序编译过大问题一、 LVM简介二、 LVM基本术语三、虚拟机扩容（/dev/mapper/centos-root 空间不足）一、 LVM简介LVM是 Logical Volume Manager(逻辑卷管理)的简写，它由Heinz Mauelshagen在Linux 2.4内核上实现。LVM将一个或多个硬盘的分区在逻辑上集合，相当于一个大硬盘来使用，当硬盘的空间不够使用的时候，可以继续将其它的硬盘的分区加入其中，这样可以实现磁盘空间的动态管理，相对于普

Ｕｂｕｎｔｕ查看系统版本lsb_release -aairde@airde-virtual-machine:~$ lsb_release -aNo LSB modules are available.Distributor ID: UbuntuDescription: Ubuntu 20.04.2 LTSRelease: 20.04Codename: focal

[2021-05-07T09:49:15,784][WARN ][logstash.outputs.elasticsearch][main][e17106fde2eaa92634d2960164d3fa06da95327777fcc440b0fe90c25ec5a599] Could not index event to Elasticsearch. {:status=>400, :action=>["index", {:_id=>nil, :_index=>"cf-asiainfo

报错描述：PS C:\Users\Administrator> Start-Service auditbeatStart-Service : 由于以下错误无法启动服务“auditbeat (auditbeat)”: 无法启动计算机“.”上的服务 auditbe所在位置 行:1 字符: 1+ Start-Service auditbeat+ ~~~~~~~~~~~~~~~~~~~~~~~ + CategoryInfo : OpenError: (System.Ser

The Windows event log is a detailed record of system, security and application notifications stored by the Windows operating system that is used by administrators to diagnose system problems and predict future issues.Applications and the operating system

首先查看用法：C:\Users\Administrator\Desktop\Sysmon>Sysmon.exe /?System Monitor v13.02 - System activity monitorCopyright (C) 2014-2021 Mark Russinovich and Thomas GarnierUsing libxml2. libxml2 is Copyright (C) 1998-2012 Daniel Veillard. All Rights Reser

按照如下步骤操作：# 备份sudo cp /etc/apt/sources.list /home/sources.list.bk# 删除sudo rm -rf /etc/apt/sources.list# 写入vim /etc/apt/sources.list写入如下内容：# 默认注释了源码镜像以提高 apt update 速度，如有需要可自行取消注释deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ focal main restricte

requirements.txt 可以标明当前项目所需依赖的版本例如：flask==1.0.2keras==2.3.1 pandas==0.25.3numpy==1.17.4tensorflow==2.0.1 coloredlogs==10.0 pymongo==3.10.0mypy==0.761这样你就可以直接安装对应的依赖了，而且PyCharm检测到这个文件就可以一键安装了。这不比写在README里方便？????Cmd 切换至项目根目录执行pip freeze > re

ERROR: [4] bootstrap checks failed[1]: max number of threads [1024] for user [es] is too low, increase to at least [4096][2]: max size virtual memory [12884901888] for user [es] is too low, increase to [unlimited][3]: max virtual memory areas vm.max_map

pyspark.RDD.toLocalIterator()RDD.toLocalIterator(prefetchPartitions=False)它是PySpark中RDD的一个方法。返回一个包含该RDD中所有元素的迭代器。这个迭代器消耗的内存和这个RDD中最大分区的内存一样大。如果选择预选，即prefetchPartitions设为True，那它可能最多消耗两个最大分区的内存。用这个函数可以方便地将RDD中的数据转换为一个迭代器，方便的进行遍历操作。参数：参数名：prefetchPart