- 博客(7)
- 收藏
- 关注
RSS订阅原创 拷贝过来的虚拟机无法使用idea执行命令，和hdfs无法查看文件
现在我们来添加本地路径打开c >windows>system32 >drivers>etc >hosts 路径。格式为hadoop下vi 的新文件，为 /hive/test 后面的/hive为hdfs的文件夹。打开这个后我们会发现 没有映射的话会报一堆乱码（还有本机的ip找不到虚拟机，等等错误。先说结论：在你的windows上找不见你的虚拟机ip地址。双击记事本打开添加虚拟机的主机名加ip地址就ok了。我们输入主机的ip地址加端口号进入hdfs内。我们在虚拟机中使用vi 随便加一段话。
2024-04-02 21:32:43
457
1
原创 Spring boot 查看druid监控
我们选用maven项目和java 右边选择lombok，和Spring Web 下载到你想要放的地方。并在其中添加这些内容 (注意事项我们要的xiaoguo为我本机的mysql数据库中的库名)我们在包下方建一个包名为config ，新建一个类叫WebConfiguration。将application中的文件后缀改为.yml文件。添加完成以后我们打开pom.xml文件 复制下面内容。下载完成以后解压我们打开包会发现。第一我们需要修改的地方为。clean 重建一下。
2024-03-31 19:54:29
518
1
原创 豆瓣T250可视化
我将我自己爬出的数据放在了同一个包下面所以打开路径是对的，这就是复制粘贴的一个过程，图表可以自己拿到而且只需要改改其中的一些值就可以。当我们在实现一些数据可视化时发现使用grid函数时发现图会粘到一块，实现不了多张图呈现在一起的效果。我们使用page方法page帮助我们将多个模块垂直组合到一个页面中。其中这个代码为你本机的路径。自行移动然后操作图表。
2024-03-30 17:41:49
520
原创 python scrapy框架爬虫豆瓣t250
pip install scrapy（在cmd中下载我这里已经下载好了不再赘述）；yield为迭代器下一页一页只有25条，用下一页会不断爬出数据直到爬完为止。至于为什么我们要用scrapy框架，因为这是上手最快的方法。这个就是路径问题左上角的小灯泡会帮你写，和 idea 一样。在我看来爬虫是一个在网站上找路径的游戏，路径找到就会出数据。报错的话可以导这个包（本人亲测好用，因为我也报错了）。差不多和java中的mysql增删改查差不多一样。在命令行使用生成json文件。做完这些点运行不会报错。
2024-03-25 20:53:40
882
原创 Hadoop集群搭建
需要的镜像和文件链接: https://pan.baidu.com/s/1NbTakX0A8lhKn4H1NfWEWw 提取码: ZjyL 复制这段内容后打开百度网盘App，操作更方便哦。
2024-03-23 18:00:08
2244
原创 python scrapy 爬虫爬取quotes.toscrape.com
quotes = response.xpath("//div[@class='quote']") for quote in quotes: # 迭代器 yield { "text":quote.xpath("span[@class='text']/text()").extract_first(), "author":quote.xpath("span[2]/small/text()").extract_first() }/div[n] 代表 找到父级元素下的第n个子标签 并且名字为div（下标从1开始）
2024-03-21 18:57:40
1441
原创 虚拟机连接xhell连接不上
2，右键找到网络设置 更改适配器选项 ，找到vm8。右键属性使用（自动或者自己配置和自己虚拟机网络一致，自动的话连接会比较慢），1，虚拟机网络配置 检查编辑 虚拟机网络编辑器中的网关和子网IP是否和本机一致，nat设置，vm8，DHCP设置。3，检查你的xhell IP地址是否正确，然后用户登录是否为你虚拟机的用户和密码。4，使用ip a 可以查看虚拟机的ip 地址。
2024-03-20 16:54:22
286
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人