Skip to main content

moregeek program

linux 系统日志 及 日志类型、日志优先级_那个从阿拉德出来的勇士的博客-多极客编程

常用的日志 linux系统log日志文件默认路径在/var/log中。 /var/log/messages 这个里面记录了系统里的各种各样的日志(包括系统、网络、内核等等……) dmesg 执行该命令 会将系统中硬件相关的日志列出来(他是保存在内存中的) dmesg -c -c 清空 (重启之后还会继续生成) /var/log/dmesg

Read More

通过ssh协议在各系统间传输文件_最爱大苹果的博客-多极客编程

在学习的时候,我们需要传输文件到linux系统,或者是需要在linux系统下传输文件到本机电脑。不常用,不想安装其他图形化软件。 这时候,我们可以利用ssh协议来传输文件。windows连接linux系统1、复制windows文件到linux系统scp D:\data\1.txt root@192.168.88.161:/root/data需要输入root信息此时linux上没有1.txt显示成功

Read More

python爬虫-35-scrapy实操入门,一文带你入门,保姆级教程_12376780的博客-多极客编程

1、安装​​scrapy​​相关组件pip install scrapy -i https://pypi.tuna.tsinghua.edu.cn/simple如果在​​windows​​​系统下,提示这个错误​​ModuleNotFoundError: No module named 'win32api'​​​,那么使用以下命令可以解决:​​pip install pypiwin32​​。2、创

Read More

​python爬虫-34-scrapy框架入门,scrapy架构模块功能认识_12376780的博客-多极客编程

Scrapy是适用于Python的一个快速、高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。1、scrapy初始我们知道,写一个爬虫是比较费劲的,比如说发起请求、数据解析、反反爬虫机制、异步请求等。如果我们每次都手动去操作,就很麻烦。​​scrapy​​这个框架已经把一些基础的内容封装好了,我们可以直接来使用

Read More

python爬虫-31-python图形验证码进阶,识别中文(二)_12376780的博客-多极客编程

有些验证码是中文的,使用的时候可能发现了,并不能支持识别中文,那么我们应该如何解决呢?1、python识别图片中的中文字符-old先来看下默认的情况下识别中文是什么样子的呢,比如我们要识别下图:然后我们写出如下代码:import pytesseractfrom PIL import Imagepytesseract.pytesseract.tesseract_cmd = r"C:\Program

Read More

python爬虫-32-python字体反爬,网页看到的和实际下载的不一致(理论)_12376780的博客-多极客编程

开发者自己创建的一种字体,但是恰恰是由于是自己创造的,所以我们查看网页源代码的时候发现是乱码,因为我们系统识别不到。但是又因为是前端展示,如果将常见的几千个中文重新全部创建一遍,那么每次访问该网站都需要下载十几兆的内容,所以往往只是对于数字,或者一些敏感的字进行重造。1、描述当我们爬取网站过多的时候,是不是会发现一种情况,就是说明明在网页看到了实际的数据,但是当你使用​​python​​爬虫爬取下

Read More

python爬虫-19-CSV文件之python数据存储-多极客编程

​​CSV​​是一种通用的、相对简单的文件格式,被用户、商业和科学广泛应用。最广泛的应用是在程序之间转移表格数据,而这些程序本身是在不兼容的格式上进行操作的(往往是私有的和/或无规范的格式)。因为大量程序都支持某种CSV变体,至少是作为一种可选择的输入/输出格式。1、CSV文件的特征和规则特征​​CSV​​泛指具有以下特征的任何文件:纯文本,使用某个字符集,比如​​ASCI​​​I、​​Unico

Read More

python爬虫-17-python之正则表达式,以最快的速度获取有效数据(下)-多极客编程

1、python匹配以什么什么开头方法:^ # 脱字号示例:import reJier = 'yunweijia0909'Suner = re.match('^yun', Jier)print(Suner.group())输出结果如下:yun2、python匹配以什么什么结尾方法:$示例:import reJier = 'yunweijia0909'Suner = re.search('0909

Read More

python爬虫-15-使用python爬取中国天气,然后将最低温排序进行绘图展示-多极客编程

学以致用,我们这次使用​​BeautifulSoup​​​模块,来爬取下中国天气网的天气信息,然后取出最低气温进行排序,并使用​​pyecharts​​绘图模块,进行图形的绘制。1、爬取流程梳理(1)整体定位首先我们要知道爬取的是哪个界面,界面的样式是什么;(2)范围定位我们需要爬取的是,每一个地区的下面省份天气;(3)大致定位每一个省份都划分成多个地区,或者多个市,我们需要依次来获取;(4)准确

Read More

Python轻松制作一个ssh登录器-多极客编程

一、前言提到ssh,我们不禁想到了xshell这个著名的工具,以及Linux系统,因为ssh一般是Linux中建立的远程连接服务,和windows中的telnet比较相似,都是用于远程连接,我们可以在Linux中轻松创建一个ssh服务,然后我们的Linux服务器如果对外开放的话就可以轻松被别人访问到,不过这里小编的Linux服务器并没有对外开放,因此只是在本地测试,首先我们搭建好ssh服务,如图:

Read More

Linux安装Terminator-多极客编程

大家在使用Linux系统的时候,有很大一部分时间都是和系统的终端打交道。时间久了会不会有一种厌烦的感觉呢?(我是一个始终如一的人,怎能厌烦呢?):smile: ubuntu下面的Terminal长的是这个样子的。如果你开的终端一多,就可能是下面这个样子的,对于有强迫症的我来说下面这个样子我是受不了的,我一定会拖动鼠标,然后就变成了第二张图的样子。要排成二图的样子,非常的浪费时间,有没有? 再给大家

Read More

#yyds干货盘点# web安全day28:一文读懂Linux日志,运维工程师必备!-多极客编程

Linux系统拥有非常灵活和强大的日志功能,可以保存几乎所有的操作记录,并可以从中检索出我们需要的信息。会看Linux日志是非常重要的,不仅在日常操作中可以迅速排错,也可以快速的定位入侵者。`Linux日志文件放在/var/log/目录下cd /var/logls常用日志系统日志是由一个名为syslog的服务管理的,如以下日志文件都是由syslog日志服务驱动的:boot.log记录了系统在引导过

Read More

Linux 命令行与 shell 脚本编程大全 1.初识Linux shell#yyds干货盘点#-多极客编程

@toc 1 初识 Linux shell     在深入研究如何使用 Linux 命令行和 shell 之前,最好先了解一下什么是 Linux、它的历史及运作方式。本文将带你逐步了解什么是 Linux,并介绍命令行和 shell 在 Linux 整体架构中的位置。 1.1 什么是 Linux     如果你以前从未接触过 Linux,可能就不清楚为什么会有这么多不同的 Linux 发行版。在查看

Read More

Linux修改时间 修改时区 | Linux时间校准 #yyds干货盘点#-多极客编程

今天stat文件的时候发现时间是错的,我很懵逼,我想改一下子,结果找了好多都不对。乱七八糟的只好自己整理一下。 修正Linux时间只需三步 ntpdate ntp1.aliyun.com 对准到阿里云校时服务器 hwclock -w将系统时间同步到硬件时间 vim /etc/localtime将UTC改为==CST==或者==UTC+8==即可。 修改之后时间显示就是正常的了。<font s

Read More

inode和日志分析-多极客编程

@[toc] inode号与block 一、inode与block 概念 文件数据包括元信息与实际数据 (元信息>>inode,数据>>block) 文件存储在硬盘上,硬盘最小存储单位是“扇区”(sector),每个扇区存储512字节 block(块) 连续的八个扇区组成一个block(4k) 是文件存储的最小单位 一般连续八个扇区组成一个"块"(block),一个块

Read More

深入理解LINUX文件系统-多极客编程

inode与block概述 文件数据包括元信息与实际数据文件存储在硬盘上,硬盘最小存储单位是“扇区”,每个扇区存储512字节block(块)连续的八个扇区组成一个block(一个块是4k大小)是文件存取的最小单位。操作系统读取硬盘的时候,是一次性连续读取多个扇区,即一个块一个块的读取的。文件数据包括实际数据与信元信息(类似文件属性)。文件数据存储在“块“中,存储文件元信息(比如文件的创建者、创建日

Read More

Linux的文件系统-多极客编程

Linux的文件系统 壹、indoe与block 1、inode与block概述 文件数据包括元信息与实际数据 文件存储在硬盘上,硬盘最小存储单位是“扇区”,每个扇区存储512字节 block (块) 连续的八个扇区组成一个block(4K) 是文件存取的最小单位 inode (索引节点) 中文译名为“索引节点”,也叫i节点 用于存储文件元信息 //一个文件必须占用一个inode,且至少占用一个b

Read More

Linux文件系统日志分析-多极客编程

一、Linux文件系统 1、 inode 与 block 文件数据包括元信息与实际信息; 文件存储在硬盘上,硬盘最小存储单位是“扇区”,每个扇区存储512字节。 一个文件必须占用一个inode, 并且至少占用一个block 1.1 block:(块)的概念 连续的八个扇区组成一个block(4k); 是文件存取的最小单位 操作系统读取硬盘的时候,是一次性连续读取多个扇区,即一个块一个块的读取 1.

Read More

深入理解Linux文件系统与日志分析-多极客编程

一、inode和block概述 文件数据包括元信息与实际数据 (元信息:包含属性的相关信息,实际数据:文件内容)文件是存储在硬盘上的,硬盘的最小存储单位叫做"扇区”(sector),每个扇区存储512字节。 一般连续八个扇区组成一个"块"(block),一个块是4K大小,是文件存取的最小单位。操作系统读取硬盘的时候,是一次性连续读取多个扇区,即一个块一个块的读取的。block(块) ●连续的八个扇

Read More

linux inode文件系统;备份恢复及日志分析-多极客编程

1 、深入理解linux文件系统 1.inode与block inode 存储文件元信息(比如文件的创建者、创建日期、文件大小、文件权限等)的区域就叫做inode 在 liunx 中创建文件系统时,同时将会创建大量的 inode。通常,文件系统磁盘空间中大约百分之一空间分配给了 inode 表。 block 一般连续八个扇区组成一个"块" (block) ,是文件存取的最小单位,一个块是4K大小

Read More