scrapy爬虫框架学习笔记(一)
scrapy爬虫框架学习笔记(一)1.安装scrapypip install scrapy2.新建工程:(1)打开命令行模式(2)进入要新建工程的目录(3)运行命令:scrapy startproject projectname这个命令会在运行命令的目录下新建一个工程目录这个目录有一个初始的目录结构...
kafka学习笔记：知识点整理
一、为什么需要消息系统1.解耦：允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。2.冗余：消息队列把数据进行持久化直到它们已经被完全处理，通过这一方式规避了数据丢失风险。许多消息队列所采用的"插入-获取-删除"范式中，在把一个消息从队列中删除之前，需要你的处理系统明确的指出该消...
ROBOTS.TXT屏蔽笔记、代码、示例大全
自己网站的ROBOTS.TXT屏蔽的记录，以及一些代码和示例：屏蔽后台目录，为了安全，做双层管理后台目录/a/xxxx/，蜘蛛屏蔽/a/，既不透露后台路径，也屏蔽蜘蛛爬后台目录缓存，阻止蜘蛛爬静态缓存文件下载，阻止蜘蛛爬下载目录，若无用，删除下载目录编辑器，阻止蜘蛛爬编辑器，也防止编辑器目录被发现产...
head first python菜鸟学习笔记（第六章）
1. Python提供字典，允许有效组织数据，将数据与名关联，从而实现快速查找，而不是以数字关联。字典是内置数据结构，允许将数据与键而不是数字关联。这样可以使内存中的数据与实际数据的结构保持一致。？？？2.将代码及其数据打包在类中：Python允许创建并定义面向对象的类，类可以用来将代码与代码处理的...
o'Reill的SVG精髓（第二版）学习笔记——第四章
第四章：基本形状4.1线段SVG可以使用<line>元素画出一条直线段。使用时只需要指定线段起止点的x和y坐标即可。指定坐标时可以不带单位，此时会使用用户坐标，也可以带上单位，如em、in等。<line x1="start-x" y1="start-y" x2="end-x" y2...
head first python菜鸟学习笔记（第三章）
1.os.chdir()切换到指定目录下，os.getcwd()，得到当前目录。>>> import os>>> os.chdir('D:\\CodeDocuments\\python code\\python head first code\\03chapter...
《Python基础教程（第二版）》学习笔记 -> 第四章 字典
字典是Python中唯一内建的映射类型。字典中的值并没有特殊的顺序，但是都存储在一个特定的键（Key）里。键可以是数字、字符串甚至是元组。字典的使用某些情况下，字典比列表更加适用：表征游戏棋盘的状态，每个键都是由坐标组成的元组；存储文件修改次数，用文件名作为键；数字电话/地址簿创建和使用字典字典由多...
python基础学习笔记第四天 list 元祖 字典
一 LIST方法列表操作包含以下函数:1、cmp(list1, list2)：比较两个列表的元素 2、len(list)：列表元素个数 3、max(list)：返回列表元素最大值 4、min(list)：返回列表元素最小值 5、list(seq)：将元组转换为列表 列表操作包含以下方法:1、list...
angularjs 的笔记
angular.copy()深拷贝angular提供了一个可以复制对象的api——copy(source,destination)，它会对source对象执行深拷贝。使用时需要注意下面几点：如果只有一个参数（没有指定拷贝的对象），则返回一个拷贝对象如果指定了destination,则会深拷贝对象复制...
python学习笔记-（十四）I/O多路复用 阻塞、非阻塞、同步、异步
1. 概念说明1.1 用户空间与内核空间现在操作系统都是采用虚拟存储器，那么对32位操作系统而言，它的寻址空间（虚拟存储空间）为4G（2的32次方）。操作系统的核心是内核，独立于普通的应用程序，可以访问受保护的内存空间，也有访问底层硬件设备的所有权限。为了保证用户进程不能直接操作内核（kernel）...
CS229 笔记03
CS229 笔记03局部加权线性回归Non-Parametric Learning Algorithm （非参数学习方法）Number of parameters grows with the size of sample. （参数的数目随着样本的数目增加而增加。）Locally Weighted ...
Oracle学习笔记（二）——临时表
在针对大数据量的多表级联查询或复杂事务处理的时候，引入Oracle临时表是一种不错的策略。因此，在解决实际需求时经常会遇到需要使用存储过程和临时表相互配合的情况。下面就Oracle如何创建临时表以及注意事项做出总结：一、创建临时表Oracle临时表分为回话期和事务期两种类型，他们的创建语法基本一致：...
hibernate笔记--组合主键映射方法
一个数据库表中其主键有可能不止一个属性,同样映射到实体类中,可能有两个或多个属性共同配置成为一个主键,假设一个实体类Score,其主键有两个属性stuId(学生编号)和subjectId(科目编号),在hibernate环境下应该这样配置:新建一个实体类ScoreId,属性为stuId,和subje...
Gtihub学习Micro8安全笔记(第三课)之Delphi代码审计--项目实战1
本来想看一下那个第二课Linux提权的，可是文件可能被Micro大佬给被删掉了！！！专注APT攻击与防御https://micropoor.blogspot.com/程序的主要function，与procedure**注：**Delphi吧操作数据的方法分成了两种，一种是function，另一种是p...
如何在本机通过GitBook把笔记同步到github
如何在本机通过GitBook把笔记同步到github在开发的过程中我们经常有一些心得和总结 ，可以通过笔记 、博客和 github等方式记录，这篇文章告诉你如何在本机通过GitBook把笔记同步到github上，让全球开发者学习到你分享的知识。一、安装软件（软件安装，请自行解决，此项不是重点）1、g...
【安全牛学习笔记】UDP端口扫描
ICMP port-unreachablepython脚本： #! /usr/bin/pythonimport logginglogging.getLogger("scapy.runtime").setLevel(logging.ERROR)from scapy.all import *import...
HP cq40 笔记本拆机详细教程
1、首先把笔记本电池拆掉。将后面所有可以看到的螺丝全部拆掉。绿色的固定光驱的螺丝，把这颗螺丝拧掉就直接可以把光驱拉出来了。电池后面的几颗螺丝全部拆掉。记得把拧下的螺丝分类放置，方便装机回去更方便。2、拆下下面图中的3个盖子，我们就可以看到内存条，硬盘和无线网卡了。紫色圈中是键盘螺丝，取下上图标注的两...
BrupSuite渗透测试笔记（十）
一、Brup Repeater通常结合Proxy（历史记录），Scanner（扫描记录）、Target（站点地图）等，通过其他工具上的右键执行【Send to Repeater】，之后跳转到Repeater选项卡中，然后对请求数据的修改，以及请求重放，数据的分析与漏洞的验证。其中包含几个设置选项卡 ...
webug笔记——注入
一、布尔注入id=1‘’or 1=1–+这里存在注入点id=1%27order%20by%203–+利用order by判断字段Order by 3的时候页面发生变化。所以应该是有两个可以显示的地方。利用left（）函数判断数据库名，先判断数据库名长度大于5的时候页面发生变化，说明数据库名长度应该是...
渗透笔记之火狐代理设置证书设置
渗透笔记之火狐代理设置证书设置1.火狐浏览器----右上角三横杠----选项2.选项----高级----设置----不使用代理----确定3.点击浏览器中间小狐狸4.双击color蓝色区域----手动配置代理服务----主机地址127.0.0.1 端口80805.菜单栏----全局设置----**工...