-
2017-06-20 14:29:44
- 如何抓取斗图网的最新表情图?
-
一:目标
第一次使用Scrapy框架遇到很多坑,坚持去搜索,修改代码就可以解决问题。这次爬取的是一个斗图网站的最新表情图片www.doutula.com/photo/list,练习使用Scrapy框架并且使用的随机user agent防止被ban,斗图表情包每日更新,一共可以抓取5万张左右的表情到硬盘中。为了节省时间我就抓取了1万多张。
二:Scrapy简介
Scrapy是一
-
2272
-
2017-06-20 14:28:26
- Java程序的编写、编译、运行的原理
- 本文主要Java程序设计环境的要点,以及相关注意事项。
一、安装Java开发包
Oracle公司为Linux、Mac OS X、Solaris和Windows提供了Java开发工具包(JDK)的最新、最完整的版本。至于大佬们为什么没有打算合作一下,在电脑中自动配置Java开发程序,那时有着一定的历史原因,喜欢的盆友可以自己找找相关的资料。下面进入正题,如何安装Java开发包:
1.下载Java可发
-
2552
-
2017-06-20 14:25:49
- 什么是序列化?序列化的具体介绍
- 一 序列化
1.什么是序列化?
将内存中的对象写入到硬盘中就是序列化,与一般输出并无区别,只是输出的数据是对象,不是一般的文本。
2.序列化的作用
因为数据在内存中的存储是暂时的,如果需要长久保存对象,必须把对象写入硬盘,就产生了序列化。
3.序列化的条件
一个对象要想被序列号,该对象所属的类必须实现Serializable接口,该接口是一个标志性接口,无任何字段与抽象方法,JVM遇到
-
3592
-
2017-06-20 14:26:37
- 总结Python中的数据类型
- 一、整型
在Python2中还有整型和长整型之分,但Python3中取消了长整型,统一归类为整型。
Python中的整型数可以用二进制,八进制,十进制和十六进制几种形式表示
可以用下面的方法来把十进制转换为其他几种形式
>>> print(bin(10)) ---------> 把十进制转化为二进制
0b1010
>>> print
-
1875
-
2017-06-20 14:24:48
- tpcc-mysql安装测试与使用的实例教程
- 1:下载tpcc-mysql的压缩包,从下面的网站进行下载
https://github.com/Percona-Lab/tpcc-mysql
也可直接从叶总博客直接下载:
http://imysql.com/wp-content/uploads/2014/09/tpcc-mysql-src.tgz
我这边使用的就是后者。
2:安装tpcc-mysql
[root@mxqmongodb2 tp
-
1833
-
2017-06-20 14:23:55
- 什么是索引?Mysql目前主要的几种索引类型
- 目录
一、索引
二、索引类型
三、索引种类
四、操作索引
五、创建索引的时机
六、命中索引
七、其它注意事项
八、LIMIT分页
九、执行计划
十、慢查询日志
一、索引
MySQL索引的建立对于MySQL的高效运行是很重要的,索引可以大大提高MySQL的检索速度。
打个比方,如果合理的设计且使用索引的MySQL是一辆兰博基尼的话,那么没有设计和使用索引的MySQL就是一
-
7203
-
2017-06-20 14:09:56
- Mybatis中#{}和${}有什么区别
- 前几天去一家公司笔试,有一道题是“Mybatis中#{}和${}的区别?”。说实话,当时自己真的不是很清楚,因为我本人没有怎么学习过mybatis,虽然最近做的项目用的是mybatis,但也只涉及到最基本的增、删、改、查,多表之间的关联也几乎没有用到。而#{}只在mapper映射文件中用到,${}在JS和前端JSP页面中用到。后来上网查了一下发现,二者之间的区别还是很大
-
9948
-
2017-06-20 14:10:34
- MySQL中key与index详细介绍
- 目录
零、参考网页
一、概述
二、语法
三、外键
四、索引
零、参考网页
http://zhidao.baidu.com/link?url=ik8ZtrHL2qfZMgQStSFEcP2ORechkwBzbxBQjMQ15SoCV11-rRv5buPIPLZBZu570-YWRoAFsqANBiIIsQbBsK
http://www.cppblog.com
-
11855
-
2017-06-20 14:17:48
- Python爬妹子爱取的名字
- 闲来无事上知乎,看到好多妹子,于是抓取一波。
有没有兴趣??
目标网址https://www.zhihu.com/collection/78172986
抓取分析
爬取分析
使用pandas操作文件
import pandas as pd
fp = pd.read_excel('D:\Backup\桌面\lunzige.xlsx')
fp
name = fp['name'].tolis
-
2068
-
2017-06-20 14:02:06
- 移动端的头部标签的使用方法
- 1.meta标签http-equiv属性语法格式:
2.content-type (显示字符集的设定) 设定页
-
2530