日志

3 篇文章

thumbnail
科学利用谷歌云平台
当今既是大数据时代,也是云计算时代。云平台构建已经成了诸多大数据平台建设第一步。于是各家互联网巨头们纷纷都开启了云平台服务。国内的以阿里云、腾讯云、百度云、华为云为首,国外的有AWS和谷歌。最近Google Cloud(谷歌云平台)有新用户注册就送300美刀的优惠,可使用时间为12个月!这也是本文的基础,关于Google Cloud注册就不介绍了。…
thumbnail
使用wget命令爬取整站
wget -c -r -npH -k -nv http://www.baidu.com 参数说明-c:断点续传-np:递归下载时不搜索上层目录-nv:显示简要信息-nd:递归下载时不创建一层一层的目录,把所有文件下载当前文件夹中-p:下载网页所需要的所有文件(图片,样式,js文件等)-H:当递归时是转到外部主机下载图片或链接 -k:将绝对链接转换为…