Python爬虫之模拟登陆豆瓣

在用python写爬虫时,不可避免的会遇到一些需要登陆账号后才可以看到需要内容的网站。本次我们就以模拟登陆豆瓣为例。为了让我们的登陆看起来更像是从一个浏览器发起的访问,我们需要为我们的请求额外添加headers和cookies。首先打开火狐浏览器输入www.douban.com,填写好自己的豆瓣账号密码。点击登陆后再摁F12打开开发者工具切换到网络窗口往上翻到第一条请求。右边小窗口,我们需要查看的
阅读本文

Go语言?Docker?对新技术怎么看?

对于 Go 语言和 Docker 这两种技术,在国内的技术圈中有相当大的一部分人和群体还在持观望或是不信任的态度。所以,我想写这篇文章,从两个方面来论述一下我的观点和看法。上个月,作为 Go 语言的三位创始人之一,Unix 老牌黑客罗勃·派克(Rob Pike)在新文章“Go: Ten years and climbing”中,回顾了一下 Go 语言的发展过程。其中提到,Go 语言这十年的迅猛发展
阅读本文

2017年个人技术路程回顾

17年是正式毕业后的第一年(虽然算下来其实已经工作两年多了),从老东家跳到了新东家,接触了不少新技术,也了解了不少新事物,算是在技术路上走得还可以的一年。    1.技术栈的变化  虽然之前也是做前后端结合的web开发,但使用的是.net全家桶+jquery,整个用起来行云流水,仍然感觉脱离了时代。到了现东家后,用python+ng做云平台,虽然整体流程复杂了,但至少感觉跟上了时代,至少拽住了
阅读本文

Nginx+Lua+MySQL/Redis实现高性能动态网页展现

Nginx结合Lua脚本,直接绕过Tomcat应用服务器,连接MySQL/Redis直接获取数据,再结合Lua中Template组件,直接写入动态数据,渲染成页面,响应前端,一次请求响应过程结束。最终达到下图的一个效果。OpenResty组件OpenResty的自带组件库默认已经集成了相当实用的组件,http://openresty.org/cn/components.html,如下所示: Lu
阅读本文

半小时学会卷积神经网络

觉得这篇关于卷积神经网络讲的比较全面清晰易懂。(文中有些内容可能不是很清晰,会加上一些自己的理解,用红色字体标出,后续不断更新。) 简单回顾卷积神经网络的发展历程。日本科学家福岛邦彦(Kunihiko Fukushima)在1986年提出Neocognitron(神经认知机),直接启发了后来的卷积神经网络。Yann LeCun于1998年提出的卷积神经LeNet,首次提出了多层级联的卷积结构,可对
阅读本文

移动开发者快速上手php接口开发

前言 Android写多了,突然想换个姿势;就鼓捣了一阵iOS,发现和Android大同小异;那就学学后台,写写接口? 有时候吧,人就得折腾折腾,否则就容易缺乏危机感,虽然大部分时间我们都是从事当前岗位的事情,但是工作之余,我们也是要逐步提升自己,起码我们要有意愿去了解新技术!毕竟同时了解多种相关技术,整体的思维肯定会有提升! 但是不可否认的是:脱离实际业务的技术都是纸上谈兵 但是我们也得从纸上谈
阅读本文

red5 视频应用开发指南。第一个项目成功运行经验

1,一直想做视频,可惜资料不是很多。本来想买北风网的视频,太贵了,网上买了一本书自己看第一个项目是连接red5服务器第一个项目做了两天,终于成功了。2,按照书本的要求一步一步的来发现后面总是出现,NetConnection.Connect.Rejected 拒绝连接博客分类:  Email: linxingliang198811@163.com说明:有问题可以留言,发邮件! 版本说明:
阅读本文

IT职业技术的两大热门方向

IT职业技术的两大热门方向:运维技术和软件开发。    运维技术,分几个方向:数据库运维(Oracle、mySQL、MSSQL),Linux运维,虚拟化和云计算,网络安全。这些方向都需要先学习基础知识,比如计算机网络和虚拟机必须要先学会。       软件开发,又分为几个方向:软件测试、Java软件开发、安卓软件开发、大数据等。       这两个方向需要掌握的知识有些不同,也有些涵
阅读本文

第三次作业:结对编程

一、结对成员介绍及coding.net 地址:小组成员:郭和水(201421122017)、张新磊(201421122019)Coding.net: 二、题目描述:在个人作业1中,用各种语言实现了一个命令行的四则运算小程序。进一步,本次要求把这个程序做成GUI,成为一个有基本功能、一定价值的程序。实现下面的功能需求:记录用户的对错总数,程序退出再启动的时候,能把以前的对错数量保存并在此基础上增量计
阅读本文

结对编程1—模块化

一、结对成员及coding.net地址   苏晓薇(201421031033)  coding.net地址:https://git.coding.net/Recos/myprogram.git   视频演示:http://v.youku.com/v_show/id_XMzEwMjkwMDA0NA==.html?spm=a2h3j.8428770.3416059.1二、项目开发1、需求分析
阅读本文

结对编程-四则运算

一、结对成员:蔡少杭 201421122111许祈瑶 201421122094项目开发的coding.net 地址:https://git.coding.net/HangZhe/HomeWork3.git 二、题目描述:在个人作业1中,用各种语言实现了一个命令行的四则运算小程序。进一步,本次要求把这个程序做成GUI,成为一个有基本功能、一定价值的程序。在下面的功能需求中实现两个: 记录用户的对错总
阅读本文

结对编程1-模块化

一、小组成员(本人)黄进勇 201421122008 coding.net地址:【https://git.coding.net/conding_hjy/project-02.git】  优酷视频地址:【http://v.youku.com/v_show/id_XMzEwMjk3MjQwOA==.html?spm=a2h3j.8428770.3416059.1】二、题目描述我们在个人作业1中,用
阅读本文

ASP.NET HttpModule——原理

一、Asp.Net执行过程    当客户端向web服务器请求一个*.aspx的页面文件时,同asp类似,这个http请求也会被inetinfo.exe进程截获(www服务),它判断文件后缀之后,把这个请求转交给ASPNET_ISAPI.DLL而ASPNET_ISAPI.DLL则会通过一个Http PipeLine的管道,将这个http请求发送给ASPNET_WP.EXE进程,当这个HTTP请求进入
阅读本文

腾讯产品群面题解析

2017年腾讯秋招已逐渐拉下帷幕,下面我将腾讯这几年的群面题进行汇总分析,以飨大家,感谢参与讨论的小伙伴@丹丹和@世新,不足之处还望留言赐教!群面题提纲:1、青少年游戏监控平台的设立,除此之外游戏平台、家长学校、社会方面分别还能做什么? 2、纳米气体传感器的应用,设计一款产品 3、设计一个智能语音助手 4、5V1的拉杆换道问题 5、深圳的面积是A平方米,2016年的常住人口B万,民用车用户C万,公
阅读本文

技术路线的选择重要但不具有决定性

最近微软在技术上连续有大动作,在PDC上发布了Windows Azure云计算平台,预告了Visual Studio 2010、.NET 4.0和C# 4.0。如果放在几年前,我相信微软粉丝们一定是欢声雷动,不过这次情况有点不太一样,在网上看到有人在抱怨微软技术更新速度太快而且四面出击,还有人扬言要改弦更张,投奔Linux或者Java阵营。我本人也收到一封来信,写信人大意是说自己大学时选择.N
阅读本文

自助无人便利店管理系统开发加盟

自助无人便利店管理系统开发加盟咨询:185-2946-0381 微电同号 无人超市加盟需要多少费用?无人便利店加盟怎么加盟。 这是一个疯狂的时代,这是一个颠覆的时代,瑞星被360颠覆了,微软被安卓颠覆了,诺基亚被苹果颠覆了,银行存款业务被余额宝颠覆了,移动电信联通三巨头的短信彩信业务一夜之间被小小的微信给颠覆了……曾经那些不可一世的巨头们一个接一个的倒下,这个世界不再有永恒的王者,一切都可能被改写
阅读本文

Spring2.5的新特性:第一部分

简介 从诞生之初,Spring框架就坚守它的宗旨:简化企业级应用开发,同时给复杂问题提供强大的、非侵入性解决方案。一年前发布的Spring2.0就把这些主题推到了一个新的高度。XML Schema的支持和自定义命名空间的使用大大减少了基于XML的配置。使用Java5及更新版本java的开发人员如今可以利用植入了像泛型(generic)和注解等新语言特性的Spring库。最近,和AspectJ
阅读本文

【云栖大会精华汇】历届云栖大会精彩资料大放送,一篇看尽云栖大会前世今生

点击查看全文 历届云栖大会精彩资料大放送,一篇看尽云栖大会前世今生         【本期预热】 云栖精选8月刊丨最全2016云栖大会资料大放送!技术精彩值得打call! 我们承包了云栖大会阿里大数据专场,10月11日请你来 2017杭州云栖大会FAQ(持续更新中) 杭州云栖大会10月起航,这里有一份最全的大会剧透 【资源下载】【合集】云栖大会珍贵技术资料:20+覆盖容器技术、智能
阅读本文