发表于 | 分类于 | 热度 ℃

HTTP的缺点

通信使用明文,可能会被窃听

所谓互联网,是由能连通到全世界的网络组成的.无论世界哪个角落的服务器在和客户端通信时,
在此通信线路上的某些网络设备,光缆,计算机等都不可能是个人的私有物,不排除某个环节遭到恶意
窥视行为.

阅读全文 »

发表于 | 分类于 | 热度 ℃

当一个人，终其一生都在寻求自己父亲的肯定，却始终得不到承认时，会发生什么？

HBO美剧《权力的游戏》是一部“杀人如麻”的剧集。剧中那些一开始看起来非常有主角光环的人，分分钟就都被原著作者、也是剧集监制的乔治·马丁写死了。因此，第6季开播后，大家最关心的就是：这一季里又死了哪些人？

但有一个很特别的角色（也是我最喜欢的角色），却一直凭借自己的智慧和努力活在这个世界里。他是提利昂·兰尼斯特。

阅读全文 »

发表于 | 分类于 | 热度 ℃

本系统使用lucene的全文检索引擎工具包和基于java语言开发的轻量级的中文分词工具包IK Analyzer,来分析用户对微信平台的提问,并从数据库中检索出最匹配的问题,如果精确度够高,就直接返回对应数据库中该问题的答案,如果精确度属于中等阈值,系统会给用户提示一些较相似的问题提示用户输入更精确的问题.如果阈值偏低,则默认用户的问题过于复杂,系统给予友好提示等.

系统准备

1.Git and JDK 6 update 20 or later
2.mysql 5.5 or later

阅读全文 »

发表于 | 分类于 | 热度 ℃

生成项目

scrapy提供一个工具来生成项目，生成的项目中预置了一些文件，用户需要在这些文件中添加自己的代码。 打开命令行，执行：scrapy startproject tutorial，生成的项目类似下面的结构 

tutorial/  
   scrapy.cfg  
   tutorial/  
    __init__.py  
       items.py  
       pipelines.py  
       settings.py  
       spiders/  
           __init__.py
阅读全文 »

发表于 | 分类于 | 热度 ℃

线程安全性

内置锁: synchronized
重入 :子类加锁函数调用父类同样函数可以调用,说明发生了重入,判断含有锁==1,可以往上叠加变为2

原子性

servlet中增加一个long类型都域,命中计数器都值会出现偏差,缺乏原子性

阅读全文 »

发表于 | 分类于 | 热度 ℃

WebMagic概览

WebMagic项目代码分为核心和扩展两部分。核心部分(webmagic-core)是一个精简的、模块化的爬虫实现，而扩展部分则包括一些便利的、实用性的功能。WebMagic的架构设计参照了Scrapy，目标是尽量的模块化，并体现爬虫的功能特点。

这部分提供非常简单、灵活的API，在基本不改变开发模式的情况下，编写一个爬虫。

扩展部分(webmagic-extension)提供一些便捷的功能，例如注解模式编写爬虫等。同时内置了一些常用的组件，便于爬虫开发。

另外WebMagic还包括一些外围扩展和一个正在开发的产品化项目webmagic-avalon。

阅读全文 »