龙生的专栏

目录 译者序 ..................................................................................................................................... 前言 .......................................................................................................................................... 第一部分　创建爬虫 第 1 章　初见网络爬虫 ...................................................................................................... 1.1 网络连接 .................................................................................................................... 1.2 BeautifulSoup 简介 .................................................................................................... 1.2.1 安装 BeautifulSoup ....................................................................................... 1.2.2 运行 BeautifulSoup ....................................................................................... 1.2.3 可靠的网络连接 ........................................................................................... 第 2 章　复杂 HTML 解析 ................................................................................................ 2.1 不是一直都要用锤子 ................................................................................................ 2.2 再端一碗 BeautifulSoup............................................................................................ 2.2.1 BeautifulSoup 的 find() 和 findAll() ....................................................... 2.2.2 其他 BeautifulSoup 对象 .............................................................................. 2.2.3 导航树 ........................................................................................................... 2.3 正则表达式 ................................................................................................................ 2.4 正则表达式和 BeautifulSoup.................................................................................... 2.5 获取属性 .................................................................................................................... 2.6 Lambda 表达式 .......................................................................................................... 2.7 超越 BeautifulSoup.................................................................................................... 第 3 章　开始采集..............................................................................................................................26 3.1 遍历单个域名...........................................................................................................................26 3.2 采集整个网站...........................................................................................................................30 3.3 通过互联网采集.......................................................................................................................34 3.4 用 Scrapy 采集..........................................................................................................................38 第 4 章　使用 API ..............................................................................................................................42 4.1 API 概述 ...................................................................................................................................43 4.2 API 通用规则 ...........................................................................................................................43 4.2.1 方法 ..............................................................................................................................44 4.2.2 验证 ..............................................................................................................................44 4.3 服务器响应...............................................................................................................................45 4.4 Echo Nest ..................................................................................................................................46 4.5 Twitter API................................................................................................................................48 4.5.1 开始 ..............................................................................................................................48 4.5.2 几个示例 ......................................................................................................................50 4.6 Google API................................................................................................................................52 4.6.1 开始 ..............................................................................................................................52 4.6.2 几个示例 ......................................................................................................................53 4.7 解析 JSON 数据 .......................................................................................................................55 4.8 回到主题...................................................................................................................................56 4.9 再说一点 API ...........................................................................................................................60 第 5 章　存储数据..............................................................................................................................61 5.1 媒体文件...................................................................................................................................61 5.2 把数据存储到 CSV ..................................................................................................................64 5.3 MySQL......................................................................................................................................65 5.3.1 安装 MySQL ................................................................................................................66 5.3.2 基本命令 ......................................................................................................................68 5.3.3 与 Python 整合 .............................................................................................................71 5.3.4 数据库技术与最佳实践 ..............................................................................................74 5.3.5 MySQL 里的“六度空间游戏”..................................................................................75 5.4 Email .........................................................................................................................................77 第 6 章　读取文档..............................................................................................................................80 6.1 文档编码...................................................................................................................................80 6.2 纯文本.......................................................................................................................................81 6.3 CSV ...........................................................................................................................................85 6.4 PDF............................................................................................................................................87 6.5 微软 Word 和 .docx..................................................................................................................88 目录 ｜ vii 第二部分　高级数据采集 第 7 章　数据清洗..............................................................................................................................94 7.1 编写代码清洗数据...................................................................................................................94 7.2 数据存储后再清洗...................................................................................................................98 第 8 章　自然语言处理...................................................................................................................103 8.1 概括数据.................................................................................................................................104 8.2 马尔可夫模型.........................................................................................................................106 8.3 自然语言工具包.....................................................................................................................112 8.3.1 安装与设置 ................................................................................................................112 8.3.2 用 NLTK 做统计分析 ................................................................................................113 8.3.3 用 NLTK 做词性分析 ................................................................................................115 8.4 其他资源.................................................................................................................................119 第 9 章　穿越网页表单与登录窗口进行采集...........................................................................120 9.1 Python Requests 库 .................................................................................................................120 9.2 提交一个基本表单.................................................................................................................121 9.3 单选按钮、复选框和其他输入.............................................................................................123 9.4 提交文件和图像.....................................................................................................................124 9.5 处理登录和 cookie .................................................................................................................125 9.6 其他表单问题.........................................................................................................................127 第 10 章　采集 JavaScript ............................................................................................................128 10.1 JavaScript 简介 .....................................................................................................................128 10.2 Ajax 和动态 HTML..............................................................................................................131 10.3 处理重定向...........................................................................................................................137 第 11 章　图像识别与文字处理 ...................................................................................................139

jdk1.7 （window,linux）64位免费下载，有需要的朋友自己下载。 jdk-7u80-windows-x64.7z jdk-7u25-linux-x64.tar.gz

架说白了就是JAVA工作者多年以来总结出的一些开发标准。让我们可以以成功的经验模式来开发我们自已的系统，一般使用框架的好处是 ·在好的框架下，开发者只需要写一些必须的代码；他们不需要直接接触底层的API。 这一点很重要。 ·经过良好设计的框架可以为程序提供清晰的结构并且提高程序的内聚性。好清晰的结构使得其他人可以更容易加入项目。 ·一个容易使用的框架可以通过一些例子和文档为用户提供最佳实践。 ·采用成功的框架的代码比自己的代码容易测试 J2EE本身提供了一些框架。比如， Enterprise Java-Beans (EJB) container或者 Servlet engine 而这些框架一般在中小工程中我们都不会使用，会让我们把大量的时间浪费在开发框架上。 而现在比较流行开源框架,主要是struts,hibernate,spring等 比如struts是在原有mvc基础上实现在代码分离等功能，非常好用。 而hibernate可以把我们的关系型数据库转换成我们在JAVA中的面像对像来使用。从而让我们在开发时不需要直接写SQL语句，比如database.getName();就可以直接把数据库中的用户名取出来。 Spring J2EE框架被大规模地运用到项目中，而项目总要负责这些框架以及自己业务代码的连接，使之真正融合到一起。Spring就是专注于这个问题的，它和Hibernate融合的很好。 这三种框架在一起并不冲突，所以现在最常用的框架就是 struts+hibernate+spring就像我们盖房子一样，先把框架搭好，我们在在上面写代码就很规范。 Struts框架介绍 : Struts只是一个MVC框架（Framework）,用于快速开发Java Web应用。Struts实现的重点在C(Controller)，包括ActionServlet/RequestProcessor和我们定制的 Action,也为V(View)提供了一系列定制标签（Custom Tag）。但Struts几乎没有涉及M(Model),所以Struts可以采用JAVA实现的任何形式的商业逻辑。 Spring是一个轻型容器(light-weight container)，其核心是Bean工厂(Bean Factory)，用以构造我们所需要的M(Model)。在此基础之上，Spring提供了AOP（Aspect-Oriented Programming, 面向层面的编程）的实现，用它来提供非管理环境下申明方式的事务、安全等服务；对Bean工厂的扩展ApplicationContext更加方便我们实 现J2EE的应用；DAO/ORM的实现方便我们进行数据库的开发；Web MVC和Spring Web提供了Java Web应用的框架或与其他流行的Web框架进行集成。 就是说可将两者一起使用，达到将两者自身的特点进行互补。 spring 框架介绍 : 它关注的领域是其他许多流行的Framework未曾关注的。Spring要提供的是一种管理你的业务对象的方法。 Spring既是全面的又是模块化的。Spring有分层的体系结构，这意味着你能选择仅仅使用它任何一个独立的部分，而它的架构又是内部一致。 因此你能从你的学习中，得到最大的价值。例如，你可能选择仅仅使用Spring来简单化JDBC的使用，或用来管理所有的业务对象。 它的设计从一开始就是要帮助你编写易于测试的代码。Spring是使用测试驱动开发的工程的理想框架。 Spring不会给你的工程添加对其他的框架依赖。Spring也许称得上是个一站式解决方案，提供了一个典型应用所需要的大部分基础架构。它还涉及到了其他framework没有考虑到的内容。 尽管它仅仅是一个从2003年2月才开始的开源项目，但Spring有深厚的历史根基。 Spring架构上的好处 在我们进入细节之前，让我们来看看Spring能够给工程带来的种种好处： Spring能有效地组织你的中间层对象，不管你是否选择使用了EJB。如果你仅仅使用了Struts或其他为J2EE的 API特制的framework，Spring致力于解决剩下的问题。 Spring能消除在许多工程中常见的对Singleton的过多使用。根据我的经验，这是一个很大的问题，它降低了系统的可测试性和面向对象的程度。 通过一种在不同应用程序和项目间一致的方法来处理配置文件，Spring能消除各种各样自定义格式的属性文件的需要。曾经对某个类要寻找的是哪个 魔法般的属性项或系统属性感到不解，为此不得不去读Javadoc甚至源编码？有了Spring，你仅仅需要看看类的JavaBean属性。 Inversion of Control的使用（在下面讨论）帮助完成了这种简化。 通过把对接口编程而不是对类编程的代价几乎减少到没有，Spring能够促进养成好的编程习惯。 Spring被设计为让使用它创建的应用尽可能少的依赖于他的APIs。在Spring应用中的大多数业务对象没有依赖于Spring。 使用Spring构建的应用程序易于单元测试。 Spring能使EJB的使用成为一个实现选择,而不是应用架构的必然选择。你能选择用POJOs或local EJBs来实现业务接口，却不会影响调用代码。 Spring帮助你解决许多问题而无需使用EJB。Spring能提供一种EJB的替换物，它们适用于许多web应用。例如，Spring能使用AOP提供声明性事务管理而不通过EJB容器，如果你仅仅需要与单个数据库打交道，甚至不需要一个JTA实现。 Spring为数据存取提供了一个一致的框架,不论是使用的是JDBC还是O/R mapping产品（如Hibernate）。

JPedal是一个收费的PDF处理类在官网下载的只能试用30天非常讨厌，这里提供破解版

USB转串口驱动，FT232R驱动程序，最新版本，支持WIN7！

有人要太多分，服气....所以给大家分享一下

本书是一本关于Ajax技术模式和使用场景的开发人员级教程，不仅介绍了Ajax的基本知识，还讨论了Ajax模式和框架，同时针对XML（包括XPath和XSLT）,RSS/Atom、Web服务，JSON和Web用户界面组建等主题....

该文档讲述了正则表达式的语法和大量正则表达式例子，很实用

前言 第一部分 JSP入门 第1章 概述 1.1 Java技术 1.1.1 Java技术的发展 1.1.2 JavaBeans 1.1.3 JDBC 1.1.4 J2EE 1.1.5 EJB 1.1.6 Java Servlet 1.2 JSP技术 1.2.1 JSP技术概述 1.2.2 JSP的优势及与其他Web开发工具的比较 1.3 JSP开发Web的几种主要方式 1.3.1 直接使用JSP 1.3.2 JSP+JavaBeans 1.3.3 JSP+JavaBeans+Servlet 1.3.4 J2EE开发模型 1.4 本书用到的软件及获取 第2章 预备知识 2.1 Java程序设计基础 2.1.1 Java语言规则 2.1.2 Java变量和函数 2.1.3 子类 2.1.4 this和super 2.1.5 类的类型 2.1.6 抽象类 2.1.7 接口 2.1.8 包 2.2 JavaBeans 2.2.1 JavaBeans的属性 2.2.2 JavaBeans的事件 2.2.3 持久化 2.2.4 用户化 2.3 Java Servlet 2.3.1 HTTP Servlet API 2.3.2 系统信息 2.3.3 传送HTML信息 2.4 SQL语言 2.4.1 SQL子类型 2.4.2 SQL语言的具体命令和使用 2.5 JDBC 2.5.1 什么是 JDBC 2.5.2 JDBC 产品 2.5.3 连接概述 2.5.5 一个简单的例子 第3章 JSP开发平台的建立：Tomcat 3.1 Tomcat的安装和直接使用 3.2 Tomcat和Apache的配合 3.3 Tomcat和IIS的配合 3.4 Tomcat的配置和常见问题 3.4.1 Tomcat的主配置文件：server.xml 3.4.2 Windows下代码保护的问题 3.4.3 Apache、IIS和Tomcat协作时工作 目录的添加 3.4.4 设定Tomcat作为Windows的服务而启动 3.4.5 在Tomcat中建立新的Web应用程序 第4章 JSP的语法和语义 4.1 通用的语法规则 4.1.1 元素的语法规则 4.1.2 JSP中的相对路径 4.2 注释 4.3 指令 4.3.1 page指令 4.3.2 include指令 4.3.3 taglib指令 4.4 内置对象 4.5 脚本元素 4.5.1 声明 4.5.2 表达式 4.5.3 脚本代码 4.6 动作 4.6.1 id和scope属性 4.6.2 标准动作 第5章 作为XML的JSP 5.1 为什么要使用XML相容的语法形式 5.2 关于文本类型的语法 5.2.1 jsp:root元素 5.2.2 公共标识符 5.3 指令 5.3.1 page指令 5.3.2 include指令 5.3.1 taglib指令 5.4 脚本元素 5.4.1 声明 5.4.2 脚本代码 5.4.3 表达式 5.5 如何将一个普通的JSP文件转换为一个XML 文档 5.6 JSP1.1的DTD文件 第6章 JSP基础实例 6.1 第一个JSP程序—HelloWorld! 6.2 注释的使用 6.3 脚本元素 6.3.1 声明 6.3.2 表达式 6.3.3 脚本代码 6.4 page指令 6.4.1 import 6.4.2 session 6.4.3 错误处理 6.5 包含其他文件 6.6 使用JavaBean 6.7 内置对象 6.7.1 用request对象获取客户端的数据 6.7.2 用response对象向客户端发送信息 6.7.3 其他内置对象 6.8 <jsp:forward> 6.9 使用插件 6.10 使用session对象 6.10.1 会话的概念 6.10.2 session对象可用的方法和属性 6.10.3 session对象的基本例子 6.10.4 利用session制作一个购物车 6.10.5 JavaBeans的作用域 6.10.6 利用JavaBeans制作的购物车 6.11 使用application对象 6.11.1 应用的概念 6.11.2 application对象可用的方法和属性 6.11.3 application对象内包含的系统信息 6.11.4 利用application建立一个简单的聊天室 第7章 用JSP实现常见的Web应用 7.1 常见的Web应用及分析 7.1.1 留言板、论坛和社区 7.1.2 聊天室 7.1.3 搜索引擎 7.1.4 电子商务 7.1.6 后台管理系统 7.2 留言板 7.2.1 功能分析 7.2.2 功能实现和技术要点 7.2.3 代码和分析 7.3 进一步完善的留言板 7.3.1 功能分析 7.3.2 功能实现和技术要点 7.3.3 代码和分析 7.4 聊天室 7.4.1 功能实现和技术要点 7.4.2 代码和分析 7.5 下一步 第二部分 高级JSP技术 第8章 JSP开发平台的搭建：J2EE 8.1 J2SDKEE的安装和使用 8.1.1 软硬件的支持 8.1.2 安装 8.2 J2SDKEE的配置 8.2.1 JDBC的配置 8.2.2 事务处理 8.2.3 服务的端口号 8.2.4 日志文件 8.2.5 安全 8.2.6 钝化发生的内存极限 8.2.7 JNDI服务器主机 8.2.8 HTTP服务的发布目录 8.3 WebLogic的安装和使用 8.3.1 软硬件要求 8.3.2 安装和启动 8.4 WebLogic的配置 8.4.1 系统级参数的设置 8.4.2 将WebLogic作为HTTP服务器使用 8.4.3 使用ISAPI桥连接WebLogic和IIS 8.4.4 WebLogic配置示例 第9章 扩展JSP标签 9.1 概述 9.1.1 扩展标签的作用 9.1.2 如何开发扩展标签 9.1.3 简单的扩展标签 9.1.4 包含内容处理的扩展标签 9.1.5 能够协作的扩展标签 9.1.6 定义了脚本变量的扩展标签 9.2 标签处理类的开发 9.2.1 接口和基类 9.2.2 开发 9.3 标签库文件 9.3.1 taglib 9.3.2 tag 9.4 定位一个tld文件 9.4.1 在Web.xml中定位一个tld文件 9.4.2 直接在JSP文件中定位tld文件 9.5 扩展标签实例 9.5.1 得到父标签的数据 9.5.2 TestTag类 9.5.3 Title类 9.5.4 Data类 9.5.5 TLD文件 9.5.6 在JSP中使用扩展标签 第10章 Enterprise JavaBeans 10.1 Java服务器端组件标准—EJB 10.1.1 EJB和JavaBeans 10.1.2 EJB的开发与使用中的角色 10.2 Session Bean 10.2.1 Session Bean的状态管理模式 10.2.2 Session Bean的生命周期 10.3 Entity Bean 10.3.1 Entity Bean的特性 10.3.2 Entity Bean的生命周期 10.4 EJB的开发 10.4.1 Enterprise JavaBeans的实际处理文件 10.4.2 实现EJBObject文件 10.4.3 实现EJBHome文件 10.4.4 生成ejb-jar.xml文件 10.4.5 打包生成JAR文件 10.5 EJB的部署—J2SDKEE 10.5.1 使用deploytool打包EJB 10.5.2 使用deploytol部署EJB 10.6 EJB的部署—BEA WebLogic 10.6.1 生成可部署的ejb-jar包 10.6.2 部署WbLogic的ejb-jar包 10.7 使用EJB 10.7.1 本地访问EJB 10.7.2 远程访问EJB 10.8 JSP和EJB 10.9 EJB开发实例—电子商务应用 10.9.1 EJB的实现文件—TestCartEJB 10.9.2 实现Home接口TestCartHome 10.9.3 实现远程Object接口TestCart 10.9.4 EJB的Web组件TestCartWebImp 10.9.5 JSP文件 10.9.6 实例的内部运行逻辑 第11章 其他高级功能 11.1 JDBC2.0和JDBC数据库连接池 11.1.1 JDBC2.0新功能概述 11.1.2 结果集增强功能 11.1.3 批处理更新 11.1.4 对Java对象的持久性 11.1.5 数据库连接池使用实例 11.2 文件上载 11.2.1 实现机理 11.2.2 文件上载实例 第12章 JSP高级应用实例：网上书店 12.1 概述 12.2 扩展标签的使用 12.2.1 数据集作用的BookList标签 12.2.2 让数据循环输出的Books标签 12.2.3 输出数据的标签 12.2.4 控制页面前进、后退的标签 12.2.5 测试标签 12.3 EJB及其Web组件 12.3.1 ShoppingCart 12.3.2 Books 附录A JSP应用实例：网上教育代码 附录B JavaServer Pages白皮书 附录C 常用JSP相关网址

Log4j有三个主要组件： loggers、appenders和layouts。这三个组件协同工作，使开发人员能够根据消息类型和级别来记录消息，并且在程序运行期控制消息的输出格式位置。

本文分析JSP/Servlet的会话管理机制及其所面临的问题，然后提出了一种改进的会话管理方法。

我看了很多设计模式，有些模式很难理解，又看不懂不好理解，但我找到了带有uml图形的说明的设计模式，很经典，每个设计模式都带有用例说明！我一看就懂了，现在给大家分享一下！