F12，复制cookie 最后加入到hearders：这时候运行就可以爬取新闻详细内容。
转载
2021-07-31 23:53:00
69阅读
2评论
今日主要配置了Hadoop集群 ...
转载
2021-07-19 22:32:00
45阅读
2评论
今天学习了爬虫提取数据的另一种方法，xpath方法提取所需数据，安装了xpath-helper插件。 路径表达式 结果bookstore 选择bookstore元素。/bookstore 选取根元素 bookstore。注释：假如路径起始于正斜杠( / )，则此路径始终代表到某元素的绝对路径！boo ...
转载
2021-07-26 23:04:00
36阅读
2评论
今天主要安装和配置了sqoop ...
转载
2021-08-06 22:12:00
25阅读
2评论
1. RGBA与opacity的区别？opacity是属性，rgba()是函数，计算之后是个属性值。
原创
2022-09-13 12:03:15
81阅读
今天学习了Java随机数生成函数 Math.random（）方法Math.random（）方法是 Java 的一个静态方法，返回一个0到1之间，前闭后开区间的double值。 (int)(Math.random()*10） 返回0到9的随机整数。 (int)(Math.random()*n) 返回0 ...
转载
2021-09-19 21:07:00
92阅读
2评论
1,使用python提交post请求时，如果参数中包含中文，则会提交失败，因此需要将参数进行utf-8编码，示例如下:
self.name = name.encode("utf-8")
2,一直在linux下使用python2.4，习惯了print 'hello'这样的写法，今天换到windows下，并且安装了python3.1后
原创
2010-04-28 20:31:00
486阅读
1,字典的输出
person = {'name':'james','age':22} print("%(name)s,%(age)d" % person) import string person = {'name':'james','age':22} &nb
原创
2010-05-09 23:04:00
393阅读
1,python的全局变量使用类似于php,但有一点值得注意，如果你的全局变量是List或Dictionary之类的，那它就默认是可以全局访问，并不需要加global关键字
#!/usr/bin/python #coding=utf-8 import sys reload(sys) sys.setdefaultencoding
原创
2010-06-08 11:50:00
524阅读
今天在做的事情是将一个as3项目的部分代码移植到PHP中来，记录下移植过程中遇到的两个问题。
1，AS3中String类的charCodeAt函数是返回字符的unicode编码，而在PHP中并没有直接与之对应的库函数，可以用下面这个函数做替代：
<?php function uniord($str,$from_encoding=false){  
原创
2010-07-08 19:08:00
589阅读
1，业务能力+交际能力=工作能力 2，表字段“<>”的陷阱 表中ReorderLevel有null值，当使用ReorderLevel<>0时，该字段为NULL的记录也被忽略了。
原创
2011-12-09 22:15:11
311阅读
一， 在上一篇中第4点里，我遇到了一个solr集群中各个节点在进行master-slave身份切换时困扰的问题，详情见上一篇。今天顺利地解决了这个问题，下面记录下完整的解决方案。
0） 值得特别注意的一点，在创建Solr核的时候，不要指定dataDir，而只提供必需的instanceDir即可，即创建命令如下：
&n
原创
2012-03-07 22:12:00
475阅读
点赞
1，一开始都是调用HttpMethod的getResponseBody()和getResponseBodyAsString，但这样总会出现下图中的警告信息
原创
2012-03-01 20:17:00
938阅读
1，iBatis源码中DefaultSqlSession.java，下面这个方法中匿名类的使用比较有意思,我对这个语法不熟悉，师兄说这是匿名类的初始化，
private Object wrapCollection(final Object object) {
if (object instanceof List) {
&nb
原创
2011-04-27 21:19:00
419阅读
一，源码编译openfetion
0，将所需的依赖库都安装好
1,安装CMake,版本2.8以上
2，在openfetion目录下建立一个build目录
3，cmake -DCMAKE_INSTALL_PREFIX=/usr -DCMAKE_BUILD_TYPE=debug
4，进入build目录中进行编译：make
安装：make i
原创
2010-12-28 00:04:00
492阅读
记录下自己日常工作中经常使用的几个小工具类
1，python部分，一个日志类，一个数据库操作类。
################### #日志辅助类 ################# class Logger: LOG_DEBUG= "debug
原创
2010-09-28 10:10:00
580阅读
1,PHP的回调函数是一个很有用的语法，可以将业务对象与附加其上的处理逻辑隔离开来，这也是观察者模式的一种实现。
<?php class Product { public $name; public 
原创
2010-09-27 11:01:00
524阅读
由于以前没接触过Maven,上周第一次checkout项目代码学习时，看到项目的结构觉得挺奇怪的，src/main/java下·
原创
2021-08-04 15:54:15
194阅读
1，今天收到报警信息，说应用所在机器的硬盘空间不足了，上去一看，居然发现国庆这几天的日志信息累计达到了260多G，可看了下应用下的日志，实际只有几十M而已，进一步check后发现是调用的第三方应用在另一个日志路径下打出大量的Debug信息，回查代码后才明白是Logback和Log4J的冲突问题，于是写了一个类在应用启动时将Log4J的级别调高至ERROR级别，代码如下： publicclassLog4jInit{ privatestaticStringlogFilePath;privatefinalstaticStringDEFAULT_LOG4J_FILE_NAME="log4j.
原创
2021-08-04 17:51:56
219阅读
在看jdk里的collection framework这部分，小结一下：1，Arrays.copyOf, System.arraycopy这两个方法用得非常多。 2，比较两个 Object是否相等 if (o1==null ? o2 == null : o1.equals(o2)) 3, equals方法一般写法 Public Boolean equals(Object o) { If (o == this) return true; If ( ! (o instanceof List) return false; //比较具体数据大小 } 4,Iterator一定要会用 5，延迟初始化一定要
原创
2021-08-04 17:52:02
200阅读
