其他 -- IT技术博客大学习 -- 共学习共进步！

• 设置python的stdout为无缓存模式

究其原因，是因为缓存：虽然stderr和stdout默认都是指向屏幕的，但是stderr是无缓存的，程序往stderr输出一个字符，就会在屏幕上显示一个；而stdout是有缓存的，只有遇到换行或者积累到一定的大小，才会显示出来。这就是为什么上面的会显示两个stderr的原因了。

• OAuth 1.0a与1.0协议的改进…

1.0a的改进主要有以下几点: 1.oauth_callback参数放到了请求Request Token中..在authorize时不再接受callback参数.同时.在服务端Request Token返回参数的时候.也增加了oauth_callback_confirmed参数.其值必须为true 在1.0的时候.我们如果需要规定一...

• 在 Perl 下处理时间的小技巧 strftime

在 Perl 中处理时间，很多模块，很方便，但是刚开始玩的人，可能没有发现合适的模块，所以使用起来感觉很麻烦。通常大家都 localtime 搞得大家都很火大。我有幸和大师学习了一下，给大家推荐一下一个模块 strftime。

• Hive 随谈（六）

Hive 是一个很开放的系统，很多内容都支持用户定制，包括：文件格式：Text File，Sequence File 内存中的数据格式： Java Integer/String, Hadoop IntWritable/Text 用户提供的 map/reduce 脚本：不管什么语言，利用 stdin/stdout 传输数据用户自定义函数: Substr, Trim, 1

• Hive 随谈（五）

Hive 针对不同的查询进行了优化，优化可以通过配置进行控制，本文将介绍部分优化的策略以及优化控制选项。列裁剪（Column Pruning）在读数据的时候，只读取查询中需要用到的列，而忽略其他列。例如，对于查询： SELECT a,b FROM T WHERE e < 10; 其中，T 包含 5 个列 (a,b,c,d,e)，列 c，d 将会被忽略，只会读取a, b, e 列这个选项默认为真： hive.optimize.cp = true 分区裁剪（Partition Pruning）在查询的过程中...

• Hive 随谈（四）

Hive 的官方文档中对查询语言有了很详细的描述，请参考：http://wiki.apache.org/hadoop/Hive/LanguageManual ，本文的内容大部分翻译自该页面，期间加入了一些在使用过程中需要注意到的事项。

• Hive 随谈（三）

摘要：由于 Hive 采用了 SQL 的查询语言 HQL，因此很容易将 Hive 理解为数据库。其实从结构上来看，Hive 和数据库除了拥有类似的查询语言，再无类似之处。本文将从多个方面来阐述 Hive 和数据库的差异。数据库可以用在 Online 的应用中，但是 Hive 是为数据仓库而设计的，清楚这一点，有助于从应用角度理解 Hive 的特性。 Hive 和数据库的比较查询语言 HQL SQL 数据存储位置 HDFS Raw Device 或者 Local FS 数...

• Hive 随谈（二）

本文介绍了 Hive 的体系结构，元数据管理方式以及数据的管理方式

• Hive 随谈（一）

Hive 是什么在接触一个新的事物首先要回到的问题是：这是什么？这里引用 Hive wiki 上的介绍： Hive is a data warehouse infrastructure built on top of Hadoop. It provides tools to enable easy data ETL, a mechanism to put structures on the data, and the capability to querying and analysis of large data sets stored in Hadoop files. Hive defines a simple SQL-like query language, called [...]

• 逆向头脑风暴法

逆向头脑风暴法（Anti-brain Storming）也称质疑头脑风暴法、反头脑风暴法。一、什么是逆向头脑风暴法逆向头脑风暴法一种通过将焦点集中在反对意见上面获得新创意的小组座谈会形式。逆向头脑风暴法是由热点公司（hotpoint company）发明的，这是一种小组评价的方法，其主要用途是借以发现某种观念的缺陷，并预期如果实施这种观念会出现什么不良后果。逆向头脑风暴法和头脑风暴法类似，惟一不同的是在逆向头脑风暴法中允许提出...

• 头脑风暴法（畅谈法，畅谈会，集思法）

一、什么是头脑风暴头脑风暴(Brain-Storming)，最早是精神病理学上的用语，指精神病患者的精神错乱状态而言的。而现在则成为无限制的自由联想和讨论的代名词，其目的在于产生新观念或激发创新设想。在群体决策中，由于群体成员心理相互作用影响，易屈于权威或大多数人意见，形成所谓的“群体思维”。群体思维削弱了群体的批判精神和创造力，损害了决策的质量。为了保证群体决策的创造性，提高决策质量，管理上发展了一系列改善群...

• [Perl]Template Toolkit 内插引起 JavaScript $ 异常

写了一个小程序，使用了一段别人的 JavaScript 来做表格外部排序。但发现只要 JavaScript 经过我的 Template TT 的输出后，就变样了，不能正常的使用这个 JavaScript 了。使用 Diff 的命令查看后发现原来是 Template Toolkit 给 $ 的符号，当做默认变量了.

• [Squid] TCP_MEM_HIT 和 TCP_HIT 的性能到底相差多远

在内存中命中，使用 Squid 本身的机制来 Cache 文件，和文件系统本身的 Cache 机构时，Squid 内存 Cache 机构性能提高会有多少。

• 警惕网站分析监测实施的陷阱（下）

在上篇中，我们探讨了跨域监测、报告结构、页面动态事件监测这三个容易出现监测实施问题的地方，这一篇我们接着讨论外链监测、页面重定向、监测框架页面、代码冲突、以及自定义基本监测设置。陷阱四：外链监测（Outbound Link Tracking）　　标记法（页面加tag法）的网站分析有一个非常...

• 有关django使用的总结

最近在使用django开发的时候，遇到了很多问题，特此记录在此，希望对以后的同学有所帮助。一.django的ManyToManyField，当关联自身时，实现单向关联。比如代码如下： class MManConfType(models.Mod...

• 思维和语言随笔 2

语言是一种媒介，不光是语言能影响人的思维方式，物理媒介本身也能影响人的思维方式。你是否曾经觉得在多媒体计算机屏幕前看书怎么也看不下去，一换到纸质的书就能看下去？是否觉得小时候爱看电视的人长大了思维不连续，没逻辑？是的，媒介会构建和摧毁你的思维方式。多媒体计算机有很多的视觉元素，会抑制你的左脑的线性思维，激化你右脑的模式识别能力，所以，在多媒体计算机前看书的你，会自觉不自觉的被转换到右脑的思维方式，看电视也一样。这是无法避免的事情。科学研究发现，儿童看很多电视会影响后天的智商和持续思维能力，因为电视屏幕平均每隔90秒就要换一次场景，儿童的大脑就会发展为适应这样的持续激励的右脑思维方式，而左脑得不到必要的训练。

• python实现自动登录discuz论坛

需求也比较简单，老婆是做社区运营的，所以需要每天把几个帖子定时的顶上来，手工做很累，所以就想让我用程序实现。

分析一下，其实无非是先用户名和密码登录，获取到cookie后，再带着cookie去访问要顶贴的页面即可，至于剖析页面来获取url就是BeautifulSoup要做的事情了。（论坛是discuz做的，这里只为演示方法）

• 当使用 Nginx 做 Hash 时对动态文件和静态文件的处理

nginx 做 url 的 hash 时，做动态和静态的 hash 时需要多多注意。因为动态和静态的文件表现出来的不一样。静态文件 Nginx 的 Hash 处理静态的文件的源网站的，特点文件静态，大小基本是几种类型...

• Perl 命令行参数

执行控制 -e 指定字符串以作为脚本（多个字符串迭加）执行 -M 导入模块 -I 指定目录以搜索标准位置前的模块整洁性 -w 打开警告 -Mstrict 打开严格编译指示（pragma）数据 -0 （这是个零）指定输入记录分隔符 -a 将数据分割成名为 @F 的数组 -F 指定分割时 -a 使用的模式（请参阅 perldoc -f split） -i 在适当的位置编辑文件（请参阅 perldoc perlrun 以获取大量详细信息） -c 进行perl的语法检查,但不执行perl命令. -F 把...

• MT上“Name "Locale::Maketext::Lexicon" used only once:” 问题的解决：改用Perl内置函数库

最近从服务器日志中经常发现MT的错误日志：Name "Locale::Maketext::Lexicon" used only once: possible typo at .../extlib/Locale/Maketext.pm line 653.,....解决方法：删除 mt/extlib/目录下的I18N/ 和 Locale/ 目录即可；原因：服务器上已经升级到Perl 5.10.x了：很多国际化字符集方面的支持直接使用Perl内置的支持包即可。