Skip to content

Monthly Archives: February 2009

[转]开源PHP中文分词扩展:PHPCWS 1.0.0发布啦

17-Feb-09

非常佩服这位兄弟开发的开源php分词系统,现在终于发布1.0.0版本了。本版本的功能有了很大的加强,同时也简化了使用,仅一个php函数。现在转帖全部内容,对张宴表示强烈的支持!!
[文章/程序 作者:张宴 本文版本:v1.0 最后修改:2009.02.16 原文链接:http://blog.s135.com/post/398.htm]
名称:PHPCWS(PHP中文分词扩展)
协议:New BSD License
作者:张宴
网址:http://code.google.com/p/phpcws/
SVN:http://code.google.com/p/phpcws/source/browse/#svn/trunk/phpcws
一、PHPCWS 简介
1、什么是 PHPCWS ?
PHPCWS 是一款开源的PHP中文分词扩展,目前仅支持Linux/Unix系统。
PHPCWS 先使用“ICTCLAS 3.0 共享版中文分词算法”的API进行初次分词处理,再使用自行编写的“逆向最大匹配算法”对分词和进行词语合并处理,并增加标点符号过滤功能,得出分词结果。
ICTCLAS(Institute of Computing Technology, Chinese Lexical Analysis System)是中国科学院计算技术研究所在多年研究工作积累的基础上,基于多层隐马模型研制出的汉语词法分析系统,主要功能包括中文分词;词性标注;命 名实体识别;新词识别;同时支持用户词典。ICTCLAS经过五年精心打造,内核升级6次,目前已经升级到了ICTCLAS3.0,分词精度 98.45%,各种词典数据压缩后不到3M。ICTCLAS在国内973专家组组织的评测中活动获得了第一名,在第一届国际中文处理研究机构SigHan 组织的评测中都获得了多项第一名,是当前世界上最好的汉语词法分析器。
ICTCLAS 3.0 商业版是收费的,而免费提供的 ICTCLAS 3.0 共享版不开源,词库是根据人民日报一个月的语料得出的,很多词语不存在。所以本人对ICTCLAS分词后的结果,再采用逆向最大匹配算法,根据自己补充的 一个9万条词语的自定义词库(与ICTCLAS词库中的词语不重复),对ICTCLAS分词结果进行合并处理,输出最终分词结果。
由于 ICTCLAS 3.0 共享版只支持GBK编码,因此,如果是UTF-8编码的字符串,可以先用PHP的iconv函数转换成GBK编码,再用phpcws_split函数进行分词处理,最后转换回UTF-8编码。
2、PHPCWS 中文分词在线演示
演示网址:http://blog.s135.com/demo/phpcws/
3、PHPCWS 分词速度及用途
初次使用时,Apache 或 php-cgi(FastCGI) 进程,需要加载一次词库到内存中,需要0.0X秒。58字节的一句话——“2009年2月13日,我编写了一款PHP中文分词扩展:PHPCWS 1.0.0。”,分词速度只需0.0003秒。
PHPCWS 属于《亿级数据的高并发通用搜索引擎架构设计》 的一部分,用作“搜索查询接口”的关键字分词处理。在此架构中,Sphinx索引引擎对于CJK(中日韩)语言支持一元切分,假设【反恐行动是国产主视角 射击网络游戏】这段文字,Sphinx会将其切成【反 恐 行 动 是 国 产 主 视 角 射 击 网 络 [...]

情人节礼物送什么?巧克力?鲜花?还是什么?

11-Feb-09

我研究了一下淘宝的情人节促销活动,搜索“情人节”后,发现共找到256933条商品在售。这是一个非常热闹非常大的市场,在这里你几乎可以找到所有你需要的礼物。如果你要送女朋友鲜花或者蛋糕,你可以在鲜花速递/蛋糕配送/园艺花艺分类下发现78144件礼物,而且他有丰富的自分类,将礼物分成了不同的类型:

鲜花速递(全国/同城)(65272)
蛋糕(预定及配送)(997)
卡通花/巧克力花(10818)
仿真鲜花及材料(546)
迷你植物(73)
园艺用品(16)
小型绿植盆栽(46)
大型绿植盆景及外展植物(38)
花卉盆栽(37)
花种(8)
婚礼鲜花布置(208)
花器/花篮(装饰性)(35)
单枝鲜花/胸花(54)
水果篮(预定与速递)(23)

另外还有其他的大分类,分别如下:

饰品/流行首饰/时尚饰品(53944)
玩具/模型/娃娃/人偶(22874)
居家日用/厨房餐饮/卫浴洗浴(12852)
食品/茶叶/零食/特产(10886)
服饰配件/皮带/帽子/围巾(10054)
运动鞋(9004)
时尚家饰/工艺品/十字绣(9004)
女装/女士精品(7315)
古董/邮币/字画/收藏(7044)
女士内衣/男士内衣/家居服(6603)
珠宝/钻石/翡翠/黄金(6185)
成人用品/避孕用品/情趣内衣(5158)
箱包皮具/热销女包/男包(4530)
品牌手表/流行手表(4503)
彩妆/香水/美发/工具(3751)
床上用品/靠垫/窗帘/布艺(2949)
女鞋(2247)
3C数码配件市场(2216)
美容护肤/美体/精油(2117)

淘宝的情人节市场做的太大了,现在的小孩子们几乎不要费劲心思的去考虑如何送一个新奇的或者投其所好的情人节礼物给朋友了!逛一逛淘宝就可以挑到你想要的一切礼物。
由于我跟老婆已经老夫老妻了,就不打算向年轻人那样送礼物了,到日子了请老婆吃顿大餐就可以了!哈哈!(小朋友们是不是要女友情人节巧克力还是情人节鲜花?哈哈,我猜对了么?)

情人节 娃娃花束/玩偶花束(532)
情人节 小熊/泰迪熊花束(2576)
情人节 小猪花束(848)
情人节 米老鼠花束(525)
情人节 小猫/KITTY猫花束(1021)
情人节 卡通兔花束(981)
情人节 巧克力花束(694)
情人节 小狗花束(206)
海豚花束(136)
其它(1496)
小猴花束(492)
青蛙花束(17)
麦兜花束(72)
BUBU熊花束(78)

Related items

阿基米德–新的搜索排序
如何不去拍照核验网站备案
linux磁盘空间满了怎么办?
付费寻找网页美化
Google退出中国的另外一个主要原因

WordPress (1)情人节市场(1)情人节 鲜花(1)情人节送什么巧克力(3)巧克力礼物(1)鲜花预定(1)情人节礼物送什么(3)情人节礼物 巧克力(1)propecia(1)送女友的礼物(1)情人礼物(1)viagra(1)礼物送什么巧克力(1)情人节巧克力(2)情人节礼物(10)

wordpress启用memcache详解

06-Feb-09

大名鼎鼎的memcache你应该知道吧?这个可是好东西,他可以大大增加mysql的相应速度。这几天觉得wordpress速度有些慢,于是建议朋友在服务器上安装memcache来提高mysql效率。首先按照安装memCache for PHP这个方法安装并启动memcache守候进程。
接下来需要配置wordpress,首先在http://dev.wp-plugins.org/browser/memcached/trunk下载object-cache.php文件,将该文件存放在wp-content文件夹内。
一般的说法就是这样子就算启动了wordpress的memcache插件了,但是有可能还没有启动。
首先你要确认,你的memcache守候进程是在哪个端口,默认的端口是11211,如果你守候了其他的进程(例如:13112),那么需要你在wp-config.php文件中增加如下代码:

global $memcached_servers;
$memcached_servers = array(’default’ => array(’127.0.0.1:13112′));//这里的13112替换为你设置的守候端口

这样配置后,看看你的wordpress是不是速度大大提高了?
另外一个简单的不需要修改wp-config.php的配置方案就是,在启动memcache的守候进程的时候使用11211端口,使用如下命令:
/usr/local/bin/memcached -d -m 32 -u root -l 127.0.0.1 -p 11211 -c 1024 -P /tmp/memcached.pid
这是你就不需要修改wp-config.php文件了,只要把object-cache.php放在wp-content文件夹内即可激活memecached插件了。
今天启用了memecached之后,wordpress访问速度大大提高了,爽!嘎嘎!
Related items

[wordpress plugin]原创文章保护插件(小名“垃圾变原创”插件)发布!
svn: REPORT 请求“/!svn/vcc/default”失败 解决办法
Linux中cp总是提示覆盖文件的解决办法
速度快,操作简单的VPS
Tokyo Tyrant使用小结

memcache(21)WordPress (2)wordpress 自动采集(1)memcached php wordpress(2)memecached mysql(1)mysql memcached配置(1)memcache 图片(1)wordpress memcache(29)memcache 端口(3)wordpress memcached(33)memcached端口(2)memcache 淘宝(1)memcached wordpress(10)wp memcache(8)我爱水煮鱼 memcache(1)

金融危机实体店铺销量下降,淘宝网络销售成绩斐然

05-Feb-09

淘宝网公布了春节期间(1月10日~30日)销售情况。交易总额比去年相比增长60%,日均销售超过3亿元,并创下单日销售4.6亿的春节网购新高。其中,充值卡由于不受春节物流停运影响,成为网上交易一大亮点。

淘宝商品免费推广
成人用品 成人保健品专卖
淘宝精品 3G数码配件市场 淘宝热卖
MM衣橱 淘宝女装精品
淘客精品 淘客网
淘宝精品 童装/婴儿服/鞋帽/亲子装 淘宝热卖
宠物用品 淘宝精品
淘宝化妆品

今年在金融危机的影响下,很多淘宝店铺打出了“不打烊”的招牌继续营业,从而刺激一些物流公司节日里照常运营。因为无需物流,充值卡交易很热闹,淘宝网方面的交易额同比增长了62.43%;交易量同比增长了106.16%。
据国外媒体分析,据IDC公司最新的中国科技报告显示,尽管全球经济增长速度放缓,中国的电子商务市场仍然一片火热景象,2008年中国电子商务贸易额同比增长了20%。分析预计到2010年中国电子商务贸易额将达到3.22万亿元。中国电子商务巨头阿里巴巴集团的C2C网站拍卖网站淘宝(Taobao.com)无疑是2008年电子商务市场的最大受益者,贸易额高达1000亿元,2007年为433亿元。
Related items

阿基米德–新的搜索排序
如何不去拍照核验网站备案
linux磁盘空间满了怎么办?
付费寻找网页美化
Google退出中国的另外一个主要原因

淘宝 销量 下降(1)淘宝交易量下降(2)淘宝 最近 销量下降(1)成人用品 网络销量(1)金融危机 网上交易量(1)金融危机 网络营销 淘宝(1)淘宝网宠物用品销售情况(1)家乐福,销量,金融危机(1)09年淘宝销量下降(1)淘宝交易 下降(1)淘宝销量分析(2)

linux下如何重启动网络服务

05-Feb-09

修改了hosts表之后,需要重新启动linux的网络服务才能使的新的修改生效。

淘宝商品免费推广
成人用品 成人保健品专卖
淘宝精品 3G数码配件市场 淘宝热卖
MM衣橱 淘宝女装精品
淘客精品 淘客网
淘宝精品 童装/婴儿服/鞋帽/亲子装 淘宝热卖
宠物用品 淘宝精品
淘宝化妆品

linux下重启网络服务有两种的命令:
service network restart
或者
/etc/init.d/network restart
Related items

linux下如何安装、卸载软件
apache中虚拟目录和虚拟主机设置
linux下的脚本文件要注意换行符与Windows不同!
linux下为什么0777的文件夹和文件apache无法写入呢?
Linux新手要了解的十个知识点

http://www.pkphp.com/(9)php 启动(3)linux启动网络服务(21)linux 启动网络服务命令(2)linux php启动(1)启动网络服务(2)linux 重启网络 网络服务(1)linux 启动网络服务(57)linux下如何启动服务(1)Linux重新启动网络和网络服务的命令(1)network 服务 重启动(1)Linux下重新启动网络(4)php 启动服务(1)linux 重启 启动 网络(1)重新启动网络 linux(1)