哥的私有云

21andy

本帖最后由 21andy 于 2014-1-1 13:10 编辑

wmfy808 发表于 2014-1-1 12:50

php玩采集？算了吧

效率是不够高，哥又不是google
快了也没用，你快得了，也要人家受得了


php来做api是有点蛋疼，但实际用起来还不错的
PHP也只是占一小部份，主要消耗都没PHP什么事

信仰

不明觉厉

wmfy808

21andy 发表于 2014-1-1 13:04

效率是不够高，哥又不是google
快了也没用，你快得了，也要人家受得了
php来做api是有点蛋疼，但实际 ...
玩这个，存储算法很重要。看看我的www.woai.ca才弄了一百多万数据，就500M了。而且索引算法也很重要，用户体验不好，有个jb用。采集很简单，最简单的就是火车头，分布式采集。

ericls

repo在哪里 我看看

21andy

wmfy808 发表于 2014-1-1 13:13

玩这个，存储算法很重要。看看我的www.woai.ca才弄了一百多万数据，就500M了。而且索引算法也很重要，用 ...
我一个VPS就跑400万，5G的MYSQL+SPHINX了，几万IP速度还是杠杠的
玩这个，说云是因为我主要实现的就是分布式存储和检索查询，又不止是采集这么一点东西
自己用好用就行

我行我素

感觉很牛x的说

nicky1605

求带

wmfy808

21andy 发表于 2014-1-1 13:22

我一个VPS就跑400万，5G的MYSQL+SPHINX了，几万IP速度还是杠杠的
玩这个，说云是因为我主要实现的就是分 ...
sphinx说真的，渣得看！生成索引还要花一半的容量

21andy犯戒心

本帖最后由 21andy 于 2014-1-1 13:48 编辑

wmfy808 发表于 2014-1-1 13:41

sphinx说真的，渣得看！生成索引还要花一半的容量

又不是所有数据用一个SPHINX一台独服，你每次从头index不用delta的吗？sphinx不分布还用它干嘛，用好了性能还是可以的
我这个数据是4年前的了，熟悉了以后还真有点离不开
另外redis现在也是我的主要运用，也可以用来做搜索

很牛X的样子

wmfy808

"

话说你最新分词词库在哪弄，现在互联网上出现的新词越来越多。并且我的词库也不好。不过，我的也是自己玩玩的，不用太在意。