s1o1g1

好啊，好啊，支持

吴世君

支持了，

黄定光

真要做这样的软件，那你要抓取的数据可海了去了，特别是淘宝，你能不能抓到还是个未知数，另外几家数据量有限，还可以考虑，不过日常需要进行数据维护，要做下去估计得往收费上走了！

不过话说回来，现在做分类网站的兄弟，抓取同行数据的能力是基本功之一，抓点集邮数据应该是小菜，希望能早日面世，大家也有福了！

我之前也想做，不过鉴于维护困难，也就不了了之了，希望王兄能做成！

胖头鱼

回复 37# 彪马拖鞋


   是啊，我要做的话，就做最后3秒秒杀的那种...不知道会不会被华宇封杀！

彪马拖鞋

真要做这样的软件，那你要抓取的数据可海了去了，特别是淘宝，你能不能抓到还是个未知数，另外几家数据量有 ...
黄定光 发表于 2013-5-24 16:57

拍卖的价格数据实时变更抓取、和物品的精准分类是挺难的，另外模糊搜索是海量数据，华宇自家的模糊搜索都没做好（赵涌做的还可以）

黄定光

回复 45# 彪马拖鞋

所以这个事情还是很有难度大的，赵涌网站成立的时间长，技术积累应该还行，其实找对人，网站的模糊搜索不难弄！

彪马拖鞋

回复  彪马拖鞋

所以这个事情还是很有难度大的，赵涌网站成立的时间长，技术积累应该还行，其实找对人， ...
黄定光 发表于 2013-5-25 12:54

   一个拍卖网站连成交撑死百万条数据，架个lucene配条sql,10分钟搞定，但对爬多个网站数据这方来说这个数据海量去了

黄定光

回复 47# 彪马拖鞋

是啊，问题是涉及到数据抓取，而且数据还是变化的要不断更新，技术难度可想而知，真有这个本事可以到etao吃饭了！呵呵数据抓取、格式化、抽取、检索是个大工程。往往因为某些关键字的权重不一致，出来的结果大相径庭，用户是否能满意，还真不好说。
估计就是能做出来，也需要好长时间的调优。

仙人

都是高手，大力支持。