请问一个搜索的有关问题,小弟我想做个搜索功能,输入内容把百度和谷歌还有必应这些搜索到的内容集中展示
请教一个搜索的问题,我想做个搜索功能,输入内容把百度和谷歌还有必应这些搜索到的内容集中展示
如题,基于java做,有没有好的方法,还是说我一个一个的去搜,然后合并展示???
------解决思路----------------------
每次请求一个爬虫,后台拼数据,返回前台展示。
做好高频查询词的统计,把高频词的结果存入数据库,再次查到这个词的时候到数据库拿
------解决思路----------------------
可以爬吗?这些 大网站没做限制?
------解决思路----------------------
不晓得啊。。。。问题肯定会有的,1000个用户查询你们服务器端就要发送5000个请求,这个时间应该挺长,处理完之前这些线程都会存在内存中。。。
如题,基于java做,有没有好的方法,还是说我一个一个的去搜,然后合并展示???
------解决思路----------------------
每次请求一个爬虫,后台拼数据,返回前台展示。
做好高频查询词的统计,把高频词的结果存入数据库,再次查到这个词的时候到数据库拿
------解决思路----------------------
可以爬吗?这些 大网站没做限制?
------解决思路----------------------
不晓得啊。。。。问题肯定会有的,1000个用户查询你们服务器端就要发送5000个请求,这个时间应该挺长,处理完之前这些线程都会存在内存中。。。