程序中如何获取搜索引擎的查询结果？

Stay_Deep 2014-10-27 01:39:05

我想在 https://wen.lu/ （是个代理google的网址）这个网站中查询一下网站的子域名，匹配查询网站的子域名，但是不知道怎么在程序中如何实现，麻烦各位给指点下，
比如 inurl:/163 我这样搜素下面返回了一些包含163的网址，我想抓取这些网址改咋个弄？

...全文

205 3 打赏收藏举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

赵4老师 2014-10-29

打赏
举报

回复

使用下一页的URL

Stay_Deep 2014-10-28

打赏
举报

回复

google 搜索的时候会出现好几页搜索结果，现在能抓下当前页面需要的结果了，没有认为的点击下一页，但是又如果获取下一页的页面信息呢？，

赵4老师 2014-10-27

打赏
举报

回复

使用libcurl库。

一、为什么需要全文搜索引擎？首先先来了解一个概念，在我们生活中一般来说有两种数据：结构化数据、非结构化数据结构化数据：指具有固定格式或有限长度的数据，如数据库，元数据等。非结构化数据：非结构化数据又可称为全文数据，指不定长或无固定格式的数据，如邮件，word文档等。对于结构化数据我们可以直接从数据库查询，而对于非结构化的数据此时就要用到全文检索的方式查询，比如对一个文档或者网页中的内容文本每个词建立一个索引，把这些非结构化的变成结构化的方式然后来查询。全文搜索引擎百度百科定义：全文搜索引擎是目前

工作环境是内网所以不能截图。搭建了ELK环境。3500W个dic中查询数据，并要求导出excel。从es中查询 status=500，返回为空，查询时间超过2000ms的数据head插件查询出索引的数据sql更方便查询支持标准sqlselect param from logstash-sql---3p where numfounds=0一、kibana画图1.首先是用kibana画条状图，crea...

Elasticsearch的基本使用，基础概念了解和常用查询语句示例说明。

前言es是什么？es是基于Apache Lucene的开源分布式(全文)搜索引擎，，提供简单的RESTful API来隐藏Lucene的复杂性。es除了全文搜索引擎之外，还可以这样描述它：1、分布式的实时文件存储，每个字段都被索引并可被搜索2、分布式的实时分析搜索引擎3、可以扩展到成百上千台服务器，处理PB级结构化或非结构化数据。ES的数据组织类比Relational DBElasticsearc...

Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及将来在其他运行时中的数据。有关 ES|QL 和相关教程的概述，请参阅。在今天的文章中，我们将介绍 ES|QL 的异步操作。

其它技术问题

3,881

社区成员

9,044

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章