openkylin
/
ukui-search
mirror of https://gitee.com/openkylin/ukui-search.git
9
0
Fork 1
Code Issues Projects Releases Wiki Activity

Update README.

This commit is contained in:
Mouse Zhang 2022-05-11 10:21:21 +08:00
parent cfd2a644ad
commit e2850e074e
1 changed files with 180 additions and 69 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

249
README.md
View File

@ -1,126 +1,204 @@
# ukui-search介绍
[dWIP] UKUI Search is a user-wide desktop search feature of UKUI desktop environment.
## 简介
狭义上的ukui-search指ukui桌面环境中的全局搜索应用，目前最新版本为3.1-xxx。全局搜索应用提供了本地文件、文本内容、应用、设置项、便签等聚合搜索功能，基于其文件索引功能，可以为用户提供快速准确的搜索体验。
广义的ukui-search除了包括全局搜索应用，还包括在ukui桌面环境中的本地搜索服务以及其开发接口。基于文建索引服务，应用搜索数据服务等基础数据源服务，可以提供基于C++接口的搜索功能，应用开发者可以通过引用动态库的形式直接使用其搜索功能。除此之外，ukui桌面环境搜索服务还提供了一组基于Qt插件框架的插件接口，用户可以通过继承接口以实现搜索功能的扩展。
以下提到的ukui-search如无说明均指后者。
狭义上的ukui-search指ukui桌面环境中的全局搜索应用，目前最新版本为3.1-xxx。全局搜索应用提供了本地文件、文本内容、应用、设置项、便签等聚合搜索功能，基于其文件索引功能，可以为用户提供快速准确的搜索体验。
广义的ukui-search除了包括全局搜索应用，还包括在ukui桌面环境中的本地搜索服务以及其开发接口。基于文建索引服务，应用搜索数据服务等基础数据源服务，可以提供基于C++接口的搜索功能，应用开发者可以通过引用动态库的形式直接使用其搜索功能。除此之外，ukui桌面环境搜索服务还提供了一组基于Qt插件框架的插件接口，用户可以通过继承接口以实现搜索功能的扩展。
以下提到的ukui-search如无说明均指后者。
ukui-search 目前共有5个包：
ukui-search_xxxxxx.deb
libukui-search-dev_xxxxx.deb
libukui-search0_xxxxx.deb
libchinese-segmentation0_xxxx.deb
ukui-search-systemdbus_xxxxx.deb
xxx代表版本号。其中，ukui-search 为全局搜索应用本体，libukui-search包提供了搜索服务基本功能以及扩展接口，libukui-search-dev为其开发包。libchinese-segmentation包为搜索服务提供了NLP能力，如中文分词等。ukui-search-systemdbus包提供了一些systemdbus提权操作。
+ ukui-search_xxxxxx.deb
+ libukui-search-dev_xxxxx.deb
+ libukui-search0_xxxxx.deb
+ libchinese-segmentation0_xxxx.deb
+ ukui-search-systemdbus_xxxxx.deb
xxx代表版本号。其中，ukui-search 为全局搜索应用本体，libukui-search包提供了搜索服务基本功能以及扩展接口，libukui-search-dev为其开发包。libchinese-segmentation包为搜索服务提供了NLP能力，如中文分词等。ukui-search-systemdbus包提供了一些systemdbus提权操作。
## 运行
搜索服务相关的进程共有5个，包括ukui-search(全局搜索GUI界面)，ukui-search-service(文件搜索服务)，first-index(文件搜索服务子进程)，inotify-index(文件搜索服务子进程)，ukui-search-app-data-service(应用数据维护服务)。
ukui-search、ukui-search-service和ukui-search-app-data-service服务默认开机自启，其中first-index进程和inotify-index进程作为ukui-search-service的子进程，并由其控制启动和退出。
搜索服务相关的进程共有5个，包括ukui-search(全局搜索GUI界面)，ukui-search-service(文件搜索服务)，first-index(文件搜索服务子进程)，inotify-index(文件搜索服务子进程)，ukui-search-app-data-service(应用数据维护服务)。
ukui-search、ukui-search-service和ukui-search-app-data-service服务默认开机自启，其中first-index进程和inotify-index进程作为ukui-search-service的子进程，并由其控制启动和退出。
## 快捷键、命令行和dbus接口
呼出搜索GUI界面的系统快捷键为WIN+S。
ukui-search进程的命令行如下：
呼出搜索GUI界面的系统快捷键为`WIN+s`。
ukui-search进程的命令行如下：
```shell
Usage: ukui-search [options]
Options:
-h, --help Displays this help.
-v, --version Displays version information.
-q, --quit Quit ukui-search application
-s, --show Show main window
```
ukui-search-service的命令行如下：
ukui-search-service的命令行如下：
```shell
Usage: ukui-search-service [options]
Options:
-h, --help Displays this help.
-v, --version Displays version information.
-q, --quit Stop service
-i, --index <option> start or stop file index
```
ukui-search 提供的dbus接口：
ukui-search 提供的dbus接口：
```
service: com.ukui.search.service
path: /
interface: com.ukui.search.service
showWindow () ↦ () //显示搜索主窗口
searchKeyword (String keyword) ↦ () //显示主窗口并搜索传入的关键字
```
## 交互
搜索的功能有一部分依赖于其他桌面环境组件：
设置项搜索：依赖ukui-control-center提供的配置文件，安装路径为：
/usr/share/ukui-control-center/shell/res/search.xml
跳转到搜索结果对应的控制面板页面使用了ukui-control-center的命令行：
搜索的功能有一部分依赖于其他桌面环境组件：
设置项搜索：依赖ukui-control-center提供的配置文件，安装路径为：
> /usr/share/ukui-control-center/shell/res/search.xml
跳转到搜索结果对应的控制面板页面使用了ukui-control-center的命令行：
```shell
Usage: ukui-control-center [options]
Options:
-h, --help Displays this help.
-v, --version Displays version information.
-m <module> display the specified module page //全局搜索使用的是这个命令
在线应用搜索：依赖kylin-software-center提供的dbus接口：
```
在线应用搜索：依赖kylin-software-center提供的dbus接口：
```
service: com.kylin.softwarecenter.getsearchresults
path: /com/kylin/softwarecenter/getsearchresults
interface: com.kylin.getsearchresults
get_search_result (String keyword) ↦ (Boolean arg_1)
```
跳转到软件商店安装页面的使用了以下dbus接口：
跳转到软件商店安装页面的使用了以下dbus接口：
```
service: com.kylin.softwarecenter
path: /com/kylin/softwarecenter
interface: com.kylin.utiliface
show_search_result (String appname) ↦ (Array of [Dict of {String, String}] arg_1)
```
如果软件商店未打开或接口不可用时，则调用以下命令行：
如果软件商店未打开或接口不可用时，则调用以下命令行：
```shell
kylin-software-center -find <包名>
```
便签本搜索：依赖ukui-notebook提供的dbus接口：
便签本搜索：依赖ukui-notebook提供的dbus接口：
```
service：org.ukui.note
path：/org/ukui/note
interface：org.ukui.note.interface
keywordMatch (Array of [String] keyList) ↦ (Dict of {String, Variant} arg_0)
```
打开文件所在路径功能调用了peony提供的dbus接口：
打开文件所在路径功能调用了peony提供的dbus接口：
```
service：org.freedesktop.FileManager1
path：/org/freedesktop/FileManager1
interface: org.freedesktop.FileManager1
ShowItems (Array of [String] uriList, String startUpId) ↦ ()
```
## 原理与功能特点
全局搜索支持控制面板设置项搜索，应用搜索，文件搜索，便签本搜索。支持名称，拼音，或拼音首字母搜索（文本内容搜索和便签本搜索不支持拼音搜索）。其中，设置项搜索通过读取控制面板提供的配置文件实现，打开对应的控制面板页面也依赖与控制面板提供的命令行；应用搜索分为本地已安装应用（包括安卓兼容应用）和软件商店已上架的在线应用，在线应用的搜索和跳转安装通过软件商店提供的接口实现。所以，当怀疑搜索的设置搜索或应用搜索有问题时，可以直接测试控制面板或软件商店对应的接口。
文件搜索分为文件名（文件夹名）搜索和文本内容搜索。文件搜索有两种模式：直接搜索和建立索引搜索。
直接搜索：类似文件管理的搜索，通过遍历匹配关键字搜索，不支持文本内容搜索。
索引搜索：搜索通过遍历文件系统建立数据库（需要消耗一定的时间和资源），搜索时直接对数据库进行搜索，可以实现毫秒级的搜索响应，建立索引的过程中，搜索结果可能不全或者搜不出结果。
首次索引进程first-index由ukui-search-service进程拉起，在用户首次开启索引功能或者索引损坏需要重建索引时开启；索引更新进程为inotify-index，同样由ukui-search-service进程拉起，但更新进程不会一直存在，其只在用户有文件更新时启动，一段时间后自动关闭。
索引数据库会基于文件系统监听进行实时更新。但是由于解析文本需要时间，所以大文件的索引新可能会有短暂的延迟。由于各种意外原因，比如索引更新过程中掉电关机，可能会导致索引损坏，此时搜索在下次开机时会重新建立索引来保证正常的文件搜索功能。基于机器配置和本地文件的数量，大小以及种类，索引重建的时间可以从几秒到数分钟不等。
索引搜索支持文本内容搜索，基本原理可以参考https://docs.qq.com/doc/DU0p0S1lRelp2aW1y。建立索引时，搜索会对常用的文本文件进行解析，提取关键词存入数据库。搜索时，用户输入的文本也会被提取关键词，和数据库中的关键词进行匹配， 所以文本索引并不能保证你搜索一个文本文件里的任意内容都能搜出这个文件，这也不是普遍的应用场景。搜索输入的文本中必须要包含【关键词】才可以。比如你搜索一个‘的’，由于‘的’并不是任何文件的关键词，所以并不会有搜索到任何文件。事实上，我们有一个停用词词库，专门用来排除‘我’‘的’于是‘等等基本上在每个文档都会出现的一些无用词。目前，搜索支持解析的文件格式有：docx，pptx, xlsx, txt(大部分编码格式), doc, dot, wps, ppt, pps, dps, et, xls, pdf，以上格式均不支持加密文件的解析。
注意：应用的.desktop文件并不是应用本身或者“快捷方式”，对于搜索来说它只是一个文件，所以搜索desktop文件的名字并不能搜出这个应用，除非它恰好和应用重名。另外，在文件搜索中显示的dekstop文件并不会以应用的形式显示，而是显示它本来的样子——一个文件。
全局搜索支持控制面板设置项搜索，应用搜索，文件搜索，便签本搜索。支持名称，拼音，或拼音首字母搜索（文本内容搜索和便签本搜索不支持拼音搜索）。其中，设置项搜索通过读取控制面板提供的配置文件实现，打开对应的控制面板页面也依赖与控制面板提供的命令行；应用搜索分为本地已安装应用（包括安卓兼容应用）和软件商店已上架的在线应用，在线应用的搜索和跳转安装通过软件商店提供的接口实现。所以，当怀疑搜索的设置搜索或应用搜索有问题时，可以直接测试控制面板或软件商店对应的接口。
文件搜索分为文件名（文件夹名）搜索和文本内容搜索。文件搜索有两种模式：`直接搜索`和`建立索引搜索`。
+ 直接搜索：类似文件管理的搜索，通过遍历匹配关键字搜索，不支持文本内容搜索。
+ 索引搜索：搜索通过遍历文件系统建立数据库（需要消耗一定的时间和资源），搜索时直接对数据库进行搜索，可以实现毫秒级的搜索响应，建立索引的过程中，搜索结果可能不全或者搜不出结果。
首次索引进程first-index由ukui-search-service进程拉起，在用户首次开启索引功能或者索引损坏需要重建索引时开启；索引更新进程为inotify-index，同样由ukui-search-service进程拉起，但更新进程不会一直存在，其只在用户有文件更新时启动，一段时间后自动关闭。
索引数据库会基于文件系统监听进行实时更新。但是由于解析文本需要时间，所以大文件的索引新可能会有短暂的延迟。由于各种意外原因，比如索引更新过程中掉电关机，可能会导致索引损坏，此时搜索在下次开机时会重新建立索引来保证正常的文件搜索功能。基于机器配置和本地文件的数量，大小以及种类，索引重建的时间可以从几秒到数分钟不等。
索引搜索支持文本内容搜索，基本原理可以参考https://docs.qq.com/doc/DU0p0S1lRelp2aW1y。建立索引时，搜索会对常用的文本文件进行解析，提取关键词存入数据库。搜索时，用户输入的文本也会被提取关键词，和数据库中的关键词进行匹配， 所以文本索引并不能保证你搜索一个文本文件里的任意内容都能搜出这个文件，这也不是普遍的应用场景。搜索输入的文本中必须要包含【关键词】才可以。比如你搜索一个‘的’，由于‘的’并不是任何文件的关键词，所以并不会有搜索到任何文件。事实上，我们有一个停用词词库，专门用来排除‘我’‘的’于是‘等等基本上在每个文档都会出现的一些无用词。目前，搜索支持解析的文件格式有：docx，pptx, xlsx, txt(大部分编码格式), doc, dot, wps, ppt, pps, dps, et, xls, pdf，以上格式均不支持加密文件的解析。
> 注意：应用的.desktop文件并不是应用本身或者“快捷方式”，对于搜索来说它只是一个文件，所以搜索desktop文件的名字并不能搜出这个应用，除非它恰好和应用重名。另外，在文件搜索中显示的dekstop文件并不会以应用的形式显示，而是显示它本来的样子——一个文件。
## 配置文件与用户数据
ukui-search应用和ukui-search-service、ukui-search-app-data-service的配置文件以及用户数据都保存在如下路径：
~/.config/org.ukui/ukui-search
ukui-search应用和ukui-search-service、ukui-search-app-data-service的配置文件以及用户数据都保存在如下路径：
> ~/.config/org.ukui/ukui-search
文件说明：
ukui-search.conf ------------------------------------全局搜索GUI配置文件。
ukui-search-block-dirs.conf ---------------------文件搜索黑名单，在控制面板中设置
ukui-search-index-status.conf ------------------文件索引服务状态记录
index_data ---------------------------------------------文件索引数据库
content_index_data ---------------------------------文本内容数据库
/*ocr_index_data --------------------------------------- OCR图片搜索数据库()*/
## 编译
下载源码，切换到ukss-dev分支（优麒麟2204版本）
根据debian/control文件安装编译依赖
mkdir build;cd build;qmake ..;make
编译会生成的二进制文件：ukui-search（搜索应用）、ukui-search-service（搜文件索引服务）、ukui-search-app-data-service（应用数据服务）、ukui-search-systemdbus（文建索引服务的system dbus提权接口）
库文件：libchinese-segmentation.so（中文分词）、libukui-search.so（提供搜索服务和搜索应用的API）、libsearch-ukcc-plugin.so(ukui-contorl-center插件)
+ ukui-search.conf ------------------------------------全局搜索GUI配置文件。
+ ukui-search-block-dirs.conf ---------------------文件搜索黑名单，在控制面板中设置
+ ukui-search-index-status.conf ------------------文件索引服务状态记录
+ index_data ---------------------------------------------文件索引数据库
+ content_index_data ---------------------------------文本内容数据库
+ ocr_index_data --------------------------------------- OCR图片搜索数据库
## 编译
下载源码，切换到ukss-dev分支（优麒麟2204版本）
根据debian/control文件安装编译依赖
```shell
mkdir build;cd build;qmake ..;make
```
编译会生成的二进制文件：
+ ukui-search（搜索应用）
+ ukui-search-service（搜文件索引服务）
+ ukui-search-app-data-service（应用数据服务）
+ ukui-search-systemdbus（文建索引服务的system dbus提权接口）
库文件：
+ libchinese-segmentation.so（中文分词）
+ libukui-search.so（提供搜索服务和搜索应用的API）
+ libsearch-ukcc-plugin.so(ukui-contorl-center插件)
## 调试
ukui-search目前并未采用ukui-log4qt模块的日志功能。如需调试，可在以下目录新建ukui-search.log、ukui-search-service.log以及ukui-search-app-data-service.log文件，分别对应全局搜索GUI应用，全局搜索文件索引服务和应用数据服务。新建日志文件后，日志会自动打印到对应额文件中，但目前日志没有自动备份或删除机制。
ukui-search目前并未采用ukui-log4qt模块的日志功能。如需调试，可在以下目录新建`ukui-search.log`、`ukui-search-service.log`以及`ukui-search-app-data-service.log`文件，分别对应全局搜索GUI应用，全局搜索文件索引服务和应用数据服务。新建日志文件后，日志会自动打印到对应额文件中，但目前日志没有自动备份或删除机制。
## 开发接口
### 搜索服务接口(此接口目前处于快速更新总，请以代码为准)
#Use with CMake:
#### Use with CMake:
```cmake
find_package(PkgConfig)
pkg_check_modules(ukui-search REQUIRED ukui-search)
include_directories(${ukui-search_INCLUDE_DIRS})
target_link_libraries(yourapp ukui-search)
```
#Use with Qmake：
#### Use with Qmake：
```
CONFIG += link_pkgconfig
PKGCONFIG += ukui-search
```
使用示例：
```c++
#include <UkuiSearchTask>
......
//初始化一个搜索实例
@ -140,20 +218,27 @@ ukst.startSearch(UkuiSearch::SearchType::File);
qDebug() << queue->dequeue().getItemKey();
}
}
```
目前搜索服务内置的可初始化的插件有（目前仅支持文件，文本和应用搜索）：
```c++
enum class SearchType{
File = 0x1 << 0,
FileContent = 0x1 << 1,
Application = 0x1 << 2,
Setting = 0x1 << 3,
Note = 0x1 << 4,
Mail = 0x1 << 5,
Custom = 0x1 << 6
FileContent = 0x1 << 1,
Application = 0x1 << 2,
Setting = 0x1 << 3,
Note = 0x1 << 4,
Mail = 0x1 << 5,
Custom = 0x1 << 6
};
```
### 搜索服务插件接口
除了上面的内置插件，用户可以通过集成插件接口实现自定义搜索插件：
除了上面的内置插件，用户可以通过集成插件接口实现自定义搜索插件：
```c++
namespace UkuiSearch {
class SearchTaskPluginIface : public QObject, public PluginInterface{
Q_OBJECT
@ -165,19 +250,30 @@ class SearchTaskPluginIface : public QObject, public PluginInterface{
virtual void stop() = 0;
Q_SIGNALS:
void searchFinished(size_t searchId);
};
}
Q_DECLARE_INTERFACE(UkuiSearch::SearchTaskPluginIface, SearchTaskPluginIface_iid)
};
}
Q_DECLARE_INTERFACE(UkuiSearch::SearchTaskPluginIface, SearchTaskPluginIface_iid)
```
调用方法和上面的类似，只是需要在初始化插件和启动搜索的时候，指定用户自定的插件名称（用户插件默认启动即加载）：
//表示加载用户插件
表示加载用户插件
```c++
ukst.initSearchPlugin(UkuiSearch::SearchType::Custom);
//启动搜索
```
启动搜索
```c++
ukst.startSearch(UkuiSearch::SearchType::<用户自定义的名称>);
```
### 搜索应用插件接口
搜索应用本身也提供了一个插件接口，可以通过加载用户实现的插件以实现额外搜索功能：
```c++
namespace UkuiSearch {
class SearchPluginIface : public PluginInterface
{
@ -213,22 +309,37 @@ public:
virtual QWidget *detailPage(const ResultInfo &ri) = 0;
};
}
```
接口使用注意事项：
接口实现时，需要继承SearchPluginIface，并设置以下接口信息：
Q_PLUGIN_METADATA(IID SearchPluginIface_iid FILE "common.json") Q_INTERFACES(Zeeker::SearchPluginIface)
> 接口使用注意事项：
>
> 接口实现时，需要继承`SearchPluginIface`，并设置以下接口信息：
>
> Q_PLUGIN_METADATA(IID SearchPluginIface_iid FILE "common.json") Q_INTERFACES(Zeeker::SearchPluginIface)
其中 `common.json`为开发者自己编写的插件元数据文件，比如可以用来指定版本号等。
其中 “common.json”为开发者自己编写的插件元数据文件，比如可以用来指定版本号等。
子类需要上面两个接口类的所有虚函数，其中，
```c++
virtual void KeywordSearch(QString keyword,DataQueue<ResultInfo> *searchResult) = 0;
```
函数会被UI直接调用，如果你的搜索功能十分费时，请在子线程里实现搜索，不要阻塞UI；ResultInfo代表每一个结果项，DataQueue是前端取结果的数据队列。
函数会被UI直接调用，如果你的搜索功能十分费时，请在子线程里实现搜索，不要阻塞UI；
`ResultInfo`代表每一个结果项，`DataQueue`是前端取结果的数据队列。
```c++
virtual QList<Actioninfo> getActioninfo(int type) = 0;
```
这个函数用于获取每一项搜索结果可以执行的动作，比如打开等，Actioninfo中的actionkey用于指定特定的action，type用于指定搜索结果的类型(如果你的搜索结果有的话);
这个函数用于获取每一项搜索结果可以执行的动作，比如打开等，`Actioninfo`中的`actionkey`用于指定特定的`action`，`type`用于指定搜索结果的类型(如果你的搜索结果有的话);
```c++
virtual QWidget *detailPage(const ResultInfo &ri) = 0;
```
这是用于获取每一项的详情页的函数，详情页同一时间只会显示一个，所以如果你的搜索结果详情页都是一致的风格，最好提前初始化，当这个方法被调用时只更新数据即可。
请一定要注意，搜索可能被快速触发，所以你需要确保当用户进行一次搜索时，队列里不会被错误的插入上一次的搜索结果。