SQL 全文檢索 搜尋準確度問題

目前工作上遇到使用全文搜尋後無法按照想要的結果出現

比如我對一個col使用contains( col , '"'一'"');

可能col內有很多有 一個 一切 一天 之類的文字

但是由於全文檢索的切割因此無法呈現，那怕是加上**也一樣

原因在於 全文檢索會先把你的字串切成某些字串組，因此搜尋速度加快，但是也導致搜尋無法像like一樣

如我用 select * from table where col like '%一%' 則可以找到一切、一個之類的文字串

而我想搜尋看看字串到底是如何切割的 因此使用

SELECT *

FROM sys.dm_fts_index_keywords

(DB_ID('DB_NAME'),OBJECT_ID('TABLE_NAME')

大致上出現這些選項，那可以得知 "一" 通常會被組成其他字串列。
因此單獨就一來搜尋是無法找到東西的

接著我就想說是否可以自訂搜尋的切割條件，參考這篇
上面介紹到可以透過修改tscht.xml來達到改變字串切割的方法
檔案預設位置通常在
C:\Program Files\Microsoft SQL Server\MSSQL10_50.SQL2K8R2\MSSQL\FTData

打開後會看到這樣的XML檔案，紅框處是我修改的部分，我原本改<sub>一</sub>
重新搜尋之後還是找不到一，判斷可能是無法增加模糊。

不知道為何無法加入任何關鍵字，按照參考照做依舊無法找到園三結。

接著推測可能 第一個 會變切成 第一 和 個

因此可依照表中的 第一 找到關於第一的相關組成

可能之後用到這篇再來處理吧，現在感覺是還堪用，並且由於切成單字的不多，因此限定至少兩個字的搜尋(依靠全文檢索自動切?)

或者我想要使用

SELECT *

FROM sys.dm_fts_index_keywords

(DB_ID('DB_NAME'),OBJECT_ID('TABLE_NAME')

找出陣列之後一個一個去比對? 但是感覺效能會很差 可能再評估一下


參考

http://blog.sqlgrease.com/find-busiest-database-sys-dm_exec_query_stats/#:~:text=Adhoc%20SQL%20has%20its%20dbid%20set%20to%20NULL,As%20a%20result%20a%20dbid%20can%E2%80%99t%20be%20determined.

https://learn.microsoft.com/en-us/sql/relational-databases/system-dynamic-management-views/sys-dm-fts-index-keywords-by-document-transact-sql?redirectedfrom=MSDN&view=sql-server-ver16

https://dotblogs.azurewebsites.net/ricochen/2014/05/10/145037

https://learn.microsoft.com/zh-tw/troubleshoot/sql/admin/improve-performance-full-text-queries

https://learn.microsoft.com/zh-tw/sql/relational-databases/search/improve-the-performance-of-full-text-indexes?view=sql-server-ver16

留言

張貼留言

這個網誌中的熱門文章

無法載入檔案或組件 'System.IO.Compression' 或其相依性的其中之一。

圖片
曾經在拿取檔案的時候發生過這個問題 我不清楚究竟是版本的問題還是(應該不是版本的問題，因為我從我的夥伴手中拿它可以跑的程式，修改Config後仍然有問題) 主要的問題可能是因為package的問題，時常因為package跟參考以及nuget和WebConfig有不同而出現版本問題 遇到上述問題的話可能都要檢查以上三個檔案 建議是直接複製查詢 然後把「你認為不該存在的」參考給移除。 我自己本人是只留下參考中的檔案，是會把package和WebConfig的依賴給註解後再使用nuget重新安裝。 題外話抱怨 package.Config貌似就是參考的引入，但是不知道為啥連那邊都會跟參考互相衝突，微軟真的不打算修一下逆? 補充說明: 比如說遇到這個錯誤 上面有寫明說 Newtonsoft.Json culture = neutral publicKeyToken = 30ad4fe6b2a6aeed version = 6.0.0.0 就可以在web.config中寫這段加入  <dependentAssembly>    <assemblyIdentity name="Newtonsoft.Json" culture="neutral" publicKeyToken="30ad4fe6b2a6aeed"/>    <bindingRedirect oldVersion="0.0.0.0-6.0.0.0" newVersion="6.0.0.0"/>  </dependentAssembly> oldVersion - 那些版號要對應 - 可以用 - 來包含版號區間。 注意，newVersion不代表一定比oldVersion高。換句話說也有可能高版本全部要用低版本的dll（不過這種情景比較少 ，因為一般都是高版本會向下兼容） 不過這種方法不太建議，一律建議使用最上面的方法 參考 http://shaurong.blogspot.com/2020/02/systemiocompression.html
閱讀完整內容

MongoDB 入門

圖片
 MongoDB是一個NoSQL(非關聯性資料庫) 主要的儲存方式是 一個DB => 底下為一個Collection (類似Table) => 接著是文檔(docume) 存的資料型態為 BSON 是一種JSON的變體 如這樣 ID 自動生成 如SN 為唯一值 name sort之類的數值都是自己產生的 常用語法 通常都是以 db.CollectionName 開頭 find() 類似where 不輸入為全搜尋 insertOne({colname : data , colname2 :"data2"}) insert 用逗號分隔 insertMany([{colname : data} , {colname2 :"data2"}]) 如上 只是有中括號用來代表陣列 find().limit(N) 只回傳N筆 類似select() find().skip(N) 略過N筆後 類似skip() find().sort({colname : 1 , colname2 : -1}) 1是升冪 -1降冪 find()進階 => find({colname : 3} , {colname : 1 , colname2 : 0}) 這段的意思是 依照前面大括內的where 搜尋後 依照後面的select 條件選出 1是要輸出 0是不要輸出 假如只有0 則是 除了這些以外都要輸出  通常 1 跟 0 同時出現的時候是 _id這個字樣 因為這個是會自動返回的字樣 find(colname : {$gt : 3})  gt 大於 lt 小於 gte 大於等於 lte 小於等於 eq 等於 in => {$in :[ 1 , 3]} 一或三 nin => {$nin :[ 1 , 3]} 不等於1 或 3 都出 colname : { $exists : 1 } 代表這個colname存在的話則顯示 (nosql 因此型態可能不同) 0則是沒有的顯示 colname : {$regex :{/data/}} 正則表達式 找所有data  countDocuments() 總數 ex 找大於等於3小於等於5的 db.CollName.find(colname : {$gte : 3 , $let : 5}) 參考 : h...
閱讀完整內容

javascript 更改屬性及創建標籤

雖然應該是一些很基本的東西 但是我的前端其實蠻破的，所以筆記一下關於這個東西 //-----------------------------------1 如果要呈現某種屬性的話 就用 document.querySelector('id').setAttribute('readonly', true); 如果要刪除(隱藏)某種屬性的話就用 document.querySelector('id').removeAttribute('readonly'); //-----------------------------------2 $(document).ready(function () {         //取目標Tag為img者          //getElementsByTagName 不能使用forEach走訪 只好使用for走訪         var varTaglist = document.getElementsByTagName('img');         for (let i = 0; i < varTaglist.length; i++) {             //走訪建立id用於區分點選的目標             varTaglist[i].setAttribute('id', 'imgID' + i)             //走訪建立onclick屬性             varTaglist[i].setAttribute('onclick', 'imgclick(id)');         }     });     //設定屬性值 part2     var imgclick = function ...
閱讀完整內容