查詢附近點--Geohash方案討論
隨著移動終端的普及,很多應用都基於LBS功能,附近的某某(餐館、銀行、妹紙等等)。
基礎資料中,一般儲存了目標位置的經緯度;利用使用者提供的經緯度,進行對比,從而獲得是否在附近。
目標:
查詢附近的XXX,由近到遠返回結果,且結果中有與目標點的距離。
針對查詢附近的XXX,提出兩個方案,如下:
一、方案A:
=================================================================================================
抽象為球面兩點距離的計算,即已知道球面上兩點的經緯度;
點(緯度,經度),A($radLat1,$radLng1)、B($radLat2,$radLng2);
優點:通俗易懂,部署簡單便捷
缺點:每次都會查詢資料庫,效能堪憂
1、推導
通過餘弦定理以及弧度計算方法,最終推匯出來的算式A為:
$s = acos(cos($radLat1)*cos($radLat2)*cos($radLng1-$radLng2)+sin($radLat1)*sin($radLat2))*$R; |
目前網上大多使用Google公開的距離計算公司,推導算式B為:
$s = 2*asin(sqrt(pow(sin(($radLat1-$radLat2) /2 ),2)+cos($radLat1)*cos($radLat2)*pow(sin(($radLng1-$radLng2) /2 ),2)))*$R; |
其中 :
$radLat1、$radLng1,$radLat2,$radLng2 為弧度
$R 為地球半徑
2、通過測試兩種演算法,結果相同且都正確,但通過PHP程式碼測試,兩點間距離,10W次效能對比,自行推導版本計算時長算式B較優,如下:
//算式A
0.56368780136108float(431)
0.57460689544678float(431)
0.59051203727722float(431)
//算式B
0.47404885292053float(431)
0.47808718681335float(431)
0.47946381568909float(431)
3、所以採用數學方法推匯出的公式:
<?php // 根據經緯度計算距離 其中A($lat1,$lng1)、B($lat2,$lng2) public static function getDistance($lat1,$lng1,$lat2,$lng2) { // 地球半徑 $R = 6378137; // 將角度轉為狐度 $radLat1 = deg2rad($lat1); $radLat2 = deg2rad($lat2); $radLng1 = deg2rad($lng1); $radLng2 = deg2rad($lng2); // 結果 $s = acos(cos($radLat1)*cos($radLat2)*cos($radLng1-$radLng2)+sin($radLat1)*sin($radLat2))*$R; // 精度 $s = round($s* 10000) /10000 ; return round($s); } ?> |
4、在實際應用中,需要從資料庫中遍歷取出符合條件,以及排序等操作,
將所有資料取出,然後通過PHP迴圈對比,篩選符合條件結果,顯然效能低下;所以我們利用下Mysql儲存函式來解決這個問題吧。
4.1、建立Mysql儲存函式,並對經緯度欄位建立索引
<?php // 根據經緯度計算距離 其中A($lat1,$lng1)、B($lat2,$lng2) public static function getDistance($lat1,$lng1,$lat2,$lng2) { // 地球半徑 $R = 6378137; // 將角度轉為狐度 $radLat1 = deg2rad($lat1); $radLat2 = deg2rad($lat2); $radLng1 = deg2rad($lng1); $radLng2 = deg2rad($lng2); // 結果 $s = acos(cos($radLat1)*cos($radLat2)*cos($radLng1-$radLng2)+sin($radLat1)*sin($radLat2))*$R; // 精度 $s = round($s* 10000) /10000 ; return round($s); } ?> |
4.2、查詢SQL
通過SQL,可設定距離以及排序;可搜尋出符合條件的資訊,以及有一個較好的排序
1 |
SELECT *,latitude,longitude,GETDISTANCE(latitude,longitude,30.663262,104.071619) AS distance FROM mb_shop_ext where 1 HAVING distance<1000 ORDER BY distance ASC LIMIT 0,10 |
二、方案B
=================================================================================================
Geohash演算法;geohash是一種地址編碼,它能把二維的經緯度編碼成一維的字串。
比如,成都永豐立交的編碼是wm3yr31d2524
優點:
1、利用一個欄位,即可儲存經緯度;搜尋時,只需一條索引,效率較高
2、編碼的字首可以表示更大的區域,查詢附近的,非常方便。 SQL中,LIKE ‘wm3yr3%’,即可查詢附近的所有地點。
3、通過編碼精度可模糊座標、隱私保護等。
缺點: 距離和排序需二次運算(篩選結果中執行,其實挺快)
1、geohash的編碼演算法
成都永豐立交經緯度(30.63578,104.031601)
1.1、緯度範圍(-90, 90)平分成兩個區間(-90, 0)、(0, 90),如果目標緯度位於前一個區間,則編碼為0,否則編碼為1。
由於30.625265屬於(0, 90),所以取編碼為1。
然後再將(0, 90)分成 (0, 45), (45, 90)兩個區間,而39.92324位於(0, 45),所以編碼為0,
然後再將(0, 45)分成 (0, 22.5), (22.5, 45)兩個區間,而39.92324位於(22.5, 45),所以編碼為1,
依次類推可得永豐立交緯度編碼為101010111001001000100101101010。
1.2、經度也用同樣的演算法,對(-180, 180)依次細分,(-180,0)、(0,180) 得出編碼110010011111101001100000000000
1.3、合併經緯度編碼,從高到低,先取一位經度,再取一位緯度;得出結果 111001001100011111101011100011000010110000010001010001000100
1.4、用0-9、b-z(去掉a, i, l, o)這32個字母進行base32編碼,得到(30.63578,104.031601)的編碼為wm3yr31d2524。
|
11100 10011 00011 11110 10111 00011 00001 01100 00010 00101 00010 00100 => wm3yr31d2524 十進位制 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 base32 0 1 2 3 4 5 6 7 8 9 b c d e f g 十進位制 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 base32 h j k m n p q r s t u v w x y z |
2、策略
1、在緯度和經度入庫時,資料庫新加一欄位geohash,記錄此點的geohash值
2、查詢附近,利用 在SQL中 LIKE ‘wm3yr3%’;且此結果可快取;在小區域內,不會因為改變經緯度,而重新資料庫查詢
3、查詢出的有限結果,如需要求距離或者排序,可利用距離公式和二維資料排序;此時也是少量資料,會很快的。
3、PHP基類
geohash.class.php
<?php class Geohash { private $coding= "0123456789bcdefghjkmnpqrstuvwxyz" ; private $codingMap=array(); public function Geohash() { for ($i=0; $i<32; $i++) { $this->codingMap[substr($this->coding,$i,1)]=str_pad(decbin($i), 5, "0" ,
STR_PAD_LEFT); } } public function decode($ hash ) { $binary= "" ; $hl=strlen($ hash ); for ($i=0; $i<$hl; $i++) { $binary.=$this->codingMap[substr($ hash ,$i,1)]; } $bl=strlen($binary); $blat= "" ; $blong= "" ; for ($i=0; $i<$bl; $i++) { if ($i%2) $blat=$blat.substr($binary,$i,1); else $blong=$blong.substr($binary,$i,1); } $lat=$this->binDecode($blat,-90,90); $long=$this->binDecode($blong,-180,180); $latErr=$this->calcError(strlen($blat),-90,90); $longErr=$this->calcError(strlen($blong),-180,180); $latPlaces=max(1, -round(log10($latErr))) - 1; $longPlaces=max(1, -round(log10($longErr))) - 1; $lat=round($lat, $latPlaces); $long=round($long, $longPlaces); return array($lat,$long); } public function encode($lat,$long) { $plat=$this->precision($lat); $latbits=1; $err=45; while ($err>$plat) { $latbits++; $err/=2; } $plong=$this->precision($long); $longbits=1; $err=90; while ($err>$plong) { $longbits++; $err/=2; } $bits=max($latbits,$longbits); $longbits=$bits; $latbits=$bits; $addlong=1; while (($longbits+$latbits)%5 != 0) { $longbits+=$addlong; $latbits+=!$addlong; $addlong=!$addlong; } $blat=$this->binEncode($lat,-90,90, $latbits); $blong=$this->binEncode($long,-180,180,$longbits); $binary= "" ; $uselong=1; while (strlen($blat)+strlen($blong)) { if ($uselong) { $binary=$binary.substr($blong,0,1); $blong=substr($blong,1); } else { $binary=$binary.substr($blat,0,1); $blat=substr($blat,1); } $uselong=!$uselong; } $ hash = "" ; for ($i=0; $i<strlen($binary); $i+=5) { $n=bindec(substr($binary,$i,5)); $ hash =$ hash .$this->coding[$n]; } return $ hash ; } private function calcError($bits,$min,$max) { $err=($max-$min) /2 ; while ($bits--) $err/=2; return $err; } private function precision($number) { $precision=0; $pt=strpos($number, '.' ); if ($pt!== false ) { $precision=-(strlen($number)-$pt-1); } return pow(10,$precision) /2 ; } private function binEncode($number, $min, $max, $bitcount) { if ($bitcount==0) return "" ; $mid=($min+$max) /2 ; if ($number>$mid) return "1" .$this->binEncode($number,
$mid, $max,$bitcount-1); else return "0" .$this->binEncode($number,
$min, $mid,$bitcount-1); } private function binDecode($binary, $min, $max) { $mid=($min+$max) /2 ; if (strlen($binary)==0) return $mid; $bit=substr($binary,0,1); $binary=substr($binary,1); if ($bit==1) return $this->binDecode($binary, $mid, $max); else return $this->binDecode($binary, $min, $mid); } } ?> |
三、測試
<?php require_once( 'Mysql.class.php' ); require_once( 'geohash.class.php' ); //mysql $conf = array( 'host' => '127.0.0.1' , 'port' => 3306, 'user' => 'root' , 'password' => '123456' , 'database' => 'mocube' , 'charset' => 'utf8' , 'persistent' => false ); $mysql = new Db_Mysql($conf); $geohash=new Geohash; // 經緯度轉換成Geohash // 獲取附近的資訊 $n_latitude = $_GET[ 'la' ]; $n_longitude = $_GET[ 'lo' ]; // 開始 $b_time = microtime( true ); // 方案A,直接利用資料庫儲存函式,遍歷排序 // 方案B geohash求出附近,然後排序 // 當前 geohash值 $n_geohash = $geohash->encode($n_latitude,$n_longitude); // 附近 $n = $_GET[ 'n' ]; $like_geohash = substr($n_geohash, 0, $n); $sql = 'select * from mb_shop_ext where geohash like "' .$like_geohash. '%"' ; echo $sql; $data = $mysql->queryAll($sql); // 算出實際距離 foreach($data as $key=>$val) { $distance = getDistance($n_latitude,$n_longitude,$val[ 'latitude' ],$val[ 'longitude' ]); $data[$key][ 'distance' ] = $distance; // 排序列 $sortdistance[$key] = $distance; } // 距離排序 array_multisort($sortdistance,SORT_ASC,$data); // 結束 $e_time = microtime( true ); echo $e_time - $b_time; var_dump($data); // 根據經緯度計算距離 其中A($lat1,$lng1)、B($lat2,$lng2) function getDistance($lat1,$lng1,$lat2,$lng2) { // 地球半徑 $R = 6378137; // 將角度轉為狐度 $radLat1 = deg2rad($lat1); $radLat2 = deg2rad($lat2); $radLng1 = deg2rad($lng1); $radLng2 = deg2rad($lng2); // 結果 $s = acos(cos($radLat1)*cos($radLat2)*cos($radLng1-$radLng2)+sin($radLat1)*sin($radLat2))*$R; // 精度 $s = round($s* 10000) /10000 ; return round($s); } ?> |
四、總結
方案B的亮點在於:
1、搜尋結果可快取,重複使用,不會因為使用者有小範圍的移動,直接穿透資料庫查詢。
2、先縮小結果範圍,再運算、排序,可提升效能。
254條記錄,效能對比,
在實際應用場景中,方案B資料庫搜尋可記憶體快取;且如資料量更大,方案B結果會更優。
方案A:
0.016560077667236
0.032402992248535
0.040318012237549
方案B
0.0079810619354248
0.0079669952392578
0.0064868927001953
五、其他
兩種方案,根據應用場景以及負載情況合理選擇,當然推薦方案B;
不管哪種方案,都記得,給列加上索引,利於資料庫檢索。
相關文章
- Golang 實現 Redis(9): 使用GeoHash 搜尋附近的人GolangRedis
- 簡單實現附近周邊服務查詢功能
- cassandra查詢效率探討
- 論文查詢網站網站
- Laravel中使用ElasticSearch查詢附近2公里以內的店鋪LaravelElasticsearch
- ef8 Contains 查詢條件 報錯 $ 附近錯誤AI
- 討論一個應用的解決方案
- 關於網站設計的一點點討論網站
- 討論一下秒殺系統的技術難點與解決方案
- 淺談附近地點搜尋
- oracle 查詢殺死死鎖方案Oracle
- 查詢論文原始碼網站原始碼網站
- Perl 知識點查詢
- 探討一個比較複雜的查詢
- 請多討論問題,而不是解決方案 - frankel
- [討論] 似是而非的程式設計觀點程式設計
- Spring Boot 2 實戰:利用Redis的Geo功能實現查詢附近的位置Spring BootRedis
- 關於動態配置表檢查工具 (討論帖)
- 物件點查詢和中括號查詢的區別物件
- 靈活的查詢設計方案
- 計算機論文查詢網站計算機網站
- 二分查詢 理論 例題
- MySQL 慢查詢那點事MySql
- SetUnhandledExceptionFilter 的討論ExceptionFilter
- NodeJS優缺點及適用場景討論NodeJS
- [iOS Monkey 討論帖] 整套新的 fastmonkey 討論iOSAST
- [技術討論]關於低耦合開發的討論
- SQL Server查詢慢的解決方案SQLServer
- mysql慢查詢,死鎖解決方案MySql
- Hibernate綜合查詢解決方案 (轉)
- 查詢硬碟序列號的參考方案硬碟
- 總結幾個查詢論文網址
- js用字首名查詢class或id節點,js模糊查詢某個dom節點JS
- 線段樹(1)建樹、單點修改、單點查詢、區間查詢和例題
- GeoHash核心原理解析
- 關於BSS資料化轉型的幾點討論
- mysql根據節點查詢所有葉節點MySql
- 查詢熱點快和熱點塊的操作