Meilisearch-laravel-scout: 내 문서의 색인을 생성할 수 없습니다(Algolia에서는 괜찮습니다).

안녕하세요 @elffeff 님

이것은 더 많은 정보 없이는 당신을 돕기 어렵습니다.

meilisearch 인스턴스를 기록하면 다음을 얻을 수 있습니다.

"POST /indexes/local_product/documents?primaryKey=id HTTP/1.1" 202 14 

제품 모델에 toSearchableArray() 를 사용하는 경우 내용을 표시할 수 있으므로 동일한 오류를 재현할 수 있습니다.

저는 몽고디비를 사용하고 있습니다. 키는 _id라고 생각합니다.
그럴 수 있습니까?
toSearchableArray를 사용하여 일부 필드를 필터링하지만 Algolia에서 색인을 생성합니다. 그리고 최종 배열을 덤프하고 괜찮습니다.
나는 지금 컴퓨터가 없습니다. 무엇을 시도하기를 원하십니까?

나는 당신이 무엇을 의미하는지 이해할 수 없습니다

meilisearch 인스턴스를 기록하면 다음을 얻을 수 있습니다.

내가 무엇을 시도하기를 원하는지 알려주세요

내가 시도하면

curl \-X POST 'http://localhost:7700/indexes/local_product/documents' \--data '[{"id": 287947,"title": "Shazam","poster": "https://image.tmdb.org/t/p/w1280/xnopI5Xtky18MPhK40cZAGAOVeV.jpg","overview": "A boy is given the ability to become an adult superhero in times of need with a single magic word.","release_date": "2019-03-23"}]'

나는 얻다
{"updateId":31}

하지만 그때 나는
curl -X GET 'http://localhost:7700/indexes/local_product/documents'
그리고 나는 얻는다

[]
다시

안녕하세요 @elffeff

항상 업데이트 상태를 확인할 수 있습니다. 대부분의 경우 MeiliSearch는 업데이트가 실패한 경우 오류가 무엇인지 알려줍니다.

다음을 확인할 수 있습니다. 업데이트 상태 가져오기

그리고 마지막 예의 경우 시도해 볼 수 있습니다.

curl -X GET 'http://localhost:7700/indexes/local_product/updates/31'

무슨 일이 일어나고 있는지에 대한 더 많은 정보를 제공해야 합니다.

저는 몽고디비를 사용하고 있습니다. 키는 _id라고 생각합니다.
그럴 수 있습니까?

local_product 인덱스를 생성할 때 키 매개변수를 지정하셨습니까?
php artisan scout:index local_product --key _id

toSearchableArray를 사용하여 일부 필드를 필터링하지만 Algolia에서 색인을 생성합니다. 그리고 최종 배열을 덤프하고 괜찮습니다.

toSearchableArray() 주석으로 시도할 수도 있습니다. 이것이 여기에서 문제라고 생각하지 않지만 시도하는 데 비용이 들지 않습니다.

toSearchableArray()를 제거했습니다.
그런 다음 나는 다음을 시도했습니다.
php artisan scout:index local_product --key _id
작동하지 않습니다.

그런 다음
php artisan scout:index local_product --key id
함께

/**
     * Get the value used to index the model.
     *
     * <strong i="14">@return</strong> mixed
     */
    public function getScoutKey()
    {
        return $this->id;
    }

    /**
     * Get the key name used to index the model.
     *
     * <strong i="15">@return</strong> mixed
     */
    public function getScoutKeyName()
    {
        return 'id';
    }

아무것도, 내가 할 때
curl -X GET 'http://localhost:7700/indexes/local_product/documents'

나는 단지 하나의 문서를 얻었습니다. 하나는 다음을 사용하여 색인화되었습니다.

curl \-X POST 'http://localhost:7700/indexes/local_product/documents' \--data '[{"id": 287947,"title": "Shazam","poster": "https://image.tmdb.org/t/p/w1280/xnopI5Xtky18MPhK40cZAGAOVeV.jpg","overview": "A boy is given the ability to become an adult superhero in times of need with a single magic word.","release_date": "2019-03-23"}]'

확인할 수 있는 로그가 있습니까?

데이터를 가져올 때 다음과 같은 결과를 얻었습니까?

shok@pop-os:~/web/blog$ php artisan scout:import "App\Models\Post"
Imported [App\Models\Post] models up to ID: 100
All [App\Models\Post] records have been imported.

로그는 storage/logs/laravel.log 에 있습니다.

scout.php 에서 queue => true 또는 .env에서 SCOUT_QUEUE=true를 설정했습니까?

대기열에 대해 true와 false를 모두 시도했습니다. 항상 나는 얻는다

가져온 [AppModelsProduct] 모델 최대 ID: 5eea4b314c80095faf5be593
가져온 [AppModelsProduct] 모델 최대 ID: 5eea4bd94c80095faf5be787
가져온 [AppModelsProduct] 모델 최대 ID: 5eea4cc34c80095faf5be97b
가져온 [AppModelsProduct] 모델 최대 ID: 5eea4dfa4c80095faf5beb6f
가져온 [AppModelsProduct] 모델 최대 ID: 5eea4f6b4c80095faf5bed63
가져온 [AppModelsProduct] 모델 최대 ID: 5eea51164c80095faf5bef57
가져온 [AppModelsProduct] 모델 최대 ID: 5eea524e4c80095faf5bf099

그러나 문서가 없습니다.
laravel의 로그가 있는 위치를 알고 있지만 오류가 없습니다. 보고 싶은 것은 MS 로그입니다.
무슨 일이 일어나고 있는지 볼 수있는 방법이 있습니까?

모든 동일한 설정으로 Algolia는 내 문서를 색인화합니다.

좋아, Meilisearch laravel scout는 Algolia의 복사 붙여넣기 같은 엔진일 뿐입니다. 그래서 그것은 문제가되어서는 안되지만 mongodb로 실행하려고 시도한 적이 없습니다 ...

@eskombro @curquiza 가 MS 로그에 대해 답변할 수 있습니다.

이것은 사용자 모델이 MySQL이고 작동하기 때문에 MongoDB와 관련이 있습니다.
Algolia는 MongoDB와도 작동하기 때문에 이것은 MongoDB/Meilisearch와 관련이 있습니다.

MS에서 일부 로그를 볼 수 있다면 좋을 것입니다. Algolia가 지원하지만 Meilisearch는 지원하지 않는다면 안타깝습니다.

문제를 파헤칠 수는 있지만 laravel과 함께 mongoDB를 설치하는 방법에 대한 귀하의 도움이 필요합니다.

현재 MeiliSearch 로그는 stdout에 직접 인쇄되므로 MeiliSearch 인스턴스를 실행하는 위치에 따라 다릅니다. 어디에서 실행되고 있습니까?

여기에서 MeiliSearch의 영구 로그에 대해 논의하기 위한 문제를 열었습니다. https://github.com/meilisearch/MeiliSearch/issues/898

@elffeff 이전 댓글에서 제안한 대로 업데이트 상태를 확인했습니까? 문서가 MeilISearch로 성공적으로 전송되었고 상태 ID를 얻은 경우 MeilISearch가 색인을 생성하려고 할 때 문제가 무엇인지에 대한 정보를 해당 업데이트 상태에서 찾을 수 있을 것입니다. 이것을 시도하십시오 : https://github.com/meilisearch/meilisearch-laravel-scout/issues/36#issuecomment -668787383

이것 좀봐

curl \-X POST 'http://localhost:7700/indexes/local_product/documents' \--data '[{"id": 287947,"title": "Shazam","poster": "https://image.tmdb.org/t/p/w1280/xnopI5Xtky18MPhK40cZAGAOVeV.jpg","overview": "A boy is given the ability to become an adult superhero in times of need with a single magic word.","release_date": "2019-03-23"}]'

작동하지만

curl \-X POST 'http://localhost:7700/indexes/local_product/documents' \--data '[{"id": 5eea4bd94c80095faf5be787,"title": "Shazam 2","poster": "https://image.tmdb.org/t/p/w1280/xnopI5Xtky18MPhK40cZAGAOVeV.jpg","overview": "A boy is given the ability to become an adult superhero in times of need with a single magic word.","release_date": "2019-03-23"}]'

"5eea4bd94c80095faf5be787"은 MongoDB _id입니다.
이 아름다움을 돌려주는

{"message":"잘못된 JSON: 1행 11열의 숫자가 잘못되었습니다.","errorCode":"bad_request","errorType":"invalid_request_error","errorLink":" https://docs.meilisearch.com/errors #bad_request "}

JSON이 유효하다고 생각합니다. MS 및 사용자 정의 키에 약간의 문제가 있습니다.
길이인지, 글자인지, 무엇인지 모르겠습니다.

몇 번 시도한 후 문자가 문제라고 생각합니다. MS는 ID에 문자를 허용하지 않습니다. 그러나 Laravel은 거기에 편지를 넣을 수 있도록 했습니다.
그것이 내가 생각하는 문제다.

예, 큰따옴표로 묶인 문자열로 보내면 됩니다.

5eea4bd94c80095faf5be787 "id": 5eea4bd94c80095faf5be787 "id": "5eea4bd94c80095faf5be787" 와 함께 작동합니다 🙂

하지만 Scout 확장 프로그램이 보내는 방식은 제어하지 않습니다. 🙂

이렇게 해도

/**
     * Get the value used to index the model.
     *
     * <strong i="6">@return</strong> mixed
     */
    public function getScoutKey()
    {
        return (string)$this->_id;
    }

작동하지 않습니다. 이 엔진이 문자열 ID를 처리해야 한다고 생각합니다.

toSearchableArray()에서 동일한 작업을 수행합니다.

return [ 'id' => (string) $this->_id]
or
return [ '_id' => (string) $this->_id]

무엇을 키로 설정했는지 모르겠습니다.

 public function toSearchableArray()
    {
        $array = $this->toArray();

        $array['id'] = (string)$array['_id'];

        return $array;
    }

작동합니다

마지막 한가지.
Algolia는 인덱스 생성과 함께 자동으로 처리합니다.
내 말은, Algolia는 인덱스가 존재하지 않으면 생성하고 나는 변환 없이 문자로 ID를 인덱싱할 수 있습니다.
MS에는 두 가지 기능이 모두 포함되어야 한다고 생각합니다.

내 말은, Algolia는 존재하지 않는 경우 인덱스를 생성합니다.

실제로 MeiliSearch API는 아직 이 기능을 처리하지 않습니다.
대안 솔루션으로 대부분의 SDK는 get_or_create_index 메서드를 제공합니다(PHP SDK가 하는 것처럼) 🙂

변환 없이 문자로 ID를 인덱싱할 수 있습니다.

문제는 JSON 유효성에서 비롯되었습니다. Algolia API도 유효하지 않은 JSON을 허용하지 않습니다. 숫자를 인용하지 않고 문자가 포함된 숫자를 보내는 것( " )은 유효하지 않은 JSON으로 간주되어 실패합니다.

Algolia 대시보드를 참조하십시오.

Algolia의 Laravel SDK는 문자가 포함된 숫자를 문자열로 변환하므로 실패가 없었을 것입니다 🙂

MS에는 두 가지 기능이 모두 포함되어야 한다고 생각합니다.

따라서 meilisearch-laravel-scout 에는 "인용 기능"이 포함될 수 있지만 MeiliSearch는 유효한 JSON을 기대하기 때문에 포함할 수 없습니다 😉

예, 두 경우 모두 이 Scout Engine에 대해 이야기하고 있으며 여기에서 Scout 통합에 있습니다.
SDK는 인덱스를 생성하는 방법을 제공할 수 있지만 인덱스가 존재하지 않으면 Scout가 실패합니다.

문자가 있는 Id와 동일하게 JSOn의 형식이 잘못되었음을 이해하지만 Scout 엔진은 실패하기 전에 이를 제어합니다.
Algolia의 경우와 마찬가지로 문자로 실패하지 않기 때문입니다.

알았어 알았어 이해가 잘 안됐어 😉

그런 다음 구현하기에 좋은 기능이 될 수 있습니다! 🙂

편집: meilisearch-php 또는 meilisearch-laravel-scout 패키지에서 구현하는지 생각해야 합니다.

@curquiza
따라 다릅니다. 둘 다 좋습니다.

scout에서 구현한다면 symfony(및 기타 프레임워크 구현)도 구현해야 한다고 생각합니다(이미 그럴 수도 있음). 따라서 대신 SDK에 있는 것이 더 나을 수 있습니까?

스카우트가 Algolia용으로 구현했는지 확실하지 않습니다. 이것이 Algolia PHP SDK에서 처리한다고 생각합니다. 약간의 여유 시간이 있을 때 이를 확인하겠습니다.

@shokme , 맞습니다. laravel-scout 통합보다는 PHP SDK에서 수행하는 것이 더 현명할 수 있습니다.
조사에 대해 알려주시면 그에 따라 문제를 이동(또는 다시 생성)하겠습니다! 🙂

그래서 모든 것을 조사한 후.
jenssegers/laravel-mongodb 사용하여 laravel에 mongodb를 설치했습니다.

내 인덱스를 만드는 것으로 시작했습니다.
php artisan scout:index cars -k _id

모델을 만들다

<?php

namespace App;

use Jenssegers\Mongodb\Eloquent\Model;
use Laravel\Scout\Searchable;

class Car extends Model
{
    use Searchable;

    public function getScoutKey() // not required if this is already your primary key
    {
        return $this->_id;
    }

    public function getScoutKeyName() // not required if this is already your primary key
    {
        return '_id';
    }
}

새 차 만들기

$car = new App\Car();
$car->name = 'mustang';
$car->constructor = 'ford';
$car->type = 'muscle';
$car->horses = 280;
$car->save();

모델은 문제 없이 meilisearch로 보내졌습니다!

{
  "status": "processed",
  "updateId": 1,
  "type": {
    "name": "DocumentsAddition",
    "number": 1
  },
  "duration": 0.005275826,
  "enqueuedAt": "2020-08-29T17:43:55.104917708Z",
  "processedAt": "2020-08-29T17:43:55.121602037Z"
}

검색할 때 정확한 결과를 얻습니다

App\Car::search('mustang')->get();

```json
[
{
"_id": "5f4a93dbd9668370086c7752",
"이름": "머스탱",
"생성자": "포드",
"유형": "근육",
"말": 280,
"updated_at": "2020-08-29T17:43:55.102000Z",
"created_at": "2020-08-29T17:43:55.102000Z"
}
]

The only problem I have encounter while trying to reproduce the bug was by forgot to set `_id` has primaryKey
and the update status was returning:
```json
{
  "status": "failed",
  "updateId": 3,
  "type": {
    "name": "DocumentsAddition",
    "number": 1
  },
  "error": "serializer error; Primary key is missing.",
  "duration": 9.817e-6,
  "enqueuedAt": "2020-08-29T17:21:00.098580201Z",
  "processedAt": "2020-08-29T17:21:00.100495474Z"
}

그래서 솔직히 말해서 왜 $this->_id @elfeffe 에서 문자열을 받지 못하는지 이해가 되지 않습니다.

@shokme 잘 모르겠습니다. 며칠 내로 검색 작업을 재개하고 새로운 것을 발견하면 알려 드리겠습니다.
SDK는 실수를 피하기 위해 Algolia가 하는 것처럼 자동으로 인덱스를 생성해야 합니다.

SDK는 실수를 피하기 위해 Algolia가 하는 것처럼 자동으로 인덱스를 생성해야 합니다.

MeiliSearch 코어 엔진에서 기획되었습니다! 🙂
https://github.com/meilisearch/MeiliSearch/issues/918