weaviate

Форк
0
60 строк · 1.6 Кб
1
//                           _       _
2
// __      _____  __ ___   ___  __ _| |_ ___
3
// \ \ /\ / / _ \/ _` \ \ / / |/ _` | __/ _ \
4
//  \ V  V /  __/ (_| |\ V /| | (_| | ||  __/
5
//   \_/\_/ \___|\__,_| \_/ |_|\__,_|\__\___|
6
//
7
//  Copyright © 2016 - 2024 Weaviate B.V. All rights reserved.
8
//
9
//  CONTACT: hello@weaviate.io
10
//
11

12
package vectorizer
13

14
import (
15
	"context"
16

17
	"github.com/weaviate/weaviate/entities/models"
18
	"github.com/weaviate/weaviate/entities/moduletools"
19
	"github.com/weaviate/weaviate/modules/text2vec-gpt4all/ent"
20
	objectsvectorizer "github.com/weaviate/weaviate/usecases/modulecomponents/vectorizer"
21
)
22

23
type Vectorizer struct {
24
	client           Client
25
	objectVectorizer *objectsvectorizer.ObjectVectorizer
26
}
27

28
func New(client Client) *Vectorizer {
29
	return &Vectorizer{
30
		client:           client,
31
		objectVectorizer: objectsvectorizer.New(),
32
	}
33
}
34

35
type Client interface {
36
	Vectorize(ctx context.Context, text string) (*ent.VectorizationResult, error)
37
}
38

39
type ClassSettings interface {
40
	PropertyIndexed(property string) bool
41
	VectorizeClassName() bool
42
	VectorizePropertyName(propertyName string) bool
43
}
44

45
func (v *Vectorizer) Object(ctx context.Context, object *models.Object, cfg moduletools.ClassConfig,
46
) ([]float32, models.AdditionalProperties, error) {
47
	vec, err := v.object(ctx, object, cfg)
48
	return vec, nil, err
49
}
50

51
func (v *Vectorizer) object(ctx context.Context, object *models.Object, cfg moduletools.ClassConfig,
52
) ([]float32, error) {
53
	text := v.objectVectorizer.Texts(ctx, object, NewClassSettings(cfg))
54
	res, err := v.client.Vectorize(ctx, text)
55
	if err != nil {
56
		return nil, err
57
	}
58

59
	return res.Vector, nil
60
}
61

Использование cookies

Мы используем файлы cookie в соответствии с Политикой конфиденциальности и Политикой использования cookies.

Нажимая кнопку «Принимаю», Вы даете АО «СберТех» согласие на обработку Ваших персональных данных в целях совершенствования нашего веб-сайта и Сервиса GitVerse, а также повышения удобства их использования.

Запретить использование cookies Вы можете самостоятельно в настройках Вашего браузера.