Index

A

AdhocAssessedTopic (class in datamaestro_ir.data) AdhocAssessment (class in datamaestro_ir.data)

assessments (datamaestro_ir.data.Adhoc attribute) (datamaestro_ir.data.RerankAdhoc attribute)

B

base_store (datamaestro_ir.data.stores.CastSegmentedPassageStore attribute)

C

compressed (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) ConversationEntry (class in datamaestro_ir.data.conversation.base) ConversationNode (class in datamaestro_ir.data.conversation.base) conversations (datamaestro_ir.data.conversation.base.ConversationUserTopics attribute) ConversationTree (class in datamaestro_ir.data.conversation.base) count (datamaestro_ir.data.AdhocIndex attribute) (datamaestro_ir.data.anserini.Index attribute) (datamaestro_ir.data.beir.BeirDocumentStore attribute) (datamaestro_ir.data.CompressedDocumentStore attribute) (datamaestro_ir.data.cord19.Documents attribute) (datamaestro_ir.data.csv.Documents attribute) (datamaestro_ir.data.Documents attribute) (datamaestro_ir.data.DocumentStore attribute) (datamaestro_ir.data.lotte.LotteDocumentStore attribute) (datamaestro_ir.data.PrefixedDocumentStore attribute) (datamaestro_ir.data.stores.CarParagraphStore attribute) (datamaestro_ir.data.stores.CastSegmentedPassageStore attribute) (datamaestro_ir.data.stores.KiltDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentV2Store attribute) (datamaestro_ir.data.stores.MsMarcoPassagesStore attribute) (datamaestro_ir.data.stores.MsMarcoPassageV2Store attribute) (datamaestro_ir.data.stores.TipsterDocumentStore attribute) (datamaestro_ir.data.stores.WapoDocumentStore attribute) (datamaestro_ir.data.stores.WapoPassageStore attribute) (datamaestro_ir.data.trec.TipsterCollection attribute)

D

data (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) (datamaestro_ir.transforms.StoreTrainingTripletDocumentAdapter attribute) (datamaestro_ir.transforms.StoreTrainingTripletTopicAdapter attribute) data_files (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) datamaestro_ir.data.base module DecontextualizedItem (class in datamaestro_ir.data.conversation.base) delimiter (datamaestro_ir.data.cord19.Documents attribute) detailed (datamaestro_ir.data.trec.TrecAdhocResults attribute) doc_ids (datamaestro_ir.data.TrainingTripletsLines attribute) (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute)

document (datamaestro_ir.data.base.ScoredDocument attribute) (datamaestro_ir.data.distillation.PointwiseDistillationSample attribute) document_field (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) documents (datamaestro_ir.data.Adhoc attribute) (datamaestro_ir.data.conversation.base.RetrievedEntry attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSample attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSample attribute) (datamaestro_ir.data.RerankAdhoc attribute) drop_field (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) dupes_path (datamaestro_ir.data.stores.CastSegmentedPassageStore attribute) duplicate_field (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

E

entry() (datamaestro_ir.data.conversation.base.ConversationNode method)

F

file_access (datamaestro_ir.data.AdhocIndex attribute) (datamaestro_ir.data.anserini.Index attribute) (datamaestro_ir.data.beir.BeirDocumentStore attribute) (datamaestro_ir.data.CompressedDocumentStore attribute) (datamaestro_ir.data.DocumentStore attribute) (datamaestro_ir.data.lotte.LotteDocumentStore attribute) (datamaestro_ir.data.PrefixedDocumentStore attribute) (datamaestro_ir.data.stores.CarParagraphStore attribute) (datamaestro_ir.data.stores.CastSegmentedPassageStore attribute) (datamaestro_ir.data.stores.KiltDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentV2Store attribute) (datamaestro_ir.data.stores.MsMarcoPassagesStore attribute) (datamaestro_ir.data.stores.MsMarcoPassageV2Store attribute) (datamaestro_ir.data.stores.TipsterDocumentStore attribute) (datamaestro_ir.data.stores.WapoDocumentStore attribute) (datamaestro_ir.data.stores.WapoPassageStore attribute)

filter_drop (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) filter_duplicate (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

G

get_decontextualized_query() (datamaestro_ir.data.conversation.base.DecontextualizedItem method)

H

history() (datamaestro_ir.data.conversation.base.ConversationNode method)

I

id (datamaestro_ir.data.Adhoc attribute) (datamaestro_ir.data.AdhocAssessments attribute) (datamaestro_ir.data.AdhocIndex attribute) (datamaestro_ir.data.AdhocResults attribute) (datamaestro_ir.data.AdhocRun attribute) (datamaestro_ir.data.anserini.Index attribute) (datamaestro_ir.data.beir.BeirAssessments attribute) (datamaestro_ir.data.beir.BeirDocumentStore attribute) (datamaestro_ir.data.beir.BeirParquetAssessments attribute) (datamaestro_ir.data.beir.BeirParquetTopics attribute) (datamaestro_ir.data.beir.BeirTopics attribute) (datamaestro_ir.data.CompressedDocumentStore attribute) (datamaestro_ir.data.conversation.base.ConversationDataset attribute) (datamaestro_ir.data.conversation.base.ConversationUserTopics attribute) (datamaestro_ir.data.conversation.canard.CanardDataset attribute) (datamaestro_ir.data.conversation.cast.CastConversations attribute) (datamaestro_ir.data.conversation.ikat.IkatConversations attribute) (datamaestro_ir.data.conversation.orconvqa.OrConvQADataset attribute) (datamaestro_ir.data.conversation.qrecc.QReCCDataset attribute) (datamaestro_ir.data.cord19.Documents attribute) (datamaestro_ir.data.cord19.Topics attribute) (datamaestro_ir.data.csv.AdhocRunWithText attribute) (datamaestro_ir.data.csv.Documents attribute) (datamaestro_ir.data.csv.Topics attribute) (datamaestro_ir.data.distillation.ConcatPointwiseDistillationSamples attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamples attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSVWithAnnotations attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSamples attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.distillation.PointwiseDistillationSamples attribute) (datamaestro_ir.data.distillation.RandomInterleavePointwiseDistillationSamples attribute) (datamaestro_ir.data.Documents attribute) (datamaestro_ir.data.DocumentStore attribute) (datamaestro_ir.data.FilteredTopics attribute) (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) (datamaestro_ir.data.lotte.LotteAssessments attribute) (datamaestro_ir.data.lotte.LotteDocumentStore attribute) (datamaestro_ir.data.lotte.LotteTopics attribute) (datamaestro_ir.data.PairwiseSampleDataset attribute) (datamaestro_ir.data.PrefixedDocumentStore attribute) (datamaestro_ir.data.RerankAdhoc attribute) (datamaestro_ir.data.stores.CarParagraphStore attribute) (datamaestro_ir.data.stores.CastSegmentedPassageStore attribute) (datamaestro_ir.data.stores.KiltDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentV2Store attribute) (datamaestro_ir.data.stores.MsMarcoPassagesStore attribute) (datamaestro_ir.data.stores.MsMarcoPassageV2Store attribute) (datamaestro_ir.data.stores.TipsterDocumentStore attribute) (datamaestro_ir.data.stores.WapoDocumentStore attribute) (datamaestro_ir.data.stores.WapoPassageStore attribute) (datamaestro_ir.data.Topics attribute) (datamaestro_ir.data.TrainingTriplets attribute) (datamaestro_ir.data.TrainingTripletsLines attribute) (datamaestro_ir.data.trec.TipsterCollection attribute) (datamaestro_ir.data.trec.TrecAdhocAssessments attribute) (datamaestro_ir.data.trec.TrecAdhocResults attribute) (datamaestro_ir.data.trec.TrecAdhocRun attribute) (datamaestro_ir.data.trec.TrecTopics attribute) (datamaestro_ir.transforms.StoreTrainingTripletDocumentAdapter attribute) (datamaestro_ir.transforms.StoreTrainingTripletTopicAdapter attribute)

IDRecord (class in datamaestro_ir.data.base) ids (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) IDTextRecord (class in datamaestro_ir.data.base) ignore (datamaestro_ir.data.cord19.Documents attribute)

L

ListwiseDistillationSample (class in datamaestro_ir.data.distillation) local_path (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

lookup_key (datamaestro_ir.data.beir.BeirDocumentStore attribute) (datamaestro_ir.data.lotte.LotteDocumentStore attribute)

M

metrics (datamaestro_ir.data.trec.TrecAdhocResults attribute) min_similarity (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

module datamaestro_ir.data.base

N

name (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

names_row (datamaestro_ir.data.cord19.Documents attribute) neg_id (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) negatives (datamaestro_ir.data.PairwiseSample attribute)

O

offsets_path (datamaestro_ir.data.stores.CastSegmentedPassageStore attribute)

P

PairwiseDistillationSample (class in datamaestro_ir.data.distillation) PairwiseSample (class in datamaestro_ir.data) parts (datamaestro_ir.data.trec.TrecTopics attribute) path (datamaestro_ir.data.anserini.Index attribute) (datamaestro_ir.data.beir.BeirAssessments attribute) (datamaestro_ir.data.beir.BeirDocumentStore attribute) (datamaestro_ir.data.beir.BeirParquetAssessments attribute) (datamaestro_ir.data.beir.BeirParquetTopics attribute) (datamaestro_ir.data.beir.BeirTopics attribute) (datamaestro_ir.data.CompressedDocumentStore attribute) (datamaestro_ir.data.conversation.canard.CanardDataset attribute) (datamaestro_ir.data.conversation.cast.CastConversations attribute) (datamaestro_ir.data.conversation.ikat.IkatConversations attribute) (datamaestro_ir.data.conversation.orconvqa.OrConvQADataset attribute) (datamaestro_ir.data.conversation.qrecc.QReCCDataset attribute) (datamaestro_ir.data.cord19.Documents attribute) (datamaestro_ir.data.cord19.Topics attribute) (datamaestro_ir.data.csv.AdhocRunWithText attribute) (datamaestro_ir.data.csv.Documents attribute) (datamaestro_ir.data.csv.Topics attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSVWithAnnotations attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.lotte.LotteAssessments attribute) (datamaestro_ir.data.lotte.LotteDocumentStore attribute) (datamaestro_ir.data.lotte.LotteTopics attribute) (datamaestro_ir.data.stores.CarParagraphStore attribute) (datamaestro_ir.data.stores.KiltDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentStore attribute) (datamaestro_ir.data.stores.MsMarcoDocumentV2Store attribute) (datamaestro_ir.data.stores.MsMarcoPassagesStore attribute) (datamaestro_ir.data.stores.MsMarcoPassageV2Store attribute) (datamaestro_ir.data.stores.TipsterDocumentStore attribute) (datamaestro_ir.data.stores.WapoDocumentStore attribute) (datamaestro_ir.data.stores.WapoPassageStore attribute) (datamaestro_ir.data.TrainingTripletsLines attribute) (datamaestro_ir.data.trec.TipsterCollection attribute) (datamaestro_ir.data.trec.TrecAdhocAssessments attribute) (datamaestro_ir.data.trec.TrecAdhocRun attribute) (datamaestro_ir.data.trec.TrecTopics attribute) (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute)

patterns (datamaestro_ir.data.trec.TipsterCollection attribute) percentile_sample_seed (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) percentile_sample_size (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) PointwiseDistillationSample (class in datamaestro_ir.data.distillation) pos_id (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) positives (datamaestro_ir.data.PairwiseSample attribute) prefixes (datamaestro_ir.data.PrefixedDocumentStore attribute)

Q

qids_path (datamaestro_ir.data.FilteredTopics attribute) qrels (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSVWithAnnotations attribute) query (datamaestro_ir.data.distillation.ListwiseDistillationSample attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSample attribute) (datamaestro_ir.data.distillation.PointwiseDistillationSample attribute)

query_field (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) query_id (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute)

R

relevant_documents (datamaestro_ir.data.conversation.base.RetrievedEntry attribute) repo_id (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

results (datamaestro_ir.data.trec.TrecAdhocResults attribute) RetrievedEntry (class in datamaestro_ir.data.conversation.base) run (datamaestro_ir.data.RerankAdhoc attribute)

S

sample_max (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) sample_rate (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) score (datamaestro_ir.data.base.ScoredDocument attribute) score_field (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) ScoredDocument (class in datamaestro_ir.data.base) seed (datamaestro_ir.data.distillation.RandomInterleavePointwiseDistillationSamples attribute) (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) sep (datamaestro_ir.data.TrainingTripletsLines attribute) separator (datamaestro_ir.data.csv.AdhocRunWithText attribute) (datamaestro_ir.data.csv.Documents attribute) (datamaestro_ir.data.csv.Topics attribute) shuffle_buffer_size (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) shuffle_seed (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) SimpleTextItem (class in datamaestro_ir.data.base)

sources (datamaestro_ir.data.distillation.ConcatPointwiseDistillationSamples attribute) (datamaestro_ir.data.distillation.RandomInterleavePointwiseDistillationSamples attribute) (datamaestro_ir.data.PrefixedDocumentStore attribute) split (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) stemmer (datamaestro_ir.data.anserini.Index attribute) store (datamaestro_ir.transforms.StoreTrainingTripletDocumentAdapter attribute) (datamaestro_ir.transforms.StoreTrainingTripletTopicAdapter attribute) storeContents (datamaestro_ir.data.anserini.Index attribute) storeDocvectors (datamaestro_ir.data.anserini.Index attribute) storePositions (datamaestro_ir.data.anserini.Index attribute) storeRaw (datamaestro_ir.data.anserini.Index attribute) streaming (datamaestro_ir.data.huggingface.HuggingFacePairwiseSampleDataset attribute) (datamaestro_ir.data.huggingface.HuggingFacePointwiseDistillationSamples attribute) (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute)

T

text (datamaestro_ir.data.base.TextItem property) TextItem (class in datamaestro_ir.data.base) TextRecord (class in datamaestro_ir.data.base) tmp_path (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) top_k (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSVWithAnnotations attribute)

top_percentile (datamaestro_ir.data.lighton.EmbeddingsPreTrainingSamples attribute) topic_ids (datamaestro_ir.data.TrainingTripletsLines attribute) (datamaestro_ir.transforms.ShuffledTrainingTripletsLines attribute) topics (datamaestro_ir.data.Adhoc attribute) (datamaestro_ir.data.FilteredTopics attribute) (datamaestro_ir.data.PairwiseSample attribute) (datamaestro_ir.data.RerankAdhoc attribute)

W

with_docid (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSVWithAnnotations attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSamplesTSV attribute)

with_queryid (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSV attribute) (datamaestro_ir.data.distillation.ListwiseDistillationSamplesTSVWithAnnotations attribute) (datamaestro_ir.data.distillation.PairwiseDistillationSamplesTSV attribute)

Y

year (datamaestro_ir.data.conversation.cast.CastConversations attribute)