🦸 PromptQuality

PromptQuality is the Python client to interact with Galileo’s GenAI Studio: Evaluate.

With this Python client, you can create and manage your LLM Studio prompts, projects, runs, templates, datasets, scorers, metrics and much more.

Here you’ll find an overview and API documentation. The package is available to download on PyPI.

Table of Contents

• promptquality package
  • Subpackages
  • Submodules
  • promptquality.callback module
  • promptquality.chain_run module
  • promptquality.get_metrics module
  • promptquality.get_rows module
  • promptquality.get_template module
  • promptquality.helpers module
  • promptquality.integrations module
  • promptquality.job_progress module
  • promptquality.login module
  • promptquality.registered_scorers module
  • promptquality.run module
  • promptquality.run_sweep module
  • promptquality.set_config module
  • promptquality.sweep module
  • Module contents
• promptquality.constants package
  • Submodules
  • promptquality.constants.config module
  • promptquality.constants.dataset_format module
  • promptquality.constants.integrations module
  • promptquality.constants.job module
  • promptquality.constants.models module
  • promptquality.constants.routes module
  • promptquality.constants.run module
  • promptquality.constants.scorers module
  • Module contents
• promptquality.types package
  • Subpackages
  • Submodules
  • promptquality.types.config module
  • promptquality.types.custom_scorer module
  • promptquality.types.pagination module
  • promptquality.types.registered_scorers module
  • promptquality.types.rows module
  • promptquality.types.run module
  • promptquality.types.settings module
  • promptquality.types.user_submitted_metrics module
  • Module contents
• promptquality.utils package
  • Submodules
  • promptquality.utils.api_client module
  • promptquality.utils.config module
  • promptquality.utils.dataset module
  • promptquality.utils.dependencies module
  • promptquality.utils.logger module
  • promptquality.utils.name module
  • promptquality.utils.request module
  • promptquality.utils.scorer module
  • Module contents
• Galileo Docs

• Index

• Search Page