AssemblyAI 推出增强版 PII 涂抹和实体检测功能

realtime news Jul 26, 2024 06:17

AssemblyAI 推出了支持 47 种语言的高级 PII 涂抹功能，并为其实体检测模型增加了 16 种新实体类型，确保 99% 的准确性。

AssemblyAI 宣布对其 PII 涂抹和实体检测功能进行了重大升级，旨在增强数据安全性并从音频转录中提取关键见解。根据 AssemblyAI 的说法，最新更新包括对 47 种语言的 PII 文本涂抹支持，并为其实体检测模型增加了 16 种新实体类型，总数达到 44 种。

增强的 PII 涂抹能力

更新后的 PII 文本涂抹功能现在支持 47 种语言，确保在不同地区全面保护个人身份信息 (PII)。此升级允许用户识别和删除转录中的敏感数据，如地址、电话号码和信用卡信息。此外，用户可以生成删除 PII 的转录或使用该工具在音频文件中“屏蔽”敏感信息。

AssemblyAI 提供了如何使用 API 进行 PII 涂抹的示例：

import assemblyai as aai

aai.settings.api_key = "YOUR API KEY"

audio_url = "https://github.com/AssemblyAI-Community/audio-examples/raw/main/20230607_me_canadian_wildfires.mp3"

config = aai.TranscriptionConfig(speaker_labels=True).set_redact_pii(
  policies=[
    aai.PIIRedactionPolicy.person_name,
    aai.PIIRedactionPolicy.organization,
    aai.PIIRedactionPolicy.occupation,
  ],
  substitution=aai.PIISubstitutionPolicy.hash,
)

transcript = aai.Transcriber().transcribe(audio_url, config)

for utterance in transcript.utterances:
  print(f"Speaker {utterance.speaker}: {utterance.text}")
  
print(transcript.text)

用户可以参考 AssemblyAI 的文档，了解更多详细示例和对更新的深入探讨。

扩展的实体检测

实体检测模型已经升级，增加了 16 种新实体类型，可以在转录中自动识别和分类关键信息。这使支持的实体类型达到总数 44 种，包括姓名、组织、地址等。模型在主要语言中确保 99% 的准确性，使其成为从音频数据中提取有价值见解的强大工具。

API 实体检测使用示例：

import assemblyai as aai

aai.settings.api_key = "YOUR API KEY"

audio_url = "https://github.com/AssemblyAI-Community/audio-examples/raw/main/20230607_me_canadian_wildfires.mp3"

config = aai.TranscriptionConfig(entity_detection=True)

transcript = aai.Transcriber().transcribe(audio_url, config)

for entity in transcript.entities:
  print(entity.text)
  print(entity.entity_type)
  print(f"Timestamp: {entity.start} - {entity.end}\n")

其他资源

AssemblyAI 还分享了几篇新博客文章和教程，帮助用户充分利用其产品。主题包括使用 Claude 3.5 Sonnet 处理音频数据，了解微软的 Florence-2 图像模型，以及在 JavaScript 中使用 AssemblyAI 和 DeepL 创建实时语言翻译服务。

有关这些更新的更多信息和探索其他资源，请访问 AssemblyAI 的官方博客。

Image source: Shutterstock

• ai
• pii 涂抹
• 实体检测