Passar para o conteúdo principal

Sincronize e gerencie websites

Como treinar Fin em URLs públicas do seu site.

Se você quiser treinar Fin com o conteúdo do site, pode fazer isso sincronizando a URL pública desse site.


Comece agora

Vá para Train > Content e depois selecione Website sync abaixo da seção "Add content".

Agora insira a URL pública do seu site (top-level domain) e clique em Next.

Isso buscará todas as páginas do URL do site que você fornecer e lerá todas as páginas de sub domain.

Dicas:

Revisar páginas para sincronizar

Depois de inserir sua URL, verificaremos se ela é válida e acessível. Em seguida, você precisará revisar as páginas para sincronizar. Todas as subpáginas vinculadas em cada seção selecionada serão sincronizadas. Selecione apenas conteúdo relevante e atualizado.

Dicas:

  • Selecione páginas e seções que contenham conteúdo de suporte, como artigos de ajuda, guias ou FAQS.

  • Evite selecionar páginas de marketing, listagens de produtos ou páginas com layouts complexos.

  • Todas as subpáginas vinculadas dentro das seções selecionadas serão incluídas automaticamente.

  • Você sempre pode atualizar sua seleção mais tarde nas configurações avançadas.

Configurações avançadas [optional]

Selecione o Advanced settings dropdown para configurar URLs adicionais, excluir URLs, seletores CSS para excluir e mais.

URLs adicionais

As estruturas de sites podem variar. Para garantir que sincronizemos seu conteúdo mais relevante, recomendamos que você adicione URLs adicionais para essas subpáginas específicas.

Por exemplo, se você inserir https://myhelpcenter.com/help como URL primária acima, talvez também queira adicionar a URL específica como https://myhelpcenter.com/help/index.html.

URLs para excluir

Para excluir certas páginas das quais você não deseja sincronizar conteúdo, você pode adicionar uma lista de globs de URL.

O que é um glob de URL?

Um glob é uma string de caracteres literais e/ou curinga usada para corresponder a caminhos de arquivos ou URLs. Globbing é o ato de localizar arquivos em um sistema de arquivos usando um ou mais globs. Usar globs de URL também ajuda a obter uma faixa de URLs que são em sua maioria iguais, com apenas uma pequena porção mudando entre as solicitações.

Por exemplo, este glob de URL https://{store,docs}.example.com/** permite que o rastreador acesse todas as URLs que começam com https://store.example.com/ ou https://docs.example.com/ e https://example.com/**/*\?*foo=*

Dica: Não tem certeza se seu padrão glob corresponderá às URLs que você deseja excluir? Você pode usar a DigitalOcean's Glob Tool para testar padrões contra URLs de exemplo antes de aplicá-los. (This is a third-party tool not maintained by Intercom.)

Seletores CSS para excluir

Para excluir certos elementos da página, você pode usar seletores CSS dessas seções ou elementos específicos que deseja excluir.

Isso é útil para pular conteúdo irrelevante da página. O valor deve ser um seletor CSS válido, aceito pela função document.querySelectorAll(). Por padrão, já removemos elementos comuns de navegação, cabeçalhos, rodapés, modais, scripts e imagens inline.

Seletor CSS clicável

Isso permite que elementos DOM identificados pelo seletor CSS sejam clicados durante o processo de sincronização web.

Isso é útil para expandir seções recolhidas, a fim de capturar seu conteúdo de texto. O valor deve ser um seletor CSS válido aceito pela função document.querySelectorAll().

Exemplos são "[aria-expanded=\"false\"]", #expand_section

Condições complexas também podem ser descritas com um seletor CSS. Em CSS, encadear seletores sem espaços cria uma condição semelhante a E, por exemplo .button.blue.small corresponderá apenas a elementos com as três classes.

Usar vírgula (,) como separador funciona como OU, por exemplo .button, .blue, h1 aponta para todos os elementos com a classe button, ou a classe blue, ou cabeçalhos de primeiro nível.

Aguardar carregamento do seletor CSS

Para direcionar conteúdo que pode ter um atraso ao aparecer na página, você pode adicionar um seletor CSS que fará o scraper web aguardar antes de raspar o conteúdo.

Isso é útil para páginas nas quais o reconhecimento padrão de carregamento de conteúdo por rede ociosa falha. Definir esta opção desativa completamente o comportamento padrão, e a página será processada apenas se o elemento especificado por este seletor aparecer.

Nota: O valor deve ser um seletor CSS válido aceito pela função document.querySelectorAll().

XML Sitemap

Habilite o XML Sitemap para uma websync mais robusta em sites que suportam sitemap, permitindo acessar páginas que podem não ser alcançáveis a partir das URLs iniciais.

Se esta opção estiver habilitada, o scraper web procurará Sitemaps nos domínios da URL de origem fornecida e enfileirará URLs correspondentes de maneira semelhante aos links encontrados nas páginas rastreadas. Você também pode referenciar um arquivo sitemap.xml diretamente adicionando-o como outra Start URL, por exemplo https://www.example.com/sitemap.xml.

Região do proxy

Você pode selecionar um proxy para o rastreador usar se precisar que seu site seja rastreado com um proxy definido para uma região ou país específico.

Atualmente, suportamos os seguintes proxies:

  • Rotativo: United States, Germany, France, United Kingdom, Czechia, Hungary

  • Estático:

    • United States - 119.13.211.225, 161.123.167.215, 94.176.49.232, 185.223.56.90, 154.17.143.135

    • Europa - 178.171.116.231, 206.232.77.243, 206.232.90.11, 209.20.175.180, 45.94.247.149

    • Austrália - 154.220.151.84, 173.254.193.121, 160.224.101.213, 160.224.100.176, 212.70.22.41

Tipo de rastreador

Escolha com que profundidade o rastreador renderiza cada página enquanto sincroniza este site.

  • Páginas sincronizadas vazias ou truncadas geralmente significam renderização por JavaScript. Mude para Full e sincronize novamente.

  • Full é mais pesado, então é mais provável que coloque um fonte grande em uma programação reduzida.

  • Você pode alterar isso em uma fonte existente e re-sincronizar para comparar.

Opção

O que faz

Use quando

Rápido

Lê HTML sem executar JavaScript.

O conteúdo está no HTML inicial — a maioria dos blogs, documentos, help center.

Auto (padrão)

Nós escolhemos, e mudamos para Full se o site precisar de JavaScript.

Você não tem certeza. Certo para quase todos.

Full

Carrega cada página em um navegador e executa JavaScript. Mais lento.

O conteúdo só aparece depois que os scripts são executados, aplicativos de página única e páginas pesadas em JavaScript.

Ignorar URLs canônicos

Quando ativado, o raspador da web ignora tags de link canônico (rel="canonical") e trata cada URL como uma página distinta. Esta opção está desativada por padrão.

Isto é útil quando um site aponta muitas páginas para uma URL canônica e conteúdo está sendo perdido como resultado.

Excluindo parâmetros de consulta e respeitando robots.txt

Existem mais duas alternâncias em Configurações avançadas. Ambas estão desativadas por padrão.

Respect robots.txt: faz com que o rastreador obedeça às regras de disallow no robots.txt do seu site. Ative para manter a sincronização consistente com o que você permite que outros rastreadores alcancem. Se o robots.txt proibir caminhos que contêm conteúdo que você deseja no Fin, isso reduzirá o que é sincronizado.

Exclude query parameters: pula qualquer URL com uma string de consulta (?). Ative quando seu site adiciona parâmetros de rastreamento, sessão ou ordenação que produzem muitas páginas quase-duplicadas. Deixe desativado se conteúdo real estiver atrás de uma string de consulta, como /docs?page=intro — essas páginas também seriam puladas.

Públicos-alvo

A etapa Target permite definir um público padrão para todas as páginas sincronizadas e criar regras baseadas em URL para atribuir automaticamente públicos específicos com base em padrões de URL — sem necessidade de marcação manual.

Primeiro decida se o conteúdo desta fonte está habilitado para Fin AI Agent e/ou Copilot.

Em seguida, você pode definir um público Fin padrão para aplicar a todas as páginas sincronizadas desta fonte (se nenhum padrão for definido, o conteúdo padrão será Everyone), ou criar regras para atribuir públicos específicos com base em padrões de URL.

Por exemplo: Se a URL contiver /uk, atribua o público do Reino Unido. As regras são avaliadas durante a sincronização, então Fin e Copilot sempre fornecem o conteúdo certo ao público correto.

Cada regra suporta três comparadores de URL:

  • Começa com — corresponde a URLs que começam com um determinado prefixo.

  • Termina com — corresponde a URLs que terminam com um determinado sufixo.

  • Contém — corresponde a URLs que contêm uma determinada substring.

Nota:

  • Uma visualização ao vivo mostra quantas páginas correspondem a cada regra, ajudando a validar regras antes de salvar. Isso requer um sitemap disponível para sua fonte de sincronização da web. Sem um sitemap, as regras ainda se aplicam, mas você não pode visualizar as correspondências.

  • As regras são nomeadas automaticamente na criação, mas podem ser renomeadas. É imposto um máximo de 10 regras por fonte de sincronização da web.

  • As regras de público são apenas aditivas: elas adicionam públicos ao conteúdo, mas nunca removem atribuições existentes. Remover uma regra não desfaz suas atribuições de público anteriores.

Revisar configurações de sincronização

Por fim, revise suas configurações de sincronização e clique em Sync website para começar a sincronizar o conteúdo do seu site com o Intercom.


Gerenciar fontes do site

Quando a sincronização for concluída, você receberá uma notificação por e-mail e o site aparecerá como uma fonte sincronizada em Train > Content na seção "Content sources".

Se você entrar em uma fonte de site, pode visualizar e gerenciar as páginas individuais que foram sincronizadas a partir da URL pública.

Nota: As fontes do site são somente leitura e não podem ser editadas dentro do seu espaço de trabalho Fin, elas devem ser editadas na fonte.

Configurar configurações

Ao ver uma página do site, você encontrará um painel "Detalhes" à direita que contém:

  • Dados: Veja o tipo de conteúdo, idioma, data de criação e última atualização (quando foi sincronizado pela última vez com a fonte).

  • Fin: Ativar/desativar para Fin Agent e Fin Copilot. Quando ativado, o conteúdo fica disponível para clientes e colegas, respectivamente

    • Agendamento: Ative ou desative o conteúdo para Fin e Copilot em datas definidas.

    • Audience: Garanta que os clientes recebam apenas respostas e vejam conteúdo do Fin Agent que seja relevante para eles.

  • Link: A URL pública desta fonte do site.

  • Reports: Acompanha com que frequência este conteúdo é usado para resolver conversas pelo Fin Agent.

  • Tag: Adicione uma tag para agrupar páginas da web e manter o conteúdo organizado.

Torne-o disponível para Fin ou Copilot

Para tornar uma fonte do site disponível para Fin Agent ou Fin Copilot, vá para Train > Content e clique na fonte do site na seção "Content sources", depois abra a página relevante que você sincronizou.

Do painel "Details" role para baixo até “Fin” e ative o interruptor:

  • Fin Agent - Esta configuração tornará a página disponível para o Fin AI usar ao responder aos clientes (respeitará quaisquer regras de público).

  • Fin Copilot - Esta configuração tornará a página disponível para o Fin Copilot usar ao responder aos colegas de equipe.

Agendar disponibilidade do site

Você pode agendar quando as páginas do site sincronizadas serão ativadas ou desativadas para Fin e Copilot, em uma data, hora e fuso horário futuros. Defina apenas uma data de início ou defina início e fim para criar uma janela de disponibilidade limitada. O agendamento se aplica a páginas individuais ou em massa.

Agendar uma única página

  1. Abra a página. No painel Detalhes à direita, encontre a seção Scheduling dentro do menu Fin.

  2. Clique em Schedule availability.

  3. No modal: selecione o produto de IA (Fin for Service ou Fin Copilot), defina a disponibilidade (Enable ou Disable) e escolha uma data, hora e fuso horário.

  4. Opcionalmente, ative Set end date para adicionar uma data e hora de término — a ação se inverterá automaticamente nesse momento.

  5. Clique em Schedule para confirmar.

Agendar páginas em massa

  1. Selecione várias páginas na lista de conteúdo.

  2. Vá ao menu More actions e selecione Schedule availability.

  3. O mesmo modal de agendamento se aplica a todos os itens selecionados.

Como o agendamento funciona

  • Start date only: A ação de ativar/desativar ocorre no horário agendado e permanece em vigor até que você a altere manualmente.

  • Start + end date: O conteúdo é ativado (ou desativado) no horário de início e depois reverte automaticamente no horário de término.

  • Manual changes don't cancel a pending schedule: Se você alternar a disponibilidade manualmente após definir um agendamento, a transição agendada ainda ocorrerá na hora marcada e substituirá sua alteração manual.

  • One pending schedule per item per agent: Definir um novo agendamento substitui o anterior — sem duplicatas.

  • Deleted content: Se uma página for excluída antes do acionamento do agendamento, o agendamento simplesmente não será aplicado e nenhum erro será exibido.

Tornar disponível para um público específico

Você pode atribuir públicos ao conteúdo sincronizado automaticamente usando regras baseadas em URL durante a criação da sincronização web, ou manualmente por página. Primeiro, você precisará criar e definir o público que deseja segmentar.

Em seguida, vá para Train > Content e clique na fonte do site na seção "Content sources", depois abra a página relevante que você sincronizou.

Do painel "Details" role para baixo até “Fin” e use o menu de público para selecionar um dos seus públicos predefinidos.

Note:

  • O público padrão para URLs públicas é “Everyone”.

  • Fin Agent também respeitará qualquer público que você aplicar a uma URL pública e usará este artigo para responder às perguntas dos clientes somente se corresponder às regras de público.

Adicionar ou editar regras de público em sincronizações existentes

Você não precisa recriar uma sincronização para adicionar segmentação por público. Vá para Train > Content, selecione a fonte, clique no menu de configurações no canto superior direito e selecione Open settings. Navegue até a etapa Target para adicionar ou editar regras baseadas em URL.

Note: Quando regras de público são adicionadas a uma sincronização web existente, elas se aplicam retroativamente a todo o conteúdo já ingerido dessa fonte — não apenas ao conteúdo novo.

Re-sincronizar ou remover um site como fonte

Se desejar re-sincronizar ou remover uma URL pública como fonte, vá para Train > Content, e clique na fonte do site na seção "Content sources", depois abra o menu Settings no canto superior direito.

Aqui, você pode selecionar se deseja Re-sync ou Remove this source.

Tip: As atualizações feitas no seu site de origem não aparecerão no Intercom imediatamente. As re-sincronizações do site ocorrem automaticamente a cada semana, mas você pode acionar uma re-sincronização manual a qualquer momento para mostrar o conteúdo mais recente mais cedo.

Ver histórico de sincronização do site

Você pode ver uma lista de sincronizações passadas para ver quando foram executadas, quais páginas foram encontradas e quaisquer páginas com falha. Vá para Train > Content, e clique na fonte do site na seção "Content sources", depois selecione View sync history.


Cada linha da tabela representa uma execução passada ou ativa, e você pode filtrar as execuções por status (started, success, failed).

Inclui as seguintes informações:

  • Data da sincronização

  • Status

  • Páginas sincronizadas

  • Páginas excluídas

  • Páginas com falha

  • Duração

  • Sincronização iniciada por

Se uma sincronização falhar, você pode passar o cursor sobre o status para ver uma explicação detalhada do motivo.

Sincronizações automáticas pauseram quando Fin isn't using a website

Uma nova fonte sincroniza conforme a programação durante os primeiros 90 dias, independentemente. Depois disso, ela continua sincronizando automaticamente se alguma das condições for verdadeira:

  • Uma página dela foi usada em uma resposta do Fin nos últimos 90 dias.

Caso contrário, as sincronizações agendadas pausam.

Quando pausado: as páginas permanecem no seu Knowledge Hub e continuam disponíveis para Fin e Copilot (nada é excluído). Apenas a nova varredura é interrompida, então edições no seu site não serão captadas.

Para restaurar: O botão Sincronizar agora atualiza o conteúdo uma vez, mas não reinicia a programação. A sincronização automática é retomada sozinha assim que Fin usar a fonte novamente.

Sites que são pesados para rastrear sincronizam com menos frequência

Sites muito grandes e sites que exigem renderização completa de JavaScript custam muito mais para rastrear. Quando uma fonte se mostra pesada em recursos, nós a movemos de semanal para uma programação de a cada 14 dias.

Isso acontece automaticamente, por fonte. Para manter um site grande em uma programação mais rápida, reduza o escopo do rastreamento usando exclusões de URL ou adicione subpáginas específicas em vez de um domain inteiro.


Solução de problemas de sincronização de site

Problemas comuns

Ao importar conteúdo de site para habilitar o Fin, você precisa inserir a URL pública. Isso vai procurar por todas as páginas aninhadas sob essa URL e sincronizá-las para uso do Fin AI Agent.

Se o importador não retornou o número de páginas que você esperava, há algumas razões...

A URL fornecida não é o domínio de nível superior

A sincronização do site funciona indo até a URL que você fornece e procurando por todas as páginas aninhadas sob essa URL. Essas páginas devem ter o mesmo padrão de URL da URL que você forneceu.

Por exemplo, se o domínio de nível superior for https://myhelpcenter.com/home, então todas as páginas que você quiser importar devem incluir o prefixo /home na URL, por exemplo https://myhelpcenter.com/home/article. Se não incluírem, remova o prefixo e use o tronco de URL mais básico, por exemplo https://myhelpcenter.com, e tente importar novamente.

A URL é privada

Se o conteúdo que você quer usar estiver atrás de um login, Fin não poderá acessá-lo ou importá-lo.

Limites de página

A sincronização de site tem dois limites:

  • Domínios: você pode sincronizar até 100 diferentes top-level domains.

  • Páginas por fonte: Fin sincroniza no máximo 4.000 páginas de cada fonte.

Uma sincronização também pode falhar se uma única página contiver uma quantidade muito grande de conteúdo. Você será notificado por e-mail sempre que uma sincronização falhar.

Nota:

  • Se uma fonte tiver mais de 4.000 páginas, divida-a em várias fontes para que cada uma fique dentro do limite:

    • Particione o site em seções menores e adicione cada seção como sua própria fonte.

    • Sincronize caminhos de URL diferentes separadamente, por exemplo, uma fonte por área de produto ou categoria.

  • Isso mantém cada fonte dentro do limite de páginas e reduz o conteúdo processado por sincronização.

Sites com restrição a IPs regionais específicos

A sincronização de site do Fin (usada para adicionar URLs públicas para Fin AI Agent e Copilot) não usa uma string de user-agent dedicada ou personalizada neste momento.

Se seu site tiver proteção anti-rastreamento rígida, você pode usar um proxy estático para allow-list um conjunto fixo de endereços IP e garantir que seu conteúdo seja ingerido. Selecione um proxy estático em Configurações avançadas ao criar ou editar sua sincronização de site.

  • Por endereço IP: Se seu site exigir allow-listing, selecione um proxy estático em Configurações avançadas — isso fornece um conjunto fixo de IPs para adicionar à sua allow-list.

  • Essas requisições são usadas apenas para sincronização de site. Elas não afetam seu tráfego do Messenger ou o rastreamento de usuário final.

Páginas de sites não ingleses ou internacionais não estão sincronizando

Se seu sitemap incluir URLs com caracteres não ASCII (como letras acentuadas ou scripts como chinês ou árabe) algumas dessas páginas podem não sincronizar como esperado. A descoberta de sitemap agora suporta essas URLs, mas elas ainda podem enfrentar problemas em outras partes do processo de sincronização. Tente reenviar a sincronização manualmente para resolver. Se as páginas ainda estiverem faltando, contate o suporte.

Erros de sincronização de site

Ao sincronizar conteúdo do site, você pode ver status diferentes que indicam o que ocorreu durante o processo. Para ver o status da sincronização do site vá para Train > Content e selecione a fonte do site, então use o menu suspenso Status para filtrar por:

  • Sincronizando

  • Ao vivo

  • Falhou

  • Excluído

Veja o que cada um significa e o que você pode fazer a seguir:

Sincronizando

A sincronização da página ainda está em andamento. Uma sincronização inicial pode levar de alguns minutos a mais de uma hora, dependendo da quantidade de conteúdo que você tem.

Ao vivo

A página foi sincronizada com sucesso e pode ser habilitada para Fin e Copilot.

Nota: Uma sincronização bem-sucedida nem sempre significa que conseguimos extrair todo o conteúdo da página. Se você quiser confirmar a cobertura completa, recomendamos visualizar o Fin com as respostas que você espera que ele encontre nessa página.

Excluído

Estas páginas não são sincronizadas intencionalmente porque você as excluiu nas Advanced sync settings. Elas não podem ser reenviadas ou incluídas, a menos que especificado de outra forma.

Falhou

Esses erros significam que a sincronização não foi concluída e podem exigir alterações da sua parte antes de tentar novamente:

1. Erro desconhecido

  • Mensagem: “Esta página não pôde ser acessada. Pode estar lenta ou bloqueada. Tente sincronizar novamente ou contate o suporte se falhar.”

  • O que significa: Algo nos impediu de acessar a página, mas a causa não está clara.

2. Sessão bloqueada / Limitação de taxa

  • Mensagem: “O site está nos impedindo de acessar seu conteúdo. Verifique se está sendo bloqueado por uma configuração anti-crawler ou firewall. Verifique a configuração do seu site e tente sincronizar novamente. Se o problema persistir, contate o suporte.”

  • O que significa: Seu site está bloqueando ou limitando ativamente nosso crawler.

3. Erros de rede, timeout ou similares

  • Mensagem: “Esta página não pôde ser acessada. Pode estar lenta para carregar ou bloqueada por configurações anti-crawler ou um firewall. Verifique a configuração do seu site e tente sincronizar novamente. Se o problema persistir, contate o suporte.

  • O que significa: A página não carregou a tempo ou não pôde ser alcançada devido a problemas de rede ou bloqueio.

4. Duplicada

  • Mensagem: “Esta página tem o mesmo conteúdo de outra que já está sincronizada. Apenas uma versão será incluída.”

  • O que significa: Detectamos conteúdo idêntico em outro lugar, então apenas uma cópia é mantida.

5. Filtragem por palavras-chave

  • Mensagem: “Páginas com palavras-chave como category, collection ou tag na URL são excluídas por padrão, pois geralmente não contêm conteúdo único. Se esta página deve ser incluída, contate o suporte.”

  • O que significa: Essas URLs frequentemente representam listas, não páginas de conteúdo independentes.

6. Código de status 400

  • Mensagem: “O conteúdo da página não pode ser encontrado. Verifique se a URL é válida e se a página carrega sem problemas.

  • O que significa: A URL pode estar quebrada ou retornando um erro no seu site.

7. URL bloqueada

  • Mensagem: “Este domain está bloqueado para sincronização. Se você precisar disso, contate o suporte.”

  • O que significa: The domain is intentionally excluded from syncing.


​Você pode tentar novamente a sincronização de uma página com falha pairando sobre a página, selecione o menu de três pontos e depois selecione Resync.

Respondeu à sua pergunta?