Baza firm z Azji do CRM: jak usunąć duplikaty i zachować źródła

Dwieście wierszy w arkuszu nie musi oznaczać dwustu firm. Lista może zawierać markę, jej właściciela, dawną nazwę spółki i kilka oddziałów opisanych jak niezależne organizacje. Po imporcie do CRM, czyli systemu obsługi relacji z klientami, te różnice zaczynają wpływać na przypisywanie kontaktów, ocenę rynku i planowanie pracy handlowej.

Przygotowanie bazy polega na rozpoznaniu, co reprezentuje każdy wiersz, oraz zachowaniu dowodów tej decyzji. Nie jest to pełna weryfikacja wiarygodności partnera ani zgoda na prowadzenie kontaktu. Ten poradnik opisuje jakość danych o organizacjach: tożsamość, nazwy, relacje, źródła i reguły scalania. Dzięki nim zespół wie, do kogo odnoszą się zebrane informacje.

Najpierw zdefiniuj jednostkę rekordu

Ustal, czy zbierasz podmioty prawne, marki, zakłady produkcyjne, sklepy czy grupy kapitałowe. Wszystkie mogą być przydatne, ale nie powinny udawać tego samego rodzaju obiektu. Gdy celem jest rozmowa o zakupach grupy, lokalny sklep może być źródłem informacji, lecz niekoniecznie jednostką decyzyjną. W bazie powinno być to widoczne przed przydzieleniem zadania sprzedawcy. Przy bazie koreańskich zakładów sprawdź również rolę kompleksów przemysłowych w mapie odbiorców. Adres centrali, miejsce produkcji i obszar działania partnera mogą opisywać różne elementy tego samego rekordu.

Wpisz definicję do instrukcji projektu. Na przykład: główny rekord opisuje organizację, a jej marki i lokalizacje są powiązanymi elementami. W rozpoznaniu laboratoriów w Chinach powiąż ponadto właściwy podmiot, miejsce wykonania i zakres konkretnego badania; jeden rekord grupy nie wyjaśni wszystkich trzech kwestii. Jeżeli używany CRM nie ma odpowiednich relacji, dodaj kontrolowane pola typu rekordu i identyfikatora organizacji nadrzędnej. Nie wpisuj nazwy grupy do pola miasta tylko dlatego, że jest wolne. Taka oszczędność czasu szybko zamienia się w koszt naprawy.

Podstawowy model uzgodnij przed rozpoczęciem zbierania danych. W briefie badania rynku Azji określ jednostkę, zakres pól i format odbioru. Jeśli wykonawca ma dostarczyć listę marek, a dział sprzedaży oczekuje podmiotów podejmujących decyzje, nawet starannie zebrany materiał nie spełni potrzeb procesu. To różnica zakresu, której nie naprawi samo usunięcie powtórzeń.

Zachowaj nazwę oryginalną i warianty zapisu

Przechowuj nazwę w oryginalnym piśmie oraz osobno nazwę używaną w komunikacji międzynarodowej, jeśli została potwierdzona. Warianty łacińskie mogą różnić się między katalogami. Nie wybieraj automatycznie pierwszego wyniku wyszukiwarki jako jedynej prawidłowej nazwy. Zapisz źródło i oznacz, czy jest to oficjalny zapis, transliteracja czy robocza etykieta analityka.

Normalizacja służy porównywaniu danych, lecz nie powinna niszczyć treści źródłowej. Możesz przygotować pomocnicze pole bez nadmiarowych spacji i różnic wielkości liter. Nie zastępuj nim nazwy wyświetlanej. Skróty, znaki i człony nazwy czasem pomagają rozróżnić podmioty. Reguła usuwająca je z każdego rekordu może zwiększyć liczbę pozornych dopasowań zamiast ją zmniejszyć.

Adres i domenę również zachowuj w wersji źródłowej oraz roboczej. Wspólna domena nie dowodzi jednej spółki: może obsługiwać całą grupę. Podobny adres może wskazywać budynek biurowy z wieloma organizacjami. Do scalania potrzebna jest kombinacja przesłanek, a nie jeden efektowny wynik podobieństwa nazw. Wątpliwe przypadki powinny trafić do ręcznego przeglądu.

Dobieraj identyfikator do kraju i rodzaju podmiotu

Jeśli istnieje właściwy publiczny identyfikator organizacji, zapisz go razem z nazwą systemu i źródłem. W Japonii National Tax Agency publikuje podstawowe informacje obejmujące nazwę, adres i Corporate Number. Wyjaśnia również, że numer przypisuje się organizacji, a nie jej oddziałom. To użyteczna wskazówka przy rozdzielaniu podmiotu i lokalizacji. Opis Corporate Number na stronie NTA.

Nie przenoś tego modelu mechanicznie do Korei lub Chin. Sprawdź, jaki numer występuje w danym źródle i co oznacza. W jednym polu nie mieszaj identyfikatora rejestrowego, kodu giełdowego i wewnętrznego numeru katalogu. Brak znalezionego identyfikatora oznacz jako brak potwierdzenia w sprawdzonym zakresie. Nie wnioskuj z niego automatycznie, że organizacja nie istnieje.

Dla rekordu wymagającego dalszej oceny użyj procedury weryfikacji partnera w Korei, Japonii lub Chinach. Porządek w bazie pomaga rozpocząć taką pracę, ale nie zastępuje sprawdzenia deklarowanej działalności. Rekord może być poprawnie rozpoznany i jednocześnie nie pasować do celu współpracy albo mieć nieaktualny kontakt.

Zbuduj reguły scalania i listę wyjątków

Podziel dopasowania na trzy grupy: potwierdzone, prawdopodobne i nierozstrzygnięte. Pierwsza może wynikać z tego samego właściwego identyfikatora oraz spójnych danych. Druga wymaga dodatkowej kontroli, na przykład przy podobnej nazwie i wspólnym adresie. Trzecia pozostaje rozdzielona do wyjaśnienia. W instrukcji zapisz, kto może zatwierdzić połączenie i na podstawie jakich źródeł.

Przed scaleniem wybierz rekord główny i ustal regułę zachowania pól. Najnowszy plik nie zawsze zawiera najświeższe informacje. Materiał zebrany dziś może cytować dawny katalog. Zachowaj datę treści źródłowej, jeśli jest znana, oraz datę własnego sprawdzenia. Gdy dane są sprzeczne, nie ukrywaj konfliktu pod nadpisaną komórką. Zapisz go jako zadanie do rozstrzygnięcia.

Karta decyzji o połączeniu powinna wskazywać:

• Rekordy wejściowe i ich identyfikatory w pierwotnych plikach.
• Powód uznania ich za ten sam obiekt oraz wspierające źródła.
• Rekord docelowy i sposób przeniesienia kontaktów oraz notatek.
• Dane odrzucone, zachowane jako historyczne albo nadal sporne.
• Osobę zatwierdzającą oraz datę decyzji.
• Możliwość odtworzenia stanu sprzed operacji.

Scenariusz hipotetyczny: trzy listy japońskich integratorów

W tym roboczym przykładzie łączymy katalog targowy, wcześniejszą listę sprzedawcy i wyniki nowego badania. Nie korzystamy z rzeczywistych danych klientów. Jedna firma występuje pod nazwą japońską, angielską i nazwą marki. Osobno pojawiają się jej dwa biura. Proste usunięcie podobnych nazw mogłoby skasować przydatną informację o lokalizacjach.

Analityk ustala podmiot główny, zachowuje warianty nazw i przypina do niego oddziały. Marka otrzymuje odrębny typ rekordu powiązany z organizacją. Dwa niejednoznaczne wpisy pozostają rozdzielone z pytaniem do wyjaśnienia. Handlowiec widzi, które dane są gotowe do pracy, a których nie należy jeszcze interpretować jako nowej firmy na rynku.

Po uporządkowaniu lista jest krótsza, ale to nie oznacza kurczenia się rynku. Zmieniła się jednostka liczenia. Taką różnicę trzeba wyjaśnić osobie czytającej raport rynkowy. W przeciwnym razie poprawa jakości danych może zostać odczytana jako nagły spadek liczby potencjalnych odbiorców albo błąd wykonawcy.

Odbierz bazę na próbie, zanim zaimportujesz całość

Przygotuj zestaw trudnych przypadków: ta sama nazwa różnych firm, jeden podmiot z kilkoma markami, zmieniona domena, oddział oraz rekord bez identyfikatora. Sprawdź, czy instrukcja prowadzi dwóch oceniających do podobnych rozstrzygnięć. Różnice pokażą miejsca wymagające doprecyzowania. Taka próba ma większą wartość niż ocena wyłącznie łatwych, kompletnych wierszy.

Wykonaj mały import próbny i eksport kontrolny. Sprawdź oryginalne znaki, relacje, długość pól, adresy źródeł i zachowanie pustych wartości. Upewnij się, że brak informacji nie został zamieniony w fałszywy tekst albo domyślną kategorię. Porównaj liczbę rekordów według typu, a nie wyłącznie sumę wszystkich wierszy. Zapisz sposób cofnięcia próby, zanim rozszerzysz operację.

Po imporcie przetestuj konkretne zadania użytkownika: odnalezienie firmy po nazwie oryginalnej, sprawdzenie jej marki, wskazanie źródła informacji i rozpoznanie właściciela kontaktu. Jeśli te działania wymagają otwierania trzech prywatnych arkuszy, baza nie jest jeszcze gotowa do samodzielnej pracy. Odbiór powinien mierzyć użyteczność, a nie tylko brak błędu technicznego podczas wczytywania pliku.

Ustal aktualizację i granice wykorzystania danych

Przy każdym polu wymagającym przeglądu wskaż właściciela lub zdarzenie uruchamiające kontrolę. Może to być zwrot wiadomości, zmiana strony organizacji albo przygotowanie ważnej rozmowy. Nie trzeba odświeżać wszystkich rekordów równie często. W monitoringu rynków Azji Wschodniej warto uwzględnić sygnały, które podważają aktualność kluczowych informacji.

Baza do analizy konkurencji wymaga innych pól niż baza do obsługi zapytań. Dla tej pierwszej ważne mogą być produkty i kanały, co wyjaśnia analiza konkurencji w Korei. Dla drugiej liczy się rola kontaktu i aktualny etap sprawy. Nie dodawaj danych osobowych bez konkretnego celu operacyjnego. Jakość rekordu organizacji nie rozstrzyga warunków użycia wszystkich powiązanych kontaktów.

Po uporządkowaniu tożsamości przejdź do wyboru partnerów do rozmowy. To kolejny etap: czysty rekord nie potwierdza jeszcze dopasowania firmy. Oddziel wynik kontroli danych od powodów, dla których organizacja znalazła się na krótkiej liście.

Jak rozliczyć jakość bez fałszywej dokładności

Przed odbiorem ustal osobne miary kompletności, poprawności i rozstrzygnięcia duplikatów. Rekord może mieć wszystkie wymagane pola i nadal opisywać niewłaściwą firmę. Może też mieć poprawnie ustaloną tożsamość, lecz nie posiadać publicznego kontaktu do potrzebnej roli. Jedna łączna ocena „jakości bazy” ukryje te różnice i utrudni wskazanie, co wykonawca powinien poprawić.

Wybierz próbę obejmującą różne źródła i rodzaje rekordów. Zapisz sposób wyboru, aby nie oceniać wyłącznie wpisów przygotowanych przez jedną osobę albo pochodzących z najłatwiejszego katalogu. Dla każdego sprawdź tożsamość, typ obiektu, źródło kluczowego pola i uzasadnienie scalenia. Błąd przypisania informacji do innego podmiotu traktuj osobno od drobnej korekty zapisu nazwy. Mają inny skutek dla pracy zespołu.

Jeżeli wykryjesz problem, sprawdź jego regułę. Pomyłka w jednym wierszu może wynikać z ręcznego przeoczenia, ale może też ujawniać wadliwą normalizację całej listy. W drugim przypadku przegląd powinien objąć wszystkie rekordy przetworzone tą samą metodą. Samo poprawienie wskazanej komórki nie zamyka przyczyny. Wykonawca powinien opisać zakres kontroli oraz potwierdzić, które wpisy ponownie oceniono.

Na końcu zachowaj bilans: liczba rekordów wejściowych, potwierdzonych połączeń, obiektów według rodzaju i spraw nierozstrzygniętych. Nie sumuj tych kategorii bez sprawdzenia, czy są rozłączne. Dołącz także listę świadomie pozostawionych braków. Odbiorca powinien umieć odróżnić ograniczenie dostępnego źródła od niewykonanej części zlecenia. Dzięki temu dalsza praca ma jasny zakres, a nie domyślne oczekiwanie, że każda pusta komórka zostanie kiedyś uzupełniona.

Dobrze odebrana baza pozwala powiedzieć: co policzyliśmy, skąd to wiemy, które rekordy połączyliśmy i co pozostaje niepewne. Te cztery odpowiedzi są ważniejsze niż imponująca liczba wierszy. Jeśli chcesz przygotować bazę do konkretnego procesu, przedstaw to zadanie zespołowi Aeneia Oriens.