Отворени фирмени данни в Съединените щати: Официални източници, API и права за повторна употреба
Съединените щати имат сериозна екосистема от официални данни за компаниите, но тя не бива да се свежда до прост списък с компании. Правилният начин за оценка на Съединените щати е да се започне с официалния регистър, след което да се добавят слоевете отворени данни, статистика, обществени поръчки, интелектуална собственост и регулаторни органи.
Най-силният път са държавните бизнес регистри за правно съществуване на частни компании, SEC EDGAR за докладващи компании, SAM.gov и USAspending за федерални изпълнители и получатели на награди, данни за освободени от IRS организации, данни за търговски марки на USPTO, скрининг на санкции на OFAC и FinCEN BOI като ограничена непублична граница за съответствие. Това прави Съединените щати децентрализирана карта на федералните и щатските източници, а не единен национален регистър на компаниите, но не премахва обичайните проверки за повторна употреба: термини от набора от данни, атрибуция, език за липса на одобрение, поверителност, граници на маркетинговото право и свежест на източника.
Това ръководство картографира основните официални източници за фирмени данни в Съединените щати, обяснява какво може и какво не може да прави всеки източник и показва къде нормализираният набор от данни в стил CompaniesData добавя стойност.
По-дълбокият въпрос не е дали съществува източник. Полезният въпрос е на кой източник може да се разчита за самоличност, кой доказва събития или подадени документи, кой е използваем в голям мащаб, кой е само ръчна услуга и кои полета стават правно чувствителни, след като данните бъдат използвани повторно с търговска цел.
Бърз отговор
Съединените щати могат да бъдат публикувани само като децентрализирано ръководство от официален източник. Федералните API и масивите от данни в групов стил са надеждни за компании, докладващи пред SEC, федерални изпълнители, получатели на федерални награди, организации, освободени от данъци, търговски марки и проверка за санкции, но регистрацията на частни компании е на щатско ниво и няма пълен публичен федерален фирмен регистър.
За практическа работа най-полезният изходен код е: SEC EDGAR APIs, data.sec.gov, SEC Developer Resources, SAM.gov Entity Information, SAM.gov Entity Management API, SAM Entity/Exclusions Extract APIs.
Безопасният редакционен отговор е следният: Съединените щати разполагат със солидни публични и официални източници на бизнес данни, но публичните данни не са автоматично достъпни за групово изтегляне, готови за маркетинг или без ограничения за лични данни.
Един сериозен набор от данни в Съединените щати обикновено се нуждае от поне четири слоя: правният регистър за идентичност на юридическите лица, официални публикации или документи за събития на промяна, обществените поръчки/регулаторните органи/интелектуалната собственост/статистическите източници за обогатяване и отделен слой за съответствие за поверителност, използване на данни за контакт, потискане и законова работа.
Ключови храни за вкъщи
- Най-добра отправна точка: държавни бизнес регистри за правно съществуване на частни компании, SEC EDGAR за докладващи компании, SAM.gov и USAspending за федерални изпълнители и получатели на награди, данни за освободени от IRS организации, данни за търговски марки на USPTO, проверка за санкции на OFAC и FinCEN BOI като ограничена непублична граница за съответствие.
- Стек от основни източници: SEC EDGAR API, data.sec.gov, SEC ресурси за разработчици, SAM.gov информация за обекти, SAM.gov API за управление на обекти, SAM обекти/изключения API за извличане.
- Правило за повторна употреба: Публичната видимост не е същото като групова повторна употреба, разрешение за препродажба или разрешение за маркетингов контакт.
- Стойност за купувача: Полезният набор от данни е нормализираната, дедуплицирана и проверима от източника версия, а не суров списък с връзки към портали.
- Търговско разделяне: Официалните фирмени записи, обогатените фирмени профили и данните за бизнес контакти трябва да останат отделни слоеве с отделни бележки за съответствие.
Редакционна методология
Тази статия използва метод, който определя първо официалния източник. Източниците са включени, когато помагат за проверка на правното съществуване, публични документи, дейност по обществени поръчки, контекст на данъкоплатеца или идентификатора, собственост на интелектуална собственост, регулиран статус, статистика или контекст на спазване на законовите изисквания. Търговските доставчици и продуктите с данни за контакт не се използват като източник за официални права за повторна употреба.
- Предпочитайте националния регистър, фирмения регистър, вестника или официалния орган за регистрация на фирми пред който и да е вторичен източник.
- Класифицирайте достъпа като търсене, API, групово изтегляне, платено извличане, абонамент, работен процес с документи, каталог с данни или неясен/ръчен достъп.
- Разделете данните за юридическите лица от статистиката за установяване, доставчиците на обществени поръчки, оповестяванията за дружества, регистрирани на борсата, данъчните идентификатори и личните данни за контакт.
- Третирайте действителните собственици, служителите, адресите, подписите, известията за несъстоятелност и записите на едноличните търговци като чувствителни към поверителността, освен ако източникът и законът ясно не подкрепят повторната употреба.
- Задържайте или пропускайте нестабилни връзки към източници, когато проверката на качеството на живо показва поведение 403, 429, 5xx, DNS, TLS или изчакване на времето, което би създало шум от прекъсната връзка.
Какво се счита за фирмени данни в Съединените щати?
| слой | Примери | Типична бизнес употреба |
|---|---|---|
| Идентичност на регистъра | Юридическо наименование, регистрационен номер, статут, правна форма, регистриран офис | Съпоставяне на обекти, дедупликация и KYB |
| Регистриране на събития | Учредяване, промени, подаване на документи, извлечения, публикации | Корпоративен график и правна проследимост |
| Слой с отворени данни/API | Официални набори от данни, API, CSV/JSON/XML услуги, където са налични | Автоматизирано приемане и наблюдение |
| Статистика | Демография на бизнеса, брой предприятия, общи данни за сектори/географски данни | Определяне на размера на пазара и бенчмаркове за качество на данните |
| доставяне | Търгове, възлагане, доставчици и възлагащи органи | Разузнаване за продажби в публичния сектор |
| Интелектуална собственост и регулаторни органи | Търговски марки, патенти, контролирани лица и решения | Обогатяване и скрининг за съответствие |
| Данни за контакт | Имейл, телефон, контактни роли и сегментиране | Маркетинг само с отделно правно основание |
В Съединените щати тези слоеве не трябва да се обединяват в една недиференцирана база данни. Резултат от регистър може да докаже законно съществуване, обявление за обществена поръчка може да докаже дейност в публичния сектор, запис за интелектуална собственост може да докаже собственост върху марка или изобретение, а списък на регулаторни органи може да докаже надзор. Това са различни факти с различни цикли на актуализиране, идентификатори и граници за повторна употреба.
Права за повторна употреба и съответствие
В различните юрисдикции политиките за информация от публичния сектор и отворени данни могат да подкрепят повторното използване на данни от публичния сектор, а правилата за наборите от данни с висока стойност все повече третират данните за компаниите и собствеността на компаниите като важна обществена информация. На практика действителната позиция на Съединените щати по отношение на повторното използване все още зависи от всеки източник, крайна точка, лиценз и метод за достъп.
- Цитирайте официални източници и запазете датите на актуализация, когато източникът ги предоставя.
- Не внушавайте, че производен набор от данни е одобрен от регистъра или публичния орган.
- Не смесвайте данни от публичния регистър с разрешение за маркетингови контакти.
- Проверете дали API, групово изтегляне, платено извличане и достъп до уеб търсене имат различни термини.
- Третирайте данните на служителите, бенефициентните собственици и физическите лица като чувствителни към GDPR, когато е приложимо.
публикува се само като децентрализирана карта от официален източник; не като национален регистър тип Companies House
Риск, свързан с покритието, достъпа и актуализирането
Най-често срещаната грешка в работата с фирмени данни в Съединените щати е да се обърква видимостта с пълнотата. Публичен екран за търсене може да бъде авторитетен за търсене на един обект, без да е подходящ за групово приемане. Набор от данни за изтегляне може да бъде използваем повторно за определен моментен момент, като същевременно изключва документи, директори, неактивни обекти или исторически промени.
- Обхват: посочете дали източникът обхваща дружества, фирмени наименования, клонове, организации с нестопанска цел, еднолични търговци, регистрирани емитенти, регулирани организации или само подмножество от сектор.
- Актуалност: запазване на датата на актуализация на изходния код и избягване на смесване на резултати от портала на живо със стари изтеглени файлове без етикети за версии.
- Идентификатори: регистрационни номера на карта, данъчни идентификатори, идентификатори на доставчици на обществени поръчки, LEI записи и борсови тикери като отделни ключове до проверка.
- Език и формати: внимателно нормализирайте имената на местните езици, правните форми, транслитерацията, ударенията, съкращенията и форматите на адресите.
- Оперативен достъп: документирайте дали работният процес е публично търсене, API, групов файл, платено извличане, услуга само за вход, PDF, CKAN/OData/SPARQL или ръчна заявка.
Контролен списък за повторна употреба за Съединените щати
| слой | Полезно за | Внимание при повторна употреба в Съединените щати |
|---|---|---|
| Публично търсене | Подходящо за проверка и ръчно осигуряване на качеството | Може да забранява изстъргване, групово извличане или автоматизирано повторно използване |
| API или набор от данни | Най-добрият път за многократно поглъщане | Условията за крайни точки, атрибуцията и ограниченията за честота все още се прилагат |
| Платено извлечение или удостоверение | Полезно за правна сигурност | Обикновено на договорно ниво, на ниво документ и не е отворен набор от данни |
| Данни за обществените поръчки и регулаторните органи | Силен слой за обогатяване и мониторинг | Покритие на подмножество; не е универсален фирмен регистър |
| Полета за служител, собственик или адрес | Полезно за KYB и съответствие, където е законово. | Съгласие за маркетинг, съобразено с поверителността, и никога автоматично |
| Служебни имейли и телефони | Слой за търговска работа с обществеността | Изисква отделно правно основание, логика за потискане и управление на данните за контакт |
Модел на регистрация с 50 щата: Защо Съединените щати са различни
Съединените щати нямат единен публичен национален фирмен регистър за частни компании. Дружества с ограничена отговорност (LLC), корпорации и много партньорства се формират или квалифицират чрез щатските и териториалните власти. Следователно, полезен набор от данни за американски компании е проект за свързване на регистъра, а не изтегляне от един източник.
- Състояние на формиране: съхранява щата, в който е учредено, организирано или регистрирано юридическото лице.
- Чуждестранна квалификация: Една компания може да бъде създадена в една държава и регистрирана да извършва дейност в други; тези записи не трябва да се премахват дубликати безразборно.
- Регистриран агент и адрес за обслужване: полезно за правни услуги и съпоставяне, но не е сигнал за контакт с търговски представител.
- Достъп до документи: Някои щати предлагат безплатни PDF файлове, други таксуват за сертифицирани документи или групови поръчки.
- Групов/API достъп: Наличността, таксите, условията и обхватът на полето варират в зависимост от щата.
- Актуализиране на каданса: Годишните отчети, измененията, разпусканията и възстановяването на длъжности са специфични за щата потоци от събития.
Практическият модел CompaniesData трябва да третира всеки държавен регистър като авторитетен шард. Федерални слоеве като SEC, SAM.gov, USAspending, IRS TEOS, USPTO, OFAC и FinCEN добавят полезни факти само когато субектът се появява в тази федерална популация.
Федерални слоеве: Полезни, силни, но не универсални
- СЕК ЕДГАР: подадени документи от публични дружества и отчитащи се дружества, факти в XBRL и метаданни за подаване.
- SAM.gov: организации, регистрирани за федерални поръчки и свързани изключения/работни процеси за управление на организации.
- Разходи в САЩ: договори, грантове, заеми и други данни за получателите на федерални награди.
- IRS TEOS: контекст за търсене и изтегляне на организации, освободени от данъци.
- USPTO: търговски марки и други сигнали за собственост/обогатяване на интелектуална собственост.
- ОФАК: проверка на лица с ограничен достъп и санкции, а не основни данни за компанията.
- FinCEN BOI: Докладването на бенефициентната собственост е ограничен режим на съответствие, а не публичен източник на отворени данни.
Разрешени и блокирани искове за статията в САЩ
Приети искове
- Съединените щати имат силни федерални отворени/API слоеве за подаване на документи на публични компании, федерални изпълнители, федерални награди, организации, освободени от данъци, интелектуална собственост и санкции/съответствие.
- Регистрацията на частни компании е предимно на щатско ниво; няма единен пълен федерален фирмен регистър, еквивалентен на Companies House.
- SEC EDGAR, SAM.gov и USAspending са официални, полезни и API-позитивни, но обхващат специфични групи от организации.
Блокирани искове
- Не претендирайте за пълна безплатна официална база данни за всички американски фирми.
- Не третирайте примерите за SEC, SAM.gov, USAspending или щатски регистри като национален регистър на частни компании.
- Не внушавайте, че информацията за бенефициентните собственици на FinCEN е публична; достъпът до информацията от BOI е ограничен.
Пакет с ресурси
Използвайте този пакет с ресурси като работна карта за проверка, планиране на приемането и преглед на риска от източника. Малките лога на източниците са само декоративни знаци за достоверност; авторитетът все още идва от официалния URL адрес, собственика, модела на достъп и бележката за повторна употреба.
Регистър и правна идентичност
Търсене на бизнес в Калифорния
Използвайте: Пример за състояние с голям обем за проверка на обект.
Гледайте: Само за Калифорния; термините и областите се различават в различните щати.
API, групов достъп и достъп до отворени данни
API за управление на обекти на SAM.gov
Използвайте: Търсене на програмни обекти за регистрирани в SAM.gov обекти.
Гледайте: Достъпът и полетата варират в зависимост от оторизацията и чувствителността на данните.Data.gov
Използвайте: Слой за откриване за федерални, щатски, местни и племенни набори от данни.
Гледайте: Каталог, а не органът за всеки държавен регистър.Търсене на юридически лица в Делауеър
Използвайте: Важен пример за състояние на учредяване.
Гледайте: Търсенето е специфично за щата и не е пълноценен национален API.
Обществени поръчки и публични разходи
Информация за обекта на SAM.gov
Използвайте: Контекст на федерални изпълнители, регистрации на юридически лица и изключения.
Гледайте: Федерална популация от обществени поръчки, а не цялостна бизнес вселена.API за разходи в САЩ
Използвайте: Получатели на награди, договори, грантове и обогатяване от федерални разходи.
Гледайте: Слой на получателя на наградата, не всички американски компании.
Интелектуална собственост, марки и нематериални активи
Търсене на търговски марки в USPTO
Използвайте: Собственик на търговска марка и обогатяване на марката.
Гледайте: IP слой, а не основни данни на компанията.
Регулатори и съответствие
SEC EDGAR API
Използвайте: Публични подадени документи, фирмени данни, XBRL и обогатяване на информация за листнати/отчитащи се компании.
Гледайте: Само компании, които докладват, не всички американски фирми.data.sec.gov
Използвайте: Машинно четими данни за компании и подадени данни към SEC.
Гледайте: Изисква заглавки с справедлив достъп и умерени нива на заявки.Ресурси за разработчици на SEC
Използвайте: Технически и законосъобразен контекст за потребление на данни от SEC.
Гледайте: Слой с политики/насоки, а не фирмен регистър.API за извличане на SAM обекти/изключения
Използвайте: Извадки от публични обекти и изключения за работни потоци за съответствие.
Гледайте: Чувствителните полета и непубличните извадки са ограничени.Търсене на санкции от OFAC
Използвайте: Проверка на лица с ограничен достъп и контекст на съответствие.
Гледайте: Списък за съответствие, а не фирмен регистър.FinCEN BOI
Използвайте: Предупреждение за съответствие за границите на бенефициентната собственост.
Гледайте: Информацията за бенефициентните собственици не е публична база данни за отворени компании.
Допълнителни източници за проверка
Търсене на освободени от данъци организации от IRS
Използвайте: Контекст на нестопанските организации и организациите с освободени от данъци организации.
Гледайте: Само организации, освободени от данъци.
Дълбоки анализи източник по източник
1.
SEC EDGAR API
Собственик: официален регулатор. Достъп: https://www.sec.gov/edgar/sec-api-documentation.
- Какво предоставя: Публични подадени документи, фирмени данни, XBRL и обогатяване на информация за листнати/отчитащи се компании.
- Стойност за повторна употреба: условия за справедлив достъп и уебсайт на SEC
- Основно ограничение: Докладващите са само компании, не всички американски фирми.
SEC EDGAR APIs е официален регулаторен източник за Съединените щати. Основната му практическа стойност е публичните подавания, фирмените данни, XBRL и обогатяването на информация за листвани/отчитащи се компании. Достъпът е чрез https://www.sec.gov/edgar/sec-api-documentation, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов поток от данни.
За повторна употреба работното правило е: SEC, условия за справедлив достъп и уебсайтове. Основното ограничение е само за докладващи компании, а не за всички американски фирми. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между факти за юридически лица, сигнали за съответствие и всяко по-късно маркетингово/контактно обогатяване.
2.
data.sec.gov
Собственик: официален регулатор. Достъп: https://data.sec.gov/.
- Какво предоставя: Машинно четими данни за компаниите и подадени данни към SEC.
- Стойност на повторното използване: насоки на SEC за справедлив достъп и процент на заявките
- Основно ограничение: Изисква заглавки с справедлив достъп и умерени нива на заявки.
data.sec.gov е официален източник на регулаторни данни за Съединените щати. Основната му практическа стойност са машинно четими факти и данни за компании, подадени до SEC. Достъпът е чрез https://data.sec.gov/, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен масов поток от данни.
За повторна употреба работното правило е: SEC, насоки за справедлив достъп и честота на заявките. Основното ограничение е, че изисква заглавки за справедлив достъп и умерени честоти на заявките. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между факти за юридическото лице, сигнали за съответствие и всяко по-късно маркетингово/контактно обогатяване.
3.
Ресурси за разработчици на SEC
Собственик: официален регулатор. Достъп: https://www.sec.gov/about/developer-resources.
- Какво предоставя: Технически и законосъобразен контекст за потребление на данни от SEC.
- Стойност на повторното използване: условия на SEC и политика за справедлив достъп
- Основно ограничение: Слой с политики/насоки, а не фирмен регистър.
SEC Developer Resources е официален източник на регулаторни данни за Съединените щати. Основната му практическа стойност е техническият и законосъобразен контекст за потребление на данни от SEC. Достъпът е чрез https://www.sec.gov/about/developer-resources, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен масов поток от данни.
За повторна употреба работното правило е: условия на SEC и политика за справедлив достъп. Основното ограничение е слоят с политики/насоки, а не фирмен регистър. В нормализиран работен процес с фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно обогатяване с маркетинг/контакт.
4.
Информация за обекта на SAM.gov
Собственик: официален федерален източник за обществени поръчки/ентитет. Достъп: https://sam.gov/content/entity-information.
- Какво предоставя: Федерални изпълнители, регистрации на юридически лица и контекст на изключения.
- Стойност на повторна употреба: условия на SAM.gov и граници на FOIA/CUI
- Основно ограничение: Федерална популация от обществени поръчки, а не пълна бизнес вселена.
SAM.gov Entity Information е официален федерален източник на информация за обществени поръчки/организации за Съединените щати. Основната му практическа стойност е в контекста на федералните изпълнители, регистрациите на организации и изключенията. Достъпът е чрез https://sam.gov/content/entity-information, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов поток от данни.
За повторна употреба работното правило е: условия на SAM.gov и граници на FOIA/CUI. Основното ограничение е популацията от федерални обществени поръчки, а не пълна бизнес вселена. В нормализиран работен процес с фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за правния субект, сигналите за съответствие и всяко по-късно маркетингово/контактно обогатяване.
5.
API за управление на обекти на SAM.gov
Собственик: официален GSA API. Достъп: https://open.gsa.gov/api/entity-api/.
- Какво предоставя: Програмно търсене на регистрирани в SAM.gov обекти.
- Стойност на повторното използване: Условия на GSA/SAM API и ограничения на CUI
- Основно ограничение: Достъпът и полетата варират в зависимост от оторизацията и чувствителността на данните.
SAM.gov Entity Management API е официален GSA API източник за Съединените щати. Основната му практическа стойност е програмното търсене на регистрирани в SAM.gov обекти. Достъпът е чрез https://open.gsa.gov/api/entity-api/, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов фийд.
За повторна употреба работното правило е: GSA/SAM API термини и CUI ограничения. Основното ограничение е достъпът и полетата варират в зависимост от оторизацията и чувствителността на данните. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно маркетингово/контактно обогатяване.
6.
API за извличане на SAM обекти/изключения
Собственик: официален GSA API. Достъп: https://open.gsa.gov/api/sam-entity-extracts-api/.
- Какво предоставя: Извлечения от публични обекти и изключения за работни потоци за съответствие.
- Стойност за повторна употреба: FOIA/публичен извадък и граници на CUI
- Основно ограничение: Чувствителните полета и непубличните извадки са ограничени.
SAM Entity/Exclusions Extract APIs е официален GSA API източник за Съединените щати. Основната му практическа стойност е извличането на публични обекти и изключения за работни процеси за съответствие. Достъпът е чрез https://open.gsa.gov/api/sam-entity-extracts-api/, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов фийд.
За повторна употреба работното правило е: граници на FOIA/публични извлечения и CUI. Основното ограничение е, че чувствителните полета и непубличните извлечения са ограничени. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно маркетингово/контактно обогатяване.
7.
API за разходи в САЩ
Собственик: официални федерални отворени данни. Достъп: https://api.usaspending.gov/docs/.
- Какво дава: Получатели на награди, договори, безвъзмездни средства и обогатяване на федералните разходи.
- Стойност на повторна употреба: термини за разходи в САЩ/публични федерални данни
- Основно ограничение: Слой на получателя на наградата, не всички американски компании.
USAspending API е официален федерален източник на отворени данни за Съединените щати. Основната му практическа стойност е информация за получателите на награди, договорите, безвъзмездните средства и обогатяването на федералните разходи. Достъпът е чрез https://api.usaspending.gov/docs/, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов поток от данни.
За повторна употреба работното правило е: термини за разходи в САЩ/публични федерални данни. Основното ограничение е слоят получател на награда, а не всички компании от САЩ. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно обогатяване с маркетинг/контакт.
8.
Data.gov
Собственик: официални отворени данни. Достъп: https://catalog.data.gov/.
- Какво предоставя: Слой за откриване на федерални, щатски, местни и племенни набори от данни.
- Стойност на повторното използване: специфични за набора от данни термини на правителството на САЩ
- Основно ограничение: Каталог, а не органът за всеки държавен регистър.
Data.gov е официален източник на отворени данни за Съединените щати. Основната му практическа стойност е Discovery Layer за федерални, щатски, местни и племенни набори от данни. Достъпът е чрез https://catalog.data.gov/, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов поток от данни.
За повторна употреба работното правило е: специфични за набора от данни термини на правителството на САЩ. Основното ограничение е каталогът, а не органът за всеки щатски регистър. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно обогатяване с маркетинг/контакт.
9.
Търсене на бизнес в Калифорния
Собственик: официален държавен регистър. Достъп: https://bizfileonline.sos.ca.gov/search/business.
- Какво дава: Пример за състояние с голям обем за проверка на обект.
- Стойност на повторната употреба: термини на държавния секретар на Калифорния
- Основно ограничение: само за Калифорния; термините и полетата се различават в различните щати.
California Business Search е официален източник на щатски регистър за Съединените щати. Основната му практическа стойност е пример за голям обем данни за щати за проверка на юридически лица. Достъпът е чрез https://bizfileonline.sos.ca.gov/search/business, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов поток данни.
За повторна употреба работното правило е: Термини на държавния секретар на Калифорния. Основното ограничение е само за Калифорния; термините и полетата се различават в различните щати. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно обогатяване с маркетинг/контакт.
10.
Търсене на юридически лица в Делауеър
Собственик: официален държавен регистър. Достъп: https://icis.corp.delaware.gov/Ecorp/EntitySearch/NameSearch.aspx.
- Какво дава: Важен пример за състояние на учредяване.
- Стойност за повторна употреба: Условия на Корпоративния отдел на Делауеър
- Основно ограничение: Търсенето е специфично за щата и не е пълноценен национален API.
Търсенето на юридически лица в Делауеър е официален източник на данни от държавния регистър за Съединените щати. Основната му практическа стойност е важен пример за щат, в който е учредено дружеството. Достъпът е чрез https://icis.corp.delaware.gov/Ecorp/EntitySearch/NameSearch.aspx, така че източникът трябва да се третира съгласно този модел на достъп, а не да се приема за неограничен групов поток от данни.
За повторна употреба работното правило е: Термини на Делауеърския отдел за корпорации. Основното ограничение е, че търсенето е специфично за щата и не е пълноценен национален API. В нормализиран работен процес за фирмени данни този източник трябва да бъде заснет с произход, дата на извличане, предупреждения на ниво поле и ясно разграничение между фактите за юридическото лице, сигналите за съответствие и всяко по-късно маркетингово/контактно обогатяване.
Практични опции
Официален маршрут за отворени данни или API
Започнете с юрисдикцията на учредяване или квалификация за частни компании, след което добавете федерални слоеве само когато субектът принадлежи към тази популация: SEC EDGAR за докладващи компании, SAM.gov за регистрация на федерални поръчки, USAspending за награди, IRS TEOS за освободени организации, USPTO за търговски марки и OFAC за проверка на ограничени страни.
За производствена употреба, третирайте този маршрут като план за приемане, а не като еднократно изтегляне. Започнете с официалния регистър или каталог с данни, запазете снимки на суровите източници, запишете условията за достъп и след това добавете източници за обогатяване един по един с произход на ниво поле.
Ръчна проверка и маршрутизиране на документа
Някои държави разкриват важни факти за компанията чрез сертификати, PDF файлове, известия в вестник, платени извлечения или услуги, базирани на вход. Тези източници могат да бъдат ценни, но трябва да бъдат документирани като контролирани работни процеси. Не ги описвайте като отворени API или масиви от данни, освен ако органът не публикува ясно този модел на достъп.
Маршрут на данни за контакт и маркетингов списък
За търговски цели, данните за идентичност на компанията са само първият слой. Служебните имейли, телефонните номера, ролите на контактите, логиката за потискане и сегментирането изискват отделен съвместим процес за данни за контакт. Този слой трябва да бъде документиран отделно от повторната употреба в официалния регистър.
Частни отчети и рискови продукти
Частните доставчици на фирмени отчети могат да бъдат полезни за ръчна проверка в Съединените щати, но редакционният фокус тук не е върху директория на конкурентите. Стратегическата стойност е разбирането кои официални източници съществуват и къде е необходима нормализация.
Ако потребителят се нуждае от фирмени записи, готови за CRM, практичният път е да комбинира официалния произход с обогатяване, премахване на дубликати, проверки на качеството и контрол на законосъобразната доставка. Това е различно от закупуването на общ списък с потенциални клиенти: слоят с официалния източник обяснява какво може да бъде проверено, докато слоят с търговски набор от данни обяснява как записите могат да се използват оперативно.
Какво липсва в официалните отворени данни?
- Не претендирайте за пълна безплатна официална база данни за компании в Съединените щати.
- Държавните регистри са независими органи с различни области, такси, API, достъп до документи, цикли на актуализиране и условия за повторна употреба.
- SEC EDGAR обхваща отчетни компании и подадени документи, а не всяко частно дружество с ограничена отговорност, корпорация, партньорство или едноличен търговец.
- SAM.gov и USAspending обхващат федералните обществени поръчки/субекти и групи от възложители, а не цялата бизнес вселена.
- Информацията за бенефициентната собственост на FinCEN е ограничени данни за съответствие, а не публичен набор от данни за отворени дружества.
- Данните на държавния секретар, адресите на регистрирани агенти, данните за контакти за обществени поръчки, полетата за служители и данните, освободени от данъци, не представляват съгласие за маркетингови контакти.
- Доставката на търговски данни от CompaniesData трябва да държи полетата за идентичност на компанията, произход на официалния източник, обогатяване и данни за контакт разделени.
Ето защо продуктите, базирани на фирмени данни, често добавят стойност, дори когато основните публични източници са надеждни: официалните данни често са разделени по органи, формати, езици, идентификатори и модели на достъп.
Липсващите данни трябва да бъдат третирани изрично в дизайна на набора от данни. Ако официален източник не предлага групови изтегляния, CompaniesData не трябва да се преструва, че груповият файл съществува; трябва да запише ограничението на източника, да добави алтернативно официално обогатяване, където е законно, и да разкрие полета за поверителност, така че потребителите да знаят кои атрибути от кой слой са дошли.
Препоръчителен модел на данни
Практическият модел в стил CompaniesData за Съединените щати трябва да държи полетата за изходни доказателства и полетата за търговска употреба разделени. Основната таблица трябва да съдържа идентичност на юридическото лице, статус, идентификатори за регистрация, правна форма, юрисдикция, регистриран адрес и дати на източника. Отделни таблици за обогатяване могат да съхраняват възложени поръчки, активи от интелектуална собственост, статус на регулаторния орган, сигнали за търгувани на борсата компании, съвпадения на LEI, резултати от санкции/съответствия и контекст на статистическия сектор.
- Идентичност на юридическото лице: юридическо наименование, нормализирано наименование, регистрационен номер, юрисдикция, правна форма и статус на жизнения цикъл.
- Произход на източника: URL адрес на източника, авторитет, дата на извличане, метод на достъп, бележка за лиценз/повторна употреба и флаг за доверие.
- История на събитията: учредяване, изменения, подадени документи, съобщения в вестник, несъстоятелност или прекратяване, когато е публично достояние.
- Обогатяване: слоеве за обществени поръчки, интелектуална собственост, регулаторен орган, борса, LEI и официална статистика със собствени изходни данни.
- Търговска доставка: CRM-готови експорти, сегментиране и полета за контактни данни само когато съществува отделно правно основание и работен процес за потискане.
Как CompaniesData добавя стойност
За Съединените щати, ролята на CompaniesData е да превърне фрагментирания изходен материал в използваем бизнес набор от данни: нормализирани имена на компании, дедуплициран набор от данни, последователни полета за държава и дейност, произход на източника, проследяване на актуализации и куки за обогатяване.
- Нормализирайте идентификаторите на регистрите и законните имена.
- Съпоставяйте официалните записи на компанията със сигналите от обществените поръчки, интелектуалната собственост, LEI и регулаторните органи.
- Маркирайте произхода на източника, така че всеки получен профил да може да бъде одитиран.
- Отделете фирмената идентичност от слоевете за данни за контакт и разрешения за маркетинг.
- Пакетирайте данни за анализ, обогатяване на CRM и пазарни проучвания, вместо да принуждавате потребителите да анализират порталите ръчно.
За Съединените щати, редакционната стойност на CompaniesData не е твърдението, че всеки запис е отворен или че всяко поле може да се използва повторно без условия. Стойността е обратната: видимост на границите на източника, нормализиране на хаотични записи, добавяне на обяснимо обогатяване и предоставяне на набор от данни, който потребителите могат да одитират, вместо просто „черна кутия“.
Заявете примерен файл с данни от CompaniesData за Съединените щати, ако имате нужда от практичен набор от данни, а не от списък с портали с източници.
Търговски набор от данни и граница между контактни данни
Статията за отворени данни за компании в САЩ подкрепя предложението за продажби на бази данни за компании, но не трябва да размива официалните записи с маркетингови списъци. Запис на държавния секретар, подадена документация в SEC, регистрация в SAM, запис на получател на награда, запис на собственик на търговска марка или запис в списък със санкции могат да помогнат за проверката на компанията. Тя не дава разрешение за изпращане на имейл или обаждане до тази компания.
- Слой за фирмена идентичност: юридически имена, щатски идентификационни номера, юрисдикция, статус, полета за регистриран агент и дати на източника.
- Обогатителен слой: SEC CIKs, SAM UEIs, USApending receiver IDs, USPTO собственици, OFAC съвпадения и LEI съвпадения, където е законно.
- Слой с данни за контакт: Бизнес имейлите, телефоните, ролите, потискането и сегментирането на информация изискват отделен работен процес, основан на законови основания, чрез CompaniesData.cloud.
- Купувачи, говорещи испански: Търсенето на данни за контакт може да бъде насочено към CentraldeComunicacion.es, вместо да се препоръчват конкуренти на трети страни, предоставящи данни за контакт.
Матрица на източника
| източник | собственик | Какво дава | Стойност на повторната употреба | Ограничения |
|---|---|---|---|---|
| официален регулатор | Публични подадени документи, фирмени данни, XBRL и обогатяване на информация за листнати/отчитащи се компании. | Условия за справедлив достъп и уебсайт на SEC | Само компании, които докладват, не всички американски фирми. | |
| официален регулатор | Машинно четими данни за компании и подадени данни към SEC. | Насоки на SEC за справедлив достъп и процент на заявките | Изисква заглавки с справедлив достъп и умерени нива на заявки. | |
| официален регулатор | Технически и законосъобразен контекст за потребление на данни от SEC. | Условия на SEC и политика за справедлив достъп | Слой с политики/насоки, а не фирмен регистър. | |
| официален федерален източник на обществени поръчки/организация | Контекст на федерални изпълнители, регистрации на юридически лица и изключения. | Условия на SAM.gov и граници на FOIA/CUI | Федерална популация от обществени поръчки, а не цялостна бизнес вселена. | |
| официален GSA API | Търсене на програмни обекти за регистрирани в SAM.gov обекти. | Условия на GSA/SAM API и ограничения на CUI | Достъпът и полетата варират в зависимост от оторизацията и чувствителността на данните. | |
| официален GSA API | Извадки от публични обекти и изключения за работни потоци за съответствие. | Граници на FOIA/публично извлечение и CUI | Чувствителните полета и непубличните извадки са ограничени. | |
| официални федерални отворени данни | Получатели на награди, договори, грантове и обогатяване от федерални разходи. | Термини за разходи/публични федерални данни в САЩ | Слой на получателя на наградата, не всички американски компании. | |
| официални отворени данни | Слой за откриване за федерални, щатски, местни и племенни набори от данни. | специфични за набора от данни термини на правителството на САЩ | Каталог, а не органът за всеки държавен регистър. | |
| официален държавен регистър | Пример за състояние с голям обем за проверка на обект. | Мандати на държавния секретар на Калифорния | Само за Калифорния; термините и областите се различават в различните щати. | |
| официален държавен регистър | Важен пример за състояние на учредяване. | Условия на Корпоративния отдел на Делауеър | Търсенето е специфично за щата и не е пълноценен национален API. | |
| официален данъчен орган | Контекст на нестопанските организации и организациите с освободени от данъци организации. | Условия за публична информация на IRS | Само организации, освободени от данъци. | |
| официален орган по интелектуална собственост | Собственик на търговска марка и обогатяване на марката. | Условия на USPTO и специфични за наборите от данни известия | IP слой, а не основни данни на компанията. | |
| официален орган за санкции | Проверка на лица с ограничен достъп и контекст на съответствие. | Условия на Министерството на финансите на САЩ | Списък за съответствие, а не фирмен регистър. | |
| официален орган за финансови престъпления | Предупреждение за съответствие за границите на бенефициентната собственост. | ограничено; не са публични отворени данни | Информацията за бенефициентните собственици не е публична база данни за отворени компании. |
Съединените щати са търговски важни, но структурно децентрализирани. Съществуват силни официални API/групови слоеве за податели на документи до SEC, федерални изпълнители, федерални награди, организации, освободени от данъци, търговски марки и санкции/съответствие. Регистрацията на частни компании е на щатско ниво, така че всяка статия трябва да започва с липсата на единен национален регистър на частни компании и да обяснява обединяването по щати.
Често задавани въпроси
Има ли единна безплатна официална база данни за компании за масово търговия за Съединените щати?
Не винаги. Съединените щати имат официални източници на фирмени данни, но груповият достъп, достъпът до API, платените извлечения и търсенето в мрежата могат да бъдат отделни продукти. Не приемайте, че груповият файл е напълно безплатен, освен ако конкретният източник не го доказва.
Кой е най-добрият първи източник за данни за компании от Съединените щати?
Най-добрият първи източник са държавните бизнес регистри за правното съществуване на частните компании, SEC EDGAR за докладващите компании, SAM.gov и USAspending за федералните изпълнители и получателите на награди, данните за освободените от задължения организации от IRS, данните за търговските марки на USPTO, проверката за санкции на OFAC и FinCEN BOI като ограничена непублична граница за съответствие. След това той трябва да се комбинира със статистически данни, обществени поръчки, интелектуална собственост и източници от регулаторните органи.
Могат ли данните на публичните компании да бъдат използвани повторно за търговски цели?
Често да, но само при условията на конкретния източник. Може да се прилагат посочване на авторството, запазване на датата на актуализация, формулировка „без одобрение“ и контрол на GDPR.
Мога ли да използвам данни от регистъра за студен имейл маркетинг?
Достъпът до публичния регистър не води до автоматично заключение. Маркетингът изисква отделно правно основание, обработка на потискане на данни и преглед на съответствието с изискванията за контакт.
Защо да използваме CompaniesData, вместо ръчно да събираме данни от източници в Съединените щати?
Ръчното събиране е бавно, защото идентификаторите, форматите, езиците и покритието се различават в зависимост от източника. CompaniesData добавя нормализация, съвпадение, дедупликация, произход и практични формати за доставка.
Колко често трябва да се актуализират данните за компаниите в Съединените щати?
Честотата на обновяване зависи от източника. Търсенията в регистъра и API могат да поддържат чести проверки, докато вестниците, порталите за обществени поръчки, статистическите съобщения и платените извлечения могат да се актуализират по различни графици. Надеждният набор от данни трябва да съхранява дати на извличане и специфични за източника бележки за актуализация.
Какво трябва да се одитира преди публикуване или продажба на обогатен набор от данни?
Проверете правомощията на източника, условията на лиценза, експозицията на лични данни, правното основание за контактните данни, произхода на полето, правилата за потискане, датите на актуализиране и дали някой официален източник забранява автоматизираната повторна употреба или препродажба.
Източници
SEC EDGAR API – официален регулатор
data.sec.gov – официален регулатор
Ресурси за разработчици на SEC – официален регулатор
Информация за обекта на SAM.gov – официален федерален източник на обществени поръчки/организация
API за управление на обекти на SAM.gov – официален GSA API
API за извличане на SAM обекти/изключения – официален GSA API
API за разходи в САЩ – официални федерални отворени данни
Data.gov – официални отворени данни
Търсене на бизнес в Калифорния – официален държавен регистър
Търсене на юридически лица в Делауеър – официален държавен регистър
Търсене на освободени от данъци организации от IRS – официален данъчен орган
Търсене на търговски марки в USPTO – официален орган по интелектуална собственост
Търсене на санкции от OFAC – официален орган за санкции
FinCEN BOI – официален орган за финансови престъпления
Оставете коментар
Искате ли да се присъединят към дискусията?Чувствайте се свободни да допринесе!