Автоматизация обработки коммерческих данных: история и развитие.

Введение

Использование автоматизированных методов для обработки коммерческих данных

Электронная обработка данных (EDP) или обработка деловой информации может подразумевать использование автоматизированных методов для обработки коммерческих данных. Как правило, это включает в себя относительно простые, повторяющиеся операции для обработки больших объемов однотипной информации. Например: обновление данных о запасах, применяемое к инвентарю, банковские транзакции, применяемые к главным файлам счетов и клиентов, операции бронирования и продажи билетов в системе резервирования авиакомпании, выставление счетов за услуги ЖКХ. Модификаторы "электронный" или "автоматический" использовались в сочетании с термином "обработка данных" (DP), особенно примерно в 1960 году, чтобы отличать ручную обработку данных от обработки данных компьютером.

История

Герман Холлерит, работавший в Бюро переписи населения США, разработал систему табулирования, включавшую в себя карты (карта Холлерита, позднее перфокарта), перфоратор для нанесения отверстий, представляющих данные, табулятор и сортировщик. Система была протестирована при вычислении статистики смертности для города Балтимор. Компания Hollerith's Tabulating Machine Company объединилась с двумя другими фирмами, образовав Computing Tabulating Recording Company, позже переименованную в IBM. Бизнес перфокарт и табулирующих машин оставался основой электронной обработки данных до появления электронных вычислительных машин в 1950-х годах (которые в то время все еще использовали перфокарты для хранения информации). Первый коммерческий компьютер был разработан в Великобритании в 1951 году компанией J. Lyons and Co., занимающейся общественным питанием. Он был известен как "Lyons Electronic Office", или LEO. Он был усовершенствован и широко использовался в 1960-х и начале 1970-х годов. (Lyons создала отдельную компанию для разработки компьютеров LEO, которая впоследствии объединилась в English Electric Leo Marconi, а затем в International Computers Limited. К концу 1950-х годов производители перфокарт, такие как Hollerith, Powers Samas, IBM и другие, также предлагали широкий ассортимент компьютеров. Ранние коммерческие системы устанавливались исключительно крупными организациями, которые могли позволить себе инвестировать время и капитал, необходимые для приобретения оборудования, найма специалистов для разработки программного обеспечения на заказ и адаптации к последующим (и часто неожиданным) организационным и культурным изменениям. Первоначально каждая организация самостоятельно разрабатывала собственное программное обеспечение, включая утилиты управления данными. Различные продукты могли также иметь уникальное программное обеспечение, разработанное специально для них. Такой фрагментированный подход приводил к дублированию усилий, а получение управленческой информации требовало ручного труда. Высокая стоимость оборудования и относительно низкая скорость обработки вынуждали разработчиков эффективно использовать ресурсы. Форматы хранения данных были сильно сжаты, например, из дат удалялся век, что в конечном итоге привело к "проблеме 2000 года". Ввод данных требовал предварительной обработки с помощью перфорированной бумажной ленты или перфокарты, а затем отдельного ввода – повторяющейся, трудоемкой задачи, не контролируемой пользователем и подверженной ошибкам. Некорректные данные требовали исправления и повторной отправки, что влияло на сверку данных и счетов. Хранение данных было строго последовательным на бумажной ленте, а затем на магнитной ленте: использование оперативной памяти для хранения данных было нерентабельным до изобретения жестких дисков и начала их поставок в 1957 году. Значительные события произошли в 1959 году, когда IBM представила компьютер 1401, а в 1962 году ICT (International Computers & Tabulators) осуществила поставку ICT 1301. Как и все машины того времени, процессор вместе с периферийными устройствами – накопителями на магнитной ленте, дисками, барабанами, принтерами, а также устройствами ввода-вывода на перфокартах и бумажной ленте – требовали значительного пространства в специально оборудованных помещениях с кондиционированием воздуха. Часто части установки перфокарт, в частности сортировщики, сохранялись для предварительной сортировки входных карт, что сокращало время обработки больших объемов данных. Однако полной реализации этих преимуществ пришлось ждать появления следующего поколения компьютеров.

Herman Hollerith then at the U. S. Census Bureau devised a tabulating system that included cards (Hollerith card, later Punched card), a punch for holes in them representing data, a tabulator and a sorter. The system was tested in computing mortality statistics for the city of Baltimore. Hollerith's Tabulating Machine Company merged with two other firms to form the Computing Tabulating Recording Company, later renamed IBM. The punch card and tabulation machine business remained the core of electronic data processing until the advent of electronic computing in the 1950s (which then still rested on punch cards for storing information). The first commercial business computer was developed in the United Kingdom in 1951, by the J. Lyons and Co. catering organization. This was known as the 'Lyons Electronic Office' – or LEO for short. It was developed further and used widely during the 1960s and early 1970s. (Lyons formed a separate company to develop the LEO computers and this subsequently merged to form English Electric Leo Marconi and then International Computers Limited. By the end of the 1950s punched card manufacturers, Hollerith, Powers Samas, IBM and others, were also marketing an array of computers. Early commercial systems were installed exclusively by large organizations. These could afford to invest the time and capital necessary to purchase hardware, hire specialist staff to develop bespoke software and work through the consequent (and often unexpected) organizational and cultural changes. At first, individual organizations developed their own software, including data management utilities, themselves. Different products might also have 'one off' bespoke software. This fragmented approach led to duplicated effort and the production of management information needed manual effort. High hardware costs and relatively slow processing speeds forced developers to use resources 'efficiently'. Data storage formats were heavily compacted, for example. A common example is the removal of the century from dates, which eventually led to the 'millennium bug'. Data input required intermediate processing via punched paper tape or punched card and separate input to a repetitive, labor intensive task, removed from user control and error prone. Invalid or incorrect data needed correction and resubmission with consequences for data and account reconciliation. Data storage was strictly serial on paper tape, and then later to magnetic tape: the use of data storage within readily accessible memory was not cost effective until hard disk drives were first invented and began shipping in 1957. Significant developments took place in 1959 with IBM announcing the 1401 computer and in 1962 with ICT (International Computers & Tabulators) making delivery of the ICT 1301. Like all machines during this time the processor together with the peripherals – magnetic tape drives, disks drives, drums, printers and card and paper tape input and output required considerable space in specially constructed air conditioned accommodation. Often parts of the punched card installation, in particular sorters, were retained to present the card input to the computer in a pre sort form that reduced the processing time involved in sorting large amounts of data. But the full realization of these benefits had to await the arrival of the next generation of computers

Сегодня

Как и в других промышленных процессах, коммерческие ИТ в большинстве случаев перешли от индивидуальных заказов и ремесленного производства, где продукт создавался под конкретного клиента, к использованию готовых, универсальных компонентов для достижения оптимального соответствия в любой ситуации. Массовое производство значительно снизило стоимость, и ИТ стали доступны даже самым маленьким организациям. LEO был аппаратным обеспечением, разработанным для одного заказчика. Сегодня Intel Pentium и совместимые чипы являются стандартом и становятся частью других компонентов, которые комбинируются по мере необходимости. Важным изменением стало избавление от необходимости размещать компьютеры и носители информации в защищенных, оборудованных воздушными фильтрами помещениях. Microsoft и IBM в разные периоды времени были достаточно влиятельны, чтобы упорядочить сферу ИТ, а последовавшая за этим стандартизация способствовала развитию специализированного программного обеспечения. Программное обеспечение доступно в готовом виде. Помимо таких продуктов, как Microsoft Office и IBM Lotus, существуют специализированные пакеты для расчета заработной платы и управления персоналом, ведения бухгалтерского учета и управления клиентами, и это лишь некоторые примеры. Это высокоспециализированные и сложные компоненты более крупных систем, но они опираются на общие соглашения и интерфейсы. Стандартизировано и хранение данных. Реляционные базы данных разрабатываются разными поставщиками с использованием общих форматов и соглашений. Общие форматы файлов могут использоваться как на больших мэйнфреймах, так и на настольных персональных компьютерах, обеспечивая ввод и проверку данных в режиме реального времени. Параллельно с этим произошла фрагментация разработки программного обеспечения. Специалисты-техники по-прежнему востребованы, но они все чаще используют стандартизированные методологии, обеспечивающие предсказуемые и доступные результаты. С другой стороны, любой офисный менеджер может попробовать свои силы в работе с электронными таблицами или базами данных и получить приемлемые результаты (однако существуют риски, поскольку многие не знают, что такое тестирование программного обеспечения). Специализированное программное обеспечение – это программное обеспечение, разработанное для решения конкретной задачи, а не для широкого спектра приложений. Эти программы предоставляют инструменты, специально предназначенные для целей, для которых они были созданы. С другой стороны, любой офисный менеджер может попробовать свои силы в работе с электронными таблицами или базами данных и получить приемлемые результаты.

As with other industrial processes commercial IT has moved in most cases from a custom order, craft based industry where the product was tailored to fit the customer; to multi use components taken off the shelf to find the best fit in any situation. Mass production has greatly reduced costs and IT is available to the smallest organization. LEO was hardware tailored for a single client. Today, Intel Pentium and compatible chips are standard and become parts of other components which are combined as needed. One individual change of note was the freeing of computers and removable storage from protected, air filtered environments. Microsoft and IBM at various times have been influential enough to impose order on IT and the resultant standardizations allowed specialist software to flourish. Software is available off the shelf. Apart from products such as Microsoft Office and IBM Lotus, there are also specialist packages for payroll and personnel management, account maintenance and customer management, to name a few. These are highly specialized and intricate components of larger environments, but they rely upon common conventions and interfaces. Data storage has also been standardized. Relational databases are developed by different suppliers using common formats and conventions. Common file formats can be shared by large mainframes and desktop personal computers, allowing online, real time input and validation. In parallel, software development has fragmented. There are still specialist technicians, but these increasingly use standardized methodologies where outcomes are predictable and accessible. At the other end of the scale, any office manager can dabble in spreadsheets or databases and obtain acceptable results (but there are risks, because many do not know what Software testing is). Specialized software is software that is written for a specific task rather for a broad application area. These programs provide facilities specifically for the purpose for which they were designed. At the other end of the scale, any office manager can dabble in spreadsheets or databases and obtain acceptable results.