Измерения в маркетинговых исследованиях

⇐ ПредыдущаяСтр 32 из 46Следующая ⇒

В общем случае под измерением понимается определение количественной меры или плотности некоего свойства, изучаемого исследователем.

Изучаемые свойства существенно различаются по доступности измерениям. Доступнее измерениям объективные характеристики – возраст, вес, доход и т.п. Менее доступные субъективные свойства – вкусы, привычки, отношения и т.п. “Неизмеримые” характеристики респондент переводит на шкалу плотности, которую необходимо разработать исследователю.

Известны четыре типа шкал:

1. Описание. Отличается единственным опознавателем (дескриптором) для каждой градации шкалы. Градации взаимонезависимы, для каждой предусматривается альтернативные ответы “да”, “нет”. К примеру, марка, адрес, форма.

2. Порядок. Определяет относительный размер: больше, чем; меньше, чем; равен. К примеру, предпочтение одного цвета перед другим.

3. Расстояние. Определяет абсолютное расстояние между дескрипторами. К примеру, ранжирование признака, по которому делается выбор с оценкой весовых коэффициентов по каждой позиции.

4. Начальная точка. Отличает шкалы, имеющие единственное начало отсчета. Например, возраст имеет начало отсчета а отсутствие мнения об уровне помех не является нулевым уровнем покупательской позиции.

Таблица 20. Характеристики шкал.

Уровень Измерений	Характеристики шкал
Уровень Измерений	описание	порядок	расстояние	начальная точка
Шкала наименований	*
Шкала порядка	*	*
Интервальная шкала	*	*	*
Шкала отношений	*	*	*	*

Каждая последующая характеристика шкалы строится по предыдущей, так что “описание” является наиболее базовой характеристикой, присущей любой шкале.

Если шкала имеет «расстояние» то она обладает также “порядком” и “описанием”.

Применяется четыре уровня измерения, определяющие тип шкалы: наименований, порядка, интервальный и отношений.

Шкала наименованийсодержит только описание; объект представлен названием, без количественных характеристик. Оценки для этой шкалы возможны типа “согласен” и “не согласен”.

Шкала порядка ранжирует ответы респондентов. Она имеет свойства шкалы наименований (номиналов) в сочетании с отношениями порядка. Если каждую пару категорий шкалы наименований удается упорядочить относительно друг друга то получается порядковая шкала. Чтобы отличить шкальные оценки от обычных чисел, их называют рангами.

Интервальная шкала обладает характеристикой расстояния между градациями шкалы, измеряемого посредством некоторой единицы измерений. На этой шкале разности между градациями имеют однозначный смысл, т.е. определимо равенство некоторых интервалов или который из них больше другого. Шкальные оценки можно складывать. Шкала может быть равномерной, т.е. равные интервалы имеют равные значения измеряемого признака.

Шкала отношенийявляется единственной шкалой, имеющей нулевую точку, так что полученные результаты доступны количественному сравнению. Например, шумы в канале один превышает вдвое уровень в канале два.

Применительно к статистическим данным шкала наименований вводится для внесения статистических мер, соответствующих избранной гипотезе или внесения очередной реализации в некоторый интервал.

На шкале порядка используют коэффициенты ранговой корреляции, определяют квантили и т.п.

Интервальная шкала предназначена для преобразований, в частности, ее можно описать или растянуть, а также сдвинуть. Рассчитываются статистические меры, оцениваются доверительные интервалы.

Шкала отношений используется в прогнозирующих расчетах, при оценках точности и надежности.

Полученные результаты можно всегда перевести в более простую шкалу, но никогда наоборот.

Ниже приведены примеры вопросов, заданных в разных шкалах измерений, помогающие ощутить разницу в построении и оформлении.

Шкала наименований	Укажите марки электронной продукции, которые вы предпочитаете “да” или “нет” – Сони; – Панасоник; – Филипс; – прочие.

Шкала порядка	Проранжируйте, пожалуйста фирмы, производящие электронную аппаратуру и укажите место, которое занимает фирма в Ваших предпочтениях: – Сони - 1; – Панасоник - 2; – Филипс - 3; – прочие.

Шкала интервалов	Проранжируйте, пожалуйста, название фирмы по уровню надежности выпускаемых ими электронной аппаратуры: очень низкая очень высокая Сони 1 2 3 4 5 6 7 8 9 Панасоник 1 2 3 4 5 6 7 8 9 Филипс 1 2 3 4 5 6 7 8 9

Шкала отношений	Укажите, пожалуйста, приблизительно сумму, затраченную Вами на продукцию фирм, руб. до 10² до 10³ до 10⁴ до 10⁵ Панасоник Филипс Сони

Эксперимент

Экспериментомв маркетинговых исследованиях называют измерения зависимых параметров при контроле и регулировании независимых параметров при условиях, организации и техническом оснащении, регламентирующих действия источников погрешностей. Условия, организация, техническое оснащение и погрешности экспериментов прогнозируются при планировании эксперимента.

Применяются эксперименты двух типов: лабораторные и полевые:

– эксперименты в искусственных условиях, исключающих воздействие побочных факторов;

– эксперименты в реальных условиях. Часть таких экспериментов называют “пробный маркетинг” и “тестирование рынка”.

В лабораторных условиях целесообразно изучать особенности реакции покупателей на составляющие части рекламы, дизайна, сервиса и т.п. К примеру, фрагменты рекламы, оставшиеся в памяти, реакцию на форму или размещение кнопок и т.п.

Тестирование рынка классифицирует на стандартное, контролируемое, электронное имитационное.

Стандартное тестирование включает в себя испытания товаров в обычных каналах сбыта, используемых конкретной фирмой. Для реализации требуется значительные затраты времени и средств. Основанием этих затрат является обострение конкуренции, необходимость модернизации маркетинговой стратегии. Апробация установочной партии товара, инновация в сервисе, в рекламе и т.п.

Контролируемое тестирование рынка проводится специализированными фирмами, которые заключают договоры с дистрибьюторами, избранными для эксперимента. Аналогия каналов, выбранных при планировании, может быть гипотезой, не соответствующей реальности.

Электронное тестирование отличается наличием идентификационных карточек, вручаемых участникам потребительской панели для предъявления при покупке товара. По карточкам автоматически фиксируется ситуация с покупками а заодно основные сведения о покупателях. Наименьшие затраты времени и средств.

Имитационное тестирование предполагает использование ограниченного объема данных о реакции потребителей в соответствии с избранной моделью. Стоимость оказывается 5-10% от стандартного тестирования. Достоверность зависит от гипотез, заложенных при выборе модели. В модели имитируются группы покупателей на базе предположений о вероятностях покупок.

Разработка форм для сбора данных в маркетинговых исследованиях принято, в соответствии с общенаучной практикой, вносить данные в специальные формы. Разработка этих форм является задачей, сложность которой возрастает для трудноизмеримых объектов. Наиболее сложны формы для данных о физических лицах, в частности, анкеты (вопросники).

Анкета, т.е. бланк для записи данных о респонденте рассматривается сегодня как продукт творческой работы исследователя, малодоступной формализации. Процесс разработки анкеты может быть необходимой составной частью работ по созданию программного продукта для задач, ранее недоступных для компьютерных решений.

Рис. 55. Этапы разработки анкеты

Этап 1. Предполагается, что исследователь обладает достаточными знаниями по теме для формирования гипотез о направлении работы. Эти гипотезы будут определять характер анкеты, т.е. как и от кого требуется собрать информацию и какие взаимосвязи надо изучить. Первоначально составляется макет таблицы для сбора информации. Вносятся данные, полученные путем опроса нескольких экспертов. Уточняются исходные гипотезы по критериям необходимости и достаточности данных для решения задачи исследования. Анализируются риски – избыточности вопросов с повышенным уровнем отказов отвечать, а также недостаточности вопросов с низкой эффективностью опроса.

Этап 2. От особенностей информации зависит вид анкеты и метод проведения опроса. Определяется степень стандартизации и открытости анкеты, а также используемые средства – лично, по телефону или почте. Выбор зависит от заданной достоверности и планируемых затрат времени и средств.

Этап 3. Содержание вопросов. Каждый потенциальный вопрос оценивается, является ли он необходимым. Если очевидно, что без этого вопроса в исследовании будет невосполнимый пробел, то рассматриваются варианты ввода нескольких вопросов, упрощающих и уточняющих ответы. К примеру, вопрос о выборе “Сони” может делиться на сравнения по престижу, по надежности, по дизайну и т.п.

Каждый вопрос проверяется на предмет наличия информации у респондента, необходимой для ответа. Нередки ответы респондентов на вопросы, о которых они имеют смутное представление. Для проверки воображаемой компетентности респондента в анкетах встречаются вопросы о несуществующих реально ситуациях, причем наблюдается значительная часть положительных ответов.

В сомнительных случаях предшествует сложному вопросу “фильтрующий”, типа “У Вас есть мнение о …”. В 20-25% случаев следуют ответы “не знаю”.

Необходимо учитывать два фактора, влияющие на достоверность ответа:

– ошибка преувеличения, т.е. склонность помнить события так, будто оно произошло значительно позднее, чем на самом деле, или было более значимым;

– потеря воспоминания, т.е. склонность забывать событие целиком, если оно не оставило ощутимый след. С течением времени воспоминания слабеют и преувеличения становятся реже;

– откровенность респондента. Далеко не всю информацию, которой располагает респондент можно найти в его ответах. Некоторые люди более откровенны, другие склонны к секретности: обоснованной, либо проистекающей из мира эмоций. Некоторые вопросы вызывают неудовольствие респондента, исключая сотрудничество по оставшейся части анкеты. Если “опасные” вопросы не удается избежать, то надо сделать попытку подойти к ним косвенно.

Деликатные вопросы стремятся перенести к финишу опроса, а вначале располагать те, которые “разогревают” респондента, способствуют доверию. Кроме того, учитывают рост откровенности при обсуждении других людей, к примеру, легче назвать доходы соседей и друзей, чем собственные. Среднее от соседских доходов может правдоподобнее определять финансы респондента, чем его прямая оценка. Обычно называют точно самые скромные доходы, скажем пенсию, а те, кто побогаче, непременно “скромнее”.

Многим неприятен вопрос о возрасте, не всегда кстати вопрос о поле. Поэтому вводятся возрастные категории, скажем от 60⁺ до 20^– и предпочтительные для респондента формы обращения: госпо(дин)жа или просто мужчина (женщина). Лишнее зачеркнуть.

Иногда используется модель случайного ответа, в которой респонденту достаются вопросы, которые интервьюер не знает и ответы не в состоянии прочесть. Часть вопросов является сугубо деликатной, скажем о стремлении обмануть партнера, а другая часть невинна. Номера вопросов задаются генератором случайных чисел. При обработке выявляются искомые взаимосвязи.

Этап 4. Форма ответа на каждый вопрос, может быть произвольной – для открытого вопроса или с ограниченным числом вариантов ответа, с двумя вариантами, с применением шкалы. Открытый вопросс произвольным ответом типа “Почему вы купили ТВ Горизонт” отставляют свободу выбора за респондентом, не навязывает ему авторскую позицию. Кроме того, дает возможность проникнуть в мир респондента, ответить неизвестные исследователю аспекты задачи. Обычно открытые вопросы ставят в начале анкеты.

Закрытый вопрос предполагает многовариантные ответы. Под формулировкой вопроса размещаются варианты ответа, среди которых респондент ищет наиболее подходящий и отмечает его крестиком, точкой и т.п.

Число вариантов ограничено, обычно £ 10. Процесс опроса упрощается и для респондента и для интервьюера. Не надо мучительно придумывать свою версию ответа и анкеты доступны математической обработке.

К примеру, покупатель “Горизонта” выбирает ответы: “самый дешевый”, “патриотизм”, “ремонтопригодность, гарантия дольше”, “картинка лучше”, “прочее”. Здесь респондент принуждается выбрать одну из позиций, запланированных исследователем, причем его отношение к сумме этих позиций остается “за кадром”. Ему может быть неинтересен или неизвестен любой ответ на вопрос или есть другое мнение. Часть исследователей вводят вариант “не знаю”, а другие считают, что в нем может проявиться лень респондента, т.е. данные “не в тему”. Затруднения с ответами являются поводом для фильтрующих вопросов.

Необходимо учитывать шанс порядкового искажения. Порядок следования ответов существенно влияет на выбор респондента, явное предпочтение тем, что вначале. Особо важен порядок при телефонном опросе, поэтому рационально переставлять ответы случайным образом.

Дихотомический вопрос предполагает два ответа “да” и “нет”.

Этот вопрос можно преобразовать в многовариантный и наоборот. При последующей обработке альтернативные ответы проще других. Однако порядок следования ответов и здесь проявляется, поэтому половину опроса проводят с одним порядком ответов, а другую с обратным.

Шкалы. Многовариантные вопросы с ответами типа “много”, “мало”, “ничего” снабжаются шкалами. Удобство шкал заключается в доступности для респондентов внести нюансы в оценки внутри интервала и, кроме того, возможности предложить несколько шкал для сопоставляемых объектов с одинаковым масштабом представленным в начале анкеты. Респондент, ознакомившийся с инструкцией для всех последующих ответов сравнительно легко и быстро заполняет анкету.

Формулировка вопроса.

От формулировки вопроса зависит риск “состояния не ответа” когда респондент не желает или не в силах отвечать после ответа на предыдущие вопросы.

Кроме того, может быть недостаточная точность оценки, когда запись отличается от действительного восприятия ответов респондентом. Среди источников недоразумений с ответами основным является уровень образования, несопоставимый у респондентов и автора вопросов. Поэтому во-первых надо использовать простые слова. И неясностей или двусмысленностей не должно быть.

Примерами непредсказуемости ответов могут быть разночтения слов “иногда”, “часто” воспринимаемые, как ежедневно или ежегодно. “Вы” могут относить к себе лично и к коллективу или нации. Негативно относятся респонденты к экстремальным оценкам, вроде “все”, “никогда”, “всегда”, “никто” и т.п.

Наводящие вопросы. Если вопросы задают направление ответов, их называют наводящими. Такие вопросы смещают ответы респондентов, что приводит к систематической погрешности оценок.

Вопросы не должны содержать скрытых альтернатив или допущений. Альтернативные ответ, который не содержится в составных частях вопроса, называют скрытой альтернативой. Когда вопрос сформулирован так, что он порождает разные ответы от разных респондентов, допускающих различные последствия, то он содержит скрытое допущение. Кроме того, вопрос может быть двухканальным, т.е. ориентированным на два ответа, что затрудняет ответ.

Этап 5. Определение последовательности вопросов. Сформулированные вопросы надо расставить так, чтобы получить единую анкету. Порядок следования вопросов имеет принципиальное значение.

Самые простые и интересные вопросы являются первоочередными. Они должны показать респонденту, что его мнение очень интересует кого-то, а это так приятно.

Туннельный подход. Один из подходов к выбору последовательности вопросов называют воронкообразным, поскольку начинается с широко охвата и постепенно сужается к конкретной теме. Содержание вопросов плавно перетекает от одного к другому.

Разветвленный вопрос отсылает респондента к разным участкам анкеты в зависимости от его реакции на текущий вопрос. К примеру, после вопроса о наличии видеокамеры переходят к сюжетам съемок, либо к вопросу о любимых телепередачах. Такие вопросы применяют при личных или телефонных интервью, однако с осторожностью, поскольку могут запутать респондента.

Классификационный вопрос. Классификационные вопросы вводятся в конце анкеты. Они относятся к особенностям респондента и дают возможность выяснять зависимость основных данных в анкете от признаков, субъекта, например, демографических. Именно классификационные вопросы раздражают респондентов в наибольшей степени, так что основные вопросы должны им предшествовать.

Основные вопросы должны следовать в порядке возрастания сложности.

Этап 6. Физические признаки анкеты.

Внешний вид анкеты может повлиять на согласие респондента отвечать, особенно при почтовой связи. Необходима хорошая бумага и яркий текст.

Во введении отмечается конфиденциальность ответов и название финансирующей организации, а также название и цель проекта.

Замечено, что короткие анкеты лучше длинных если их насыщенность не чрезмерна. Короткие анкеты легче заполнять и удобнее сортировать.

Этап 7. Заключительным этапом является тестирование анкеты и корректировка, при необходимости уточняется восприятие вопросов респондентами, возможные затруднения. Ответы, полученные в итоге тестирования, кодируются и вносятся в таблицы, по которым составляется макет анкеты.

Шкалы, применяемые в анкетах

Шкала Лайкерта (Ликерта) называется также шкалой суммарных оценок, содержит степени согласия или несогласия респондентов с рядом утверждений:

Таблица 21. Шкала Лайкерта.

	категорически не согласен	не согласен	безразличен	согласен	абсолютно согласен
ТВ горизонт надежнее дешевле	+ –	– –	– –	– –	– –

Разные степени согласия кодируются числами. Все вопросы располагаются случайным образом, так, чтобы негативные и позитивные ответы перемешались. Совокупный результат получается простым суммированием. Найденная сумма является относительным значением, используемым для сравнения нескольких объектов. Иногда для сравнения избирается стандарт. В качестве стандарта может быть среднее число очков для всей исследуемой совокупности. Процедура расчетов называется выработкой норм. Отличие от норм является оценкой, позитивной или негативной, объекта исследования.

Семантическая дифференциальная шкала содержит ячейки в наборе полярных прилагательных или предложений, которые наилучшим образом отражают их отношение к объекту.

Эта шкала особо полезна при исследованиях имиджа товара или фирмы. Прилагательные группируются в трех массивах:

массив оценок: плохой – хороший, полезный – никчемный;

массив силы: сильный – слабый, мощный – экономный;

массив активности: тихий – громкий, быстрый – вялый.

Шкала разбита на промежуточные значения между экстремальными позициями. Респонденту предлагается отметить свою позицию точкой на шкале:

Рис. 56. Семантическая дифференциальная шкала.

На шкале могут сравниваться несколько обслуживающих фирм - и . В результате получают змеевидную диаграмму (так ее называют из-за формы). Эта шкала отличается удобством для респондентов и удобна для обработки, так, что пользуется заслуженной популярностью у маркетологов.

Шкала Стэпела. На этой шкале респондент указывает насколько достоверно, по его мнению каждое заявление определяет его ответ.

Таблица 22. Шкала Стэпела.

	–5	–4	–3	–2	–1	+1	+2	+3	+4	+5
обслуживание вежливое
сотрудники компетентны

Эту шкалу можно рассматривать в качестве модификации предыдущей – отношение фиксируется в числовой форме, привязывается к центру положения нуля и нормируется погрешность оценок введением интервалов. Кроме того, здесь не требуется биполярные утверждения.

Все названные шкалы реализуют интервальное ранжирование, в том смысле, что марка, набравшая 20 очков, не является вдвое более привлекательной марки с 10 очками. Здесь устанавливается порядок следования марок в сознании респондентов.

Известны разновидности рейтинговых шкал. В частности, применяют размерности в процентах для тех лиц, кому привычнее именно так оценивать свои вкусы. Число градаций отношения к объекту может быть доведено до десяти, если респонденты демонстрируют достаточную чувствительность к нюансам оценок.

Оценки рейтинга на основе постоянной суммы производятся путем предложения разделить 100 очков между сравниваемыми объектами или показателями. Например, респонденту предложено вообразить себя с найденными 300$ в универмаге. Покупки с примерными ценами надо внести в таблицу, размеченную как указано выше. Принято считать оценки рейтинга на основе постоянной суммы чрезмерно сложными, однако они сглаживают гало-эффект. Гало-эффект возникает при сборе данных, когда переходят от одного суждения к другому.

Шкалы восприятия.Менеджерам фирмы необходимо знать доподлинно, как воспринимаются конкуренты и по каким именно признакам судят о них потребители. Восприятие оценивается по нескольким показателям, используются многомерные шкалы, чтобы не утомить чересчур респондентов вводят картинки, например:

Рис. 57. Шкалы восприятия.

Однако наращивание состава оценок и градаций по каждой практически не приводит к накоплению дополнительной информации для менеджеров, поскольку сам респондент зачастую не знает, что от него хотят. Он не сообщит свой выбор между фирмами А и Б, даже под пыткой, если эти фирмы вне его восприятия.

Главная методическая погрешность рассматриваемых оценок заключается в навязывании исследователям своего восприятия градаций между сравниваемыми объектами. Между тем, у респондента “оценочные возможности” несравненно ниже, чем у исследователя. Зачастую респондент сталкивается последний раз с оценками в школе. У него осталось рефлекторное пять – четыре – три – два. Если единица, то ЧП. Если ему предлагать 10 балльную или 100% шкалу, он может ее поделить на четыре части и фактически ставить школьные оценки. Тем более, что градации не регламентируются и недоступны контролю.

Исследователь может проверить респондентов в качестве измерительного средства. Маркетологи не применяют “калибровку” своих опросов или наблюдений, хотя эта процедура является традиционной для всех прочих измерительных средств. В частности, при выборе шкалы важны “чувствительность” и “точность”, т.е. число уверенно различаемых респондентами градаций в пределах шкалы и вариация оценок некоторого стандарта или эталона.

Проверка может быть проведена в отношении одного респондента, который вполне может оказаться замечательным экспертом, и в отношении выборки, составленной для исследований.

Необходимым условием является многократное предъявление респондентам объекта в ситуациях, исключающих взаимозависимость ответов. Вопросы в разное время с различными атрибутами и условиями, сравнение показателей со скрытой маркой и т.п. К примеру, одному респонденту предложить анкету с предполагаемыми ценами на 10-20 товаров. Истинные цены известны исследователю, а у респондента есть только реклама товаров, которые он не покупал.

Относительные погрешности оценок в этой анкете являются искомой величиной, характеризующей меру ошибок одного респондента. Для группы респондентов гораздо проще организовать такую проверку. Достаточно ввести вопрос с оценкой числа, которое известно исследователю и входящее в состав ответов анкеты.

Ошибки респондентов, если они не превышают саму измеряемую величину, имеют распределение, близкое и НР. Для малой выборки, 10-20 единиц, в ориентировочных расчетах используется “четырех сигмовая” зона. Например, оценивают респонденты товар, о котором исследователь доподлинно знает, что качество самое среднее. Истинное значение подразумевается исследователем в центре шкалы Ц_ИССЛ.

Рис. 58. “Четырех сигмовая” зона.

На рис. 58 десять респондентов расставили свои точки на шкале, группирующиеся в 4 интервалах. Эти интервалы изображаются на шкале и поскольку они содержат нужные для правила “3s” количество точек, то отмечается систематическая погрешность респондентов Ц_РЕС – Ц_ИССЛ и случайная – здесь это ширина интервала.

Респонденты могут сколь угодно различаться по своим метрологическим способностям. Некто окажется экспертом, приближая свои погрешности к нулю, так что с ними полезно поддерживать постоянный контакт. Кто-нибудь сделает экстремальные ошибки – таких специалистов ценят, например в США, они полезны, если их погрешности стабильны. По экстремальным позициям можно в дальнейшем прогнозировать размах оценок всего статистического ансамбля с учетом погрешностей.

Погрешности оценок в анкетах не интересовали маркетологов до последнего времени, поскольку традиционно считалось, что покупатель всегда прав, даже когда делает ошибку, выбирая товар. Считалось выгодным всячески настаивать на покупке, гарантируя замену товара или возвращение денег особо недовольным.

Сегодня интенсивно развиваются институты, защищающие права потребителя. В частности, стали реальностью оценки всех потребительских свойств товара, скажем, на порядок точнее, чем у простых покупателей. Применяются необходимые технические средства и привлекаются профессиональные эксперты. Поэтому надежды на ошибки покупателей становятся бесперспективными.

Для иллюстрации рассматривается завод, приглашающий выпускников вуза на работу после защиты диплома. Решение отдела кадров приглашать только отличников, решено скорректировать путем дублирования защиты диплома на совете заводских специалистов. Для этого достаточно трансляции с вузовской защиты на заседание специалистов. Наблюдение может быть открытым или закрытым – на усмотрение организаторов. Заводским экспертам надо оценить защиту по нескольким шкалам, исходя из 10 баллов, а в вузе обычные 3 – 4 – 5.

Средний балл на защите в вузе обычно больше 4. Навязывается систематическая погрешность в плюс из-за претендентов на красный диплом, кому нельзя ставить меньше 5, и аутсайдеров, кому не хотят ставить 2, чтобы не тиражировать встречи с ними. Кроме того, оценки на защите относятся к разным признакам – бойкости ответов, аккуратности графики, очередности в списке и т.п.

Заводу нужны разные специалисты, но для всех есть общий признак – предлагаемый вклад в конкурентоспособность, от очевидного приращения до роковых потерь.

Рис. 59. Шкала уровня полезности.

Точки, отображающие дипломников на этой шкале, будут ранжировать их по уровню полезности для завода и, одновременно, погрешности вузовских оценок. Сегодня, они вполне могут быть “перевернутыми”, т.е. “5” не дотягивает до среднего уровня шкалы, а “3” с массой ошибок в чертежах и корявым изложением, явно в положительной ее части. Причиной этому является несопоставимость по сложности и трудоемкости решений, заимствованных на заводе, и самостоятельных.

Дата добавления: 2019-01-14; просмотров: 809; Мы поможем в написании вашей работы!

Поделиться с друзьями:

⇐ Предыдущая 27 28 29 30 313233 34 35 36 Следующая ⇒

Мы поможем в написании ваших работ!