Пирамида потребностей в работе с данными — Офтоп на vc.ru
Психолог Абрахам Маслоу определил пирамиду потребностей человека. У производственных команд также существует своя иерархия потребностей. Для команды по работе с большими данными она начинается с актуальности данных. Следующие «ступени» – объемы, структура и значения данных, а вершина этой пирамиды – происхождение данных.
6265 просмотров
Нам попался интересный материал, опубликованный в KDnuggets, по теме иерархии потребностей в Big Data, написанный техническим директором Data Culpa, Inc, Митчем Хейлом. В рамках нашей серии переводных текстов, мы решили сделать адаптацию этой публикации, чтобы рассказать вам чуть больше о больших данных и, может быть, дать пищу для размышлений специалистам из этой области.
Согласно пирамиде Маслоу, сначала человек стремится удовлетворить самые базовые потребности – такие, как пища и наличие крова. Затем следуют социальные потребности, а высшая ступень – потребность в творчестве и самореализации.
У команд по работе с данными есть своя пирамида потребностей, которая сфокусирована на качестве данных. Я работал с аналитиками данных в разных компаниях, и вот как бы я описал иерархию их потребностей. Мы начнем с базового уровня – свежести данных. Здесь мы определим, насколько вообще актуальна информация, которой мы пользуемся
В идеале у команды должны быть инструменты для измерения качества данных на каждом из уровней пирамиды.
Содержание:
- Уровень 1: Актуальность данных
- Уровень 2: Объемы данных
Уровень 3: Структура данных
- Уровень 4: Значения данных
Уровень 5: Маркировка происхождения с помощью метаданных
Иерархия потребностей в работе с данными: ступень за ступенью
Уровень 1: Актуальность данных
Чтобы получить качественные данные, сначала необходимо убедиться, что данные актуальны, и ими в принципе можно пользоваться.
Работал ли ваш пайплайн? Если да, то когда? Он производил новые данные или перерабатывал старые? Чтобы обнаружить «несвежие» данные, необходимо тщательно проверить систему на «застрявшие» каналы данных. Когда вообще ничего не обновлялось, это довольно легко увидеть. Но если переместился порядковый номер и временная метка, это ещё не значит, что всё нормально: остальные данные могут не «переехать».
Уровень 2: Объемы данных
После того как свежесть данных установлена, переходим на следующий уровень – их объем. В первую очередь, следует ответить себе на два вопроса:
1. Соответствуют ли объемы данных тому, что мы ожидали?
2. Если объемы данных меняются, соответствуют ли они тенденциям, которые мы уже наблюдали? Например, слабой активности в выходные дни или посреди ночи.
В некоторых видах бизнеса (например, в розничной торговле) объемы данных в праздничные и предпраздничные дни могут отличаться от обычных. В зависимости от применения, для анализа объемов данных могут понадобиться эффективные и надежные модели работы с ними, учитывающие множество характеристик.
Например, данные о сезонных колебаниях спроса очень важны для моделирования продаж электроники. Необходима информация о выпуске устройств нового поколения, так как продажи старых устройств неизбежно падают, а для новых – это точка отсчёта и пик интереса к ним. Нужны сведения о сезонных распродажах: “чёрную пятницу” спрос на устройства растёт, в канун Нового года продажи достигают пика непосредственно перед праздником, а перед 8 марта увеличиваются продажи устройств светлых и ярких цветов. Отсутствующие или отличающиеся по объёмам поступления данные в эти периоды могут привести к существенным искажениям в результатах их обработки.
Заместитель директора по анализу данных и моделированию Platforma, Ph.D., Profes
Уровень 3: Структура данных
Следующая ступень в пирамиде потребностей – структура (формат) данных: имена и типы полей. Я встречал разные подходы к каталогизации. Кто-то использует данные формата JSON, хранящиеся в строковых (текстовых) полях, кто-то – системы, которые могут поддерживать подзаписи.
К примеру, сервис для анализа больших объёмов данных BigQuery.
При выборе подхода существует много нюансов, но в основном нужно сфокусироваться на отсутствующих столбцах данных или критических полях. (Этот термин можно вынести в сноску: КП указывают, есть ли в графике (schedule) у задачи (task) место для возможного отставания, или выполнение задачи критично «здесь и сейчас»).
При проверке типизации я советую действовать осторожно. Многие строки в производственных средах на самом деле являются датами или числами. Возможно, вы захотите изменить тип так, чтобы стало проще. Т.е. вы можете построить модель для числовых значений в полях смешанного типа отдельно от строк, если это уместно. Необходимо знать свои данные и понимать, подходят ли настроенные форматы и типы данных в хранилище тому, что вы хотите в них видеть.
Уровень 4: Значения данных
Наконец, мы рассматриваем содержание значений данных. Для оценки их качества нужно обозначить отдельные категории.
Это делается в тех случаях, когда уникальность значений низка по сравнению с размером популяции. Чтобы проанализировать строки, вычислите ряд моделей для определения и захвата новых типов строк. Это позволит не терять время на такие простые вопросы, как «Является ли значение строки нулевым?» или «Какова её длина?».
Возвращаясь к вопросам типизации, необходимо проверять соответствие типов поступающих данных ожидаемому. А в случае ограниченного списка возможных значений настроить автоматическую валидацию по этому списку.
Если данные числовые, в ход могут пойти метрики и методы контроля качества больших выборок данных. Например, отслеживающих смещение их распределения, такие как PSI и дрейф данных.
Заместитель директора по анализу данных и моделированию Platforma, Ph.D., Profes
Уровень 5: Маркировка происхождения с помощью метаданных
Отладка потоков данных приводит к таким вопросам, как «Почему это поле имеет такое значение?».
Когда я занимался построением конвейеров данных, я сталкивался с этим снова и снова. Моим решением было дополнить данные полями, в которые я мог вставлять метаданные. Например, текстовое объяснение, имя файла скрипта и номер строки, другие переменные – всё, что мне понадобится для последующей отладки возможной проблемы. Записи вроде: «Я пометил этот товар как отсутствующий на складе, потому что два источника данных сказали, что его нет в наличии, хотя третий источник данных говорит, что у нас есть 1000 штук» – полезная вещь при дальнейшей работе с данными.
Не каждый имеет возможности и ресурсы, чтобы добавить более-менее серьёзный объём метаданных. Многое зависит от объёмов данных и их стандартизированности. Но если вы можете сделать это – сделайте. Инструменты, которые автоматически выявляют проблемы с полями данных, могут также анализировать и ваши новые поля метаданных. Это приведет к появлению оповещений о метаданных, которые смогут предупредить вас об изменениях на периферии.
Иерархия потребностей в работе с данными: ступень за ступенью
Следует помнить, что пирамида потребностей действительно является пирамидой. Она строится «снизу вверх», и если на нижних уровнях есть недоработка – то всё рушится. Все начинается с актуальности данных. Если данные, которые вы анализируете на верхних уровнях иерархии, устарели, у вас будет ложное чувство уверенности в их качестве. Вы будете думать, что сегодняшние данные великолепны, хотя у вас перед глазами данные, полученные в прошлую среду.
Когда вы убедились, что данные свежие, можно переходить к более высоким ступеням пирамиды. Убедитесь, что у вас есть все нужные данные. Проверьте, понимаете ли вы их структуру . И так далее – ступень за ступенью.
Я рекомендую командам по работе с Big Data убедиться, что у них есть инструменты для любого из этих уровней, и что они могут отдельно отслеживать каждый уровень. Когда все уровни будут показывать хорошие результаты, вы будете знать, что удовлетворили все потребности вашей пирамиды.
Митч Хейл – технический директор Data Culpa, Inc. У него более пятнадцати лет опыта в сфере обработки данных для розничной торговли, машинно-генерируемых данных, компьютерного зрения и приложений для аналитики. Он также имеет опыт создания решений для центров обработки данных. Митч помогал разрабатывать продукты для таких компаний, как Data Domain (продана EMC), Pancetera (продана Quantum) и Conjur (продана CyberArk). Он является соавтором более 25 выданных патентов на изобретения в области сжатия данных, оптимизации данных и защиты данных.
Пирамида потребностей
Пирамида потребностей вам будет необходима при изучении темы по обществознанию «Потребности человека».
Потребность — это нужда в чем-либо. Многие путают термин «потребность» с термином «желание». Чтобы лучше понять разницу, представьте, что вы зашли в магазин и думаете, чтобы вам попить — сок или кока-колу.
Это желание. А если бы у вас возникла потребность попить, так называемая жажда, то вы бы не думали, а схватили бутылку воды и чуть ли не в магазине выпили… Это потребность.
Итак, потребность — это то, без чего человек не может прожить…
Разберем пирамиду потребностей.
Абрахам Маслоу — известный американский психолог, основоположник иерархической модели потребностей человека.
Потребности Маслоу распределил по мере возрастания, объяснив такое построение тем, что человек не может испытывать потребности высокого уровня, пока нуждается в более примитивных вещах. В основании — физиология (утоление голода, жажды, сексуальной потребности и т. п.). Ступенью выше разместилась потребность в безопасности, над ней — потребность в привязанности и любви, а также в принадлежности какой-либо социальной группе. Следующая ступень — потребность в уважении и одобрении, над которой Маслоу поставил познавательные потребности (жажда знаний, желание воспринимать как можно больше информации).
Далее следует потребность в эстетике (жажда гармонизировать жизнь, наполнить ее красотой, искусством). И наконец, последняя ступень пирамиды, наивысшая,— стремление к раскрытию внутреннего потенциала (она и есть самоактуализация). Важно заметить, что каждая из потребностей не обязательно должна быть утолена полностью — достаточно частичного насыщения для перехода на следующую ступень.
«Я совершенно убежден, что человек живет хлебом единым только в условиях, когда хлеба нет,— разъяснял Маслоу.— Но что случается с человеческими стремлениями, когда хлеба вдоволь и желудок всегда полон? Появляются более высокие потребности, и именно они, а не физиологический голод, управляют нашим организмом. По мере удовлетворения одних потребностей возникают другие, все более и более высокие. Так постепенно, шаг за шагом человек приходит к потребности в саморазвитии — наивысшей из них». Маслоу прекрасно осознавал, что удовлетворение примитивных физиологических потребностей — основа основ. В его представлении идеальное счастливое общество — это в первую очередь общество сытых людей, не имеющих повода для страха или тревоги.
Если человек, например, постоянно испытывает недостаток в еде, вряд ли он будет остро нуждаться в любви. Однако человек, переполненный любовными переживаниями, все равно нуждается в пище, причем регулярно (даже если дамские романы и утверждают обратное). Под сытостью Маслоу подразумевал не только отсутствие перебоев с питанием, но и достаточное количество воды, кислорода, сна и секса. Формы, в которых проявляются потребности, могут быть разными, здесь нет единого стандарта. У каждого из нас свои мотивации и способности. Поэтому, например, потребность в уважении и признании у разных людей может проявляться неодинаково: одному необходимо стать выдающимся политиком и завоевать одобрение большинства своих сограждан, а другому вполне достаточно, чтобы собственные дети признавали его авторитет. Такой же широчайший диапазон в рамках одной и той же потребности можно наблюдать на любой ступени пирамиды, даже на первой (физиологические потребности).
Что же касается ЕГЭ. То вам надо запомнить только 3 ступени:
1.
Биологические потребности. Также они носят названия физиологические, органические, врожденные, первичные, естественные, природные. Это потребность в еде, воде, сексе, сне…
2. Социальные потребности — потребности в общении, уважении, любви.
3. Духовные потребности. Носят еще название культурные или идеальные потребности. Это потребность в самореализации.
Представьте, что вы попали на необитаемый остров. Что вам захочется в первую очередь? Какие мысли возникнут. Да, конечно, что я буду есть и что я буду пить.
Увидев ручей с пресной водой, диких уток и пальмы с бананами, вы будете уже думать о другом… Один ли я? Это потребность в безопасности и в общении.
Вдруг, из диких джунглей выходит прекрасный мачо (или если вы парень, то к вам выходит прекрасная девушка). И вот вы живете на этом острове день, два, месяц… Всё, казалось бы, чудесно, но рано или поздно, вам захочется самореализовать себя. Построить дом, нарисовать картину, сочинить песню… Это уже духовные потребности.
Еще раз подчеркну, что если неудовлетворена потребность биологическая, то о духовной человек не будет думать.
Желаю удачи!
Напоминаю e-mail: [email protected]
Выход за пределы пирамиды Маслоу: новая иерархия человеческих потребностей | Крейг Харпер | Craig Harper Essays
Выход за пределы пирамиды Маслоу: новая иерархия человеческих потребностей | Крейг Харпер | Крейг Харпер Эссе | MediumПервый из серии обзоров новой книги Скотта Бэрри Кауфмана
Transcend: The New Science of Self-Actualization Опубликовано в·
5 мин чтения·
14 апреля 2020 г. Скотт Новая книга Барри Кауфмана уже доступна.Гуманистическое понятие самоактуализации является краеугольным камнем психологических программ и проникает в более широкие социальные дискуссии о вкладе… и заинтересованный исследователь в сексуальности и политических вопросах. Посты о психологии, науке и образовании. Твиттер: @CraigHarper19
Еще от Крейга Харпера и Крейга Харпера Эссе
Крейг Харпер
в
Теория отказа: краткое введение
Теория отказа — это криминологический феномен, который описывает, как преступники прекращают свое преступное поведение.
Это особенно…6 min read·Aug 2, 2013
Craig Harper
in
Почему мы должны поддерживать антиконтактных педофилов в Твиттере
9004 1 Недавняя статья в The Sun вновь вызвала обеспокоенность о том, как газета обсуждает вопросы, касающиеся сексуальных преступлений…
Чтение через 6 мин·25 декабря 2017 г.
Крейг Харпер
в
Давайте поговорим о сексе (куклы)
Могут ли секс-куклы быть силой хорошо или все плохо? Вот доказательства.
·Чтение через 10 минут·10 февраля 2018 г.Крейг Харпер
в
Четыре проблемы с теорией микроагрессии на данный момент. Однако имеет ли эта концепция большой вес с научной точки зрения?
·2 минуты чтения·19 апреля 2018 г.Просмотреть все от Крейга Харпера
Рекомендовано Medium
Недостойно
10 секунд, которые закончились моим 20-летним браком
В Северной Вирджинии август, жарко и влажный.
Я до сих пор не принял душ после утренней пробежки. На мне моя домохозяйка… ·Чтение на 4 мин.·16 февраля 2022 г.Алейд тер Вил
в
10 вещей, которые нужно делать вечером вместо просмотра Netflix
Привычки без устройств для повышения продуктивности и счастья.
·5 мин чтения·15 февраля 2022 г.Списки
Самосовершенствование 101
20 историй·72 сохранения
Истории, которые помогут вам жить лучше
21 история·53 сохранения
Руководство по выбору, Планирование и достижение личных целей
13 историй·58 сохранений
Продуктивность 101
20 историй·64 сохранения
Alex Mathers
14 вещей, которые я хотел бы знать в 25 лет (сейчас мне 38)
Пишу вскоре после своего 38-летия. Пришло время задуматься.
·4 минуты чтения·27 декабря 2022 г.Zulie Rane
in
Если вы хотите стать творцом, удалите все (кроме двух) платформы социальных сетей
90 041 В октябре 2022 года в течение всего Фиаско Илона Маска, я наконец-то удалил Твиттер со своего телефона.
Примерно в то же время я также вышел из…
Ник Виньялл
3 привычки, которые сделают вас ментально сильным · 2 апреля
Дариус Фору
3 привычки, которые саботируют вашу жизнь
Эти привычки разрушают вашу самодисциплину 0007
Карьера
Преобразование текста в речь
Мотивация и человеческий потенциал – наука о человеческом потенциале
Собираем все вместе: иерархия человеческих потребностей МаслоуКлассическая экономическая теория, основанная на неадекватной теории человеческой мотивации, может быть революционизирована путем принятия реальности высших человеческих потребностей, включая импульс к самоактуализации и любовь к высшим ценностям.
Абрахам Маслоу
Как показано в главе 1, Абрахам Маслоу, психолог-гуманист, предложил (1943), часто изображаемый в виде пирамиды (см. рис. 4.7). Пирамида Маслоу объединяет первичные (биологические) и вторичные (психологические) потребности в одну всеобъемлющую схему, изображающую состояние человека.
Базовые физиологические потребности составляют основу пирамиды, за которой следуют безопасность и защищенность, чувство принадлежности (то есть любовь и межличностные отношения), самооценка (т. на вершине пирамиды.
Рис. 4.5 Иерархия человеческих потребностей Маслоу.
Иерархия Маслоу — это проницательная и конструктивная схема для организации и определения приоритетов аспектов человеческого состояния. Он обеспечивает осмысленную линзу, через которую можно увидеть различия между адаптивными потребностями разных культур. Согласно Маслоу, цель адаптации человека состоит в том, чтобы подняться по пирамиде и в конечном итоге достичь самореализации.
Опишите каждый из уровней пирамиды человеческих потребностей Маслоу.
Реализация нашего потенциала в различных человеческих условиях Чтобы продемонстрировать крайнюю изменчивость человеческих условий, схема Маслоу может служить основой для изучения различий между культурами каменного века и технологически развитыми культурами.
Очевидно, что Нукак должен затрачивать гораздо больше времени и усилий, чем мы, чтобы удовлетворить базовые потребности выживания в основании пирамиды Маслоу.
Самоактуализация относится к достижению личных целей и реализации своего потенциала. Часто предполагается, что самореализация достигается через творческие и художественные усилия. По большей части личные цели нукак связаны с выживанием и семейными потребностями. Реализация своего потенциала требует времени и возможностей, которых у Нукака нет в большом количестве. Как мы видели, почти все их дни заняты деятельностью, связанной с выживанием. К ним относятся поиск пищи, приготовление пищи, изготовление инструментов, перемещение и строительство новых убежищ. Тем не менее, Нукак удается демонстрировать такие чисто человеческие творческие способности, как раскрашивание лица и тела и ношение украшений. Они делают флейты на плоской стороне длинных костей ягуара или оленя с мундштуками из пчелиного воска. Такие флейты имеют важное символическое и ритуальное значение у многих племен Амазонки (Politis, 2007, 219).
). Раскрашивание тела с использованием растительных красок служит средством обозначения своего пола и групповой принадлежности. Роспись тела является более обширной и сложной при подготовке к встречам и церемониям (Политис, 2007, 83). Считается, что краска может действовать как средство от насекомых. Многие взрослые и дети нукаков обоих полов носят ожерелья из зубов обезьян.
Видео
Посмотрите следующее видео, демонстрирующее художественную и музыкальную деятельность Нукак:
В отличие от Нукак, нам не нужно тратить большую часть нашего времени и сил на то, чтобы просто дожить до следующего дня. Существует постоянно растущее разнообразие образовательных, карьерных и досуговых возможностей. Тем не менее, многие сталкиваются с препятствиями в достижении своих целей или реализации своего потенциала.
Каковы перспективы самореализации в технологически продвинутом мире?
Во-первых, необходимо признать важность «я» в «самореализации». То есть «цели» и «свой потенциал» субъективны и должны определяться каждым человеком для себя. Эта мысль отражена в самой известной цитате из Декларации независимости: «Мы считаем самоочевидными те истины, что все люди созданы равными, что их Создатель наделил их определенными неотъемлемыми правами, среди которых жизнь, свобода и стремление к счастью». Самореализация и счастье — неуловимые понятия. Джонатан Хайдт открывает свою книгу, 9 лет0003 Гипотеза счастья (2006), с вопросами: «Что мне делать, как мне жить и кем мне стать?» Несмотря на все наши технологии, существуют ограничения на то, что мы можем делать, как мы можем жить и кем мы можем стать. Если мы не однояйцевые близнецы, у каждого из нас есть свои собственные генетические данные, что приводит к различиям в легкости обучения разным типам поведения. Как бы мы ни старались, никто из нас не может летать, как Супермен.
Некоторым из нас легче изучать математику, чем говорить на иностранном языке, в то время как для других верно обратное. Некоторые из нас живут в среде, которая поддерживает наше поведение, в то время как другие не одобряют или считают опасным вести себя так же. Некоторые из нас растут в привилегиях, а другие сталкиваются со значительными экономическими препятствиями и барьерами. У некоторых из нас есть гладкий и прямой образовательный и карьерный путь. Другие из нас идут по «длинной и извилистой дороге» в жизни.
Опишите различия в том, как культуры каменного века и технологически развитые культуры удовлетворяют свои потребности в самореализации.
Неважно, в каких жизненных обстоятельствах и где мы живем на земле, сутки длятся 24 часа. Наши уникальные человеческие условия могут быть представлены в виде круговых диаграмм, в которых срезы показывают, как мы проводим свое время каждый день. Из-за условий, в которых они живут, более половины бодрствующей жизни Нукака посвящено потребностям выживания.
Относительно мало времени остается для удовлетворения межличностных потребностей и потребностей в уважении, не говоря уже о самореализации. Для сравнения, студенты колледжей в нашей высокотехнологичной среде могут посвятить гораздо больше времени бодрствования этим «более высоким» уровням пирамиды человеческих потребностей Маслоу.
Иерархия человеческих потребностей Маслоу использовалась в качестве организационной схемы для сравнения и противопоставления человеческих условий кочевого каменного века и технологически продвинутых культур. При отсутствии излишков продовольствия жизнь представляет собой ежедневную борьбу за выживание. Плотность населения и социальные сети минимальны. Дополнительное обучение не требуется, и примеров художественного творчества немного.
Технологии могут освободить человека от борьбы за удовлетворение основных физических потребностей. Большую часть детства и юности можно посвятить школьному обучению. По мере того, как все больший процент населения приобретает навыки чтения, письма и количественного анализа, все больше людей могут внести свой вклад в культурные знания, технологии и творчество.
Социальные, профессиональные и творческие возможности, доступные человеку, зависят от существующих технологий. Жизнь становится приспособлением к созданному человеком миру.
Создание подробной личной круговой диаграммы с записью и графическим изображением того, как вы проводите свое время, — это способ объективно описать, кто вы есть и кем хотите стать. Этот процесс может быть диагностическим и предписывающим в отношении достижения целей самореализации. То есть реализацию своего потенциала можно считать упражнением в тайм-менеджменте.
Всякий раз, когда вы переживаете переходный период в жизни, меняется и то, как вы должны проводить свое время. Это относится к тому, когда вы начинаете ходить в школу, устраиваетесь на работу, посвящаете себя любимому человеку, рожаете ребенка, продвигаетесь по карьерной лестнице и выходите на пенсию. Вау, это было быстро! Давайте замедлим ход событий, сосредоточившись на этом особом и особенном периоде вашей жизни.
Будучи студентом колледжа, вы посвятили себя пирогу, требующему определенных кусочков. В дополнение к требованиям безопасности и выживания, вы должны посещать занятия и готовиться к экзаменам. В противном случае вам придется «испечь» другой пирог!
Первым шагом в создании личной круговой диаграммы является ведение дневника того, как вы проводите свое время каждый день. Учитывая тот факт, что ваше расписание может быть нерепрезентативным в начале семестра, вам, вероятно, потребуются данные как минимум за две недели. Вероятно, можно предвидеть некоторые «кусочки» пирога (т. е. значимые временные блоки). Например, сон, скорее всего, будет составлять примерно треть вашего пирога (то есть 8 часов в сутки). Еще один кусочек можно выделить для «запуска» и «завершения» (например, умывания, чистки зубов и т. д.) каждый день, а еще один — для приема пищи. Время будет проведено в классе несколько дней (еще один ломтик), а также на изучении и выполнении заданий (еще один ломтик). Время будет потрачено на общение с друзьями и семьей.
Многие из моих учеников используют такие приложения, как Screentime и Moment, чтобы контролировать и ограничивать время, затрачиваемое на потоковое вещание, прослушивание музыки, общение в социальных сетях и видеоигры. Если вы работаете, должны быть включены часы, проведенные на работе и в поездках на работу (что также может относиться к студентам, не проживающим в общежитии).
Если вы ведете дневник, суммируйте количество часов, проведенных в разных категориях (срезах) в конце репрезентативной недели. Размер каждого фрагмента (т. е. процент пирога) будет равен общему количеству часов в категории, разделенному на 168 (24 часа x 7 дней). Если у вас возникли проблемы с назначением некоторых действий, можно создать срез «Разное». В последующих главах мы будем ссылаться на данные, которые вы собираете, когда будете обдумывать, что представляет собой самоактуализация на данном этапе вашей жизни (т. е. ваша «идеальная» круговая диаграмма). Для этого может потребоваться создание другого фрагмента или даже отдельной диаграммы (например, цифрового мира или экранного времени).