Информация про датафрейм

Оценить статью

Как вывести полную информацию про данные в таблице


import pandas as pd
dash_visits = pd.read_csv(‘https://eddydewrussia.ru/download/dash_visits/?wpdmdl=5230&refresh=628248a4c31221652705444’)
# функция для вывода информации о данных
def dataset_info(data):
print(‘\033[1m’ + ‘Строки – полные дубликаты:’ + ‘\033[0m’)
display(data[data.duplicated(keep=False)])
print(‘\033[1m’ + ‘Названия колонок:’ + ‘\033[0m’)
print(data.columns)
print()
print(‘\033[1m’ + ‘Первые строки:’ + ‘\033[0m’)
display(data.head(3))
print(‘\033[1m’ + ‘Информация о датафрэйм:’ + ‘\033[0m’)
display(data.info())
print(‘\033[1m’ + “describe” + ‘\033[0m’)
display(data.describe())
print(‘\033[1m’ + “Количества и доли отсутствующих значений” + ‘\033[0m’)
display(pd.concat([data.isna().sum(), data.isna().mean()], axis=1)\
.rename(columns={0:’кол-во’, 1:’доля’})\
.style.format({‘кол-во’:'{:.0f}’, ‘доля’:'{:.2%}’}))
# применение функции
dataset_info(dash_visits)

Результат

Строки - полные дубликаты:
Unnamed: 0 record_id item_topic source_topic age_segment dt visits
Названия колонок:
Index(['Unnamed: 0', 'record_id', 'item_topic', 'source_topic', 'age_segment',
       'dt', 'visits'],
      dtype='object')

Первые строки:
Unnamed: 0 record_id item_topic source_topic age_segment dt visits
0 0 1040597 Деньги Авто 18-25 2019-09-24 18:32:00 3
1 1 1040598 Деньги Авто 18-25 2019-09-24 18:35:00 1
2 2 1040599 Деньги Авто 18-25 2019-09-24 18:54:00 4
Информация о датафрэйм:
<class 'pandas.core.frame.DataFrame'>
RangeIndex: 30745 entries, 0 to 30744
Data columns (total 7 columns):
 #   Column        Non-Null Count  Dtype 
---  ------        --------------  ----- 
 0   Unnamed: 0    30745 non-null  int64 
 1   record_id     30745 non-null  int64 
 2   item_topic    30745 non-null  object
 3   source_topic  30745 non-null  object
 4   age_segment   30745 non-null  object
 5   dt            30745 non-null  object
 6   visits        30745 non-null  int64 
dtypes: int64(3), object(4)
memory usage: 1.6+ MB
None
describe
Unnamed: 0 record_id visits
count 30745.00000 3.074500e+04 30745.000000
mean 15372.00000 1.055969e+06 10.089673
std 8875.46135 8.875461e+03 19.727601
min 0.00000 1.040597e+06 1.000000
25% 7686.00000 1.048283e+06 1.000000
50% 15372.00000 1.055969e+06 3.000000
75% 23058.00000 1.063655e+06 10.000000
max 30744.00000 1.071341e+06 371.000000
Количества и доли отсутствующих значений
  кол-во доля
Unnamed: 0 0 0.00%
record_id 0 0.00%
item_topic 0 0.00%
source_topic 0 0.00%
age_segment 0 0.00%
dt 0 0.00%
visits 0 0.00%

pandas python dataframe

Проверка на уникальность

Оценить статью

Задача:

Определить, нет ли повторов значений в колонке с номерами идентификаторов.
(проверка на уникальность значений)


import pandas as pd
dash_visits = pd.read_csv(‘https://eddydewrussia.ru/download/dash_visits/?wpdmdl=5230&refresh=628248a4c31221652705444’)
#
print(dash_visits[‘record_id’].nunique(), “количество уникальных значений”)
print(len(dash_visits), “количестов строк в таблице”)
if ((len(dash_visits) – dash_visits[‘record_id’].nunique()) == 0):
print(“значения в колонке не повторяются”)
else: print(“есть повторы”)

Результат

30745 количество уникальных значений
30745 количестов строк в таблице
значения в колонке не повторяются

pandas python dataframe

Видео

Донат за восстановление здорового сна

Оценить статью

В апреле этого, 2022 года, я, Эдуард Дементьев, начал вплотную заниматься восстановлением здорового сна у тех, кто страдает бессонницей.

Для привлечения внимания таких людей, мною был запрограммирован тест на определения уровня бессонницы.

Вот он в формате ВКонтакте:

Тест на бессонницу

Распространив этот тест среди пользователей соцсети, я получил пару заявок о помощи в восстановлении здорового сна.

Я был уверен в успехе!
И вот результаты:

Рассказ Юлии:

Юлия рассказывает про свой результат восстановления здорового сна

Видео на хостинге (ссылка)

И Ирины:

Хочу оставить отзыв о курсе по восстановлению сна с Эдуардом Дементьевым.

От нарушений сна я страдаю около 20 лет,
за это время было испробовано все –
традиционное и нетрадиционное,
включая таблетки, гормоны и медитации.

Метод Эдуарда очень необычный, но надо довериться и следовать очень простым рекомендациям.

Эффект – буквально волшебный.

Впервые за долгие годы – я смогла проспать 6 часов крепким сном. Так происходило на протяжение всего курса.

Если у вас или кого-то из ваших близких есть проблемы со сном, рекомендую обратиться к Эдуарду.

(источник)

А сегодня утром меня ждал подарок.

Пришёл денежный перевод в благодарность по сердцу за помощь в восстановлении сна

Скрин перевода

Моя первая презентация

Оценить статью

Я сдал учебный проект на тему визуализации результатов исследования.

В курсе Анализ данных в Яндекс.Практикуме.

Запрос бизнеса звучал так:

“Сможет ли новый ресторан
с официантами-роботами
снискать популярность на долгое время,
когда все зеваки насмотрятся на роботов-официантов?”

Само исследование предоставленных данных занимает более 90 страниц.

А результат – всего лишь 8 слайдов. )))

Видео

Главный мировой секрет

Оценить статью
Примерно с 30й минуты

В течении прошедшего года я как-то раз обдумывал ситуацию с рождаемостью.

И какой момент я проявил:

Раньше (вплоть до революционного поколения), повсеместно было принято, что в семье муж работает, а жена дома. Занимается детьми и хозяйством.

То есть структура экономики. Зарплата и экосистема жизни, позволяли это

Теперь же меня удивляют семьи, которые могут позволить себе, чтобы жена не ходила на работу. Это не являетс нормой. Это стало исключением.

Вся экономическа ситуация и зарплаты, заставляют работать и мужа, и жену.

Вот и Такер в своём выступлении, которое попалось мне сегодня, говорит о том же самом!

И приводит даже примерную дату этого переворота в экономике США.

Неувязочка

Оценить статью

Провидцев,

Впрочем, как и очевидцев…

Грустно, но моя оценка важности истинных настроений жителей центральных областей Украины к действующей власти имеет существенное значение в свете длительности конфликта.

И, увы, похоже, что ВВП был обманут окружением на этот счёт.

(негативное последствие сильного волевого стиля руководства)

Google Play

Оценить статью

Вчера Гугл плэй ОТКЛЮЧИЛ оплату за сервисы всеми Рос. картами и виртуальными счетами.

ЧТО ДЕЛАТЬ?

Ю-мани утверждают, что их пластиком можно платить и сейчас и потом.

ВАЖНО

Карту надо заказать ДО 09 марта .

Я заказал.

Едет почтой
Цитата

О текущем моменте

Оценить статью

Сейчас мы проходим экзамен на разумность

Силовики – это стихия, живущая по своим законам. Испокон веков эта стихия состоит из силовых кланов, находящихся в постоянном переделе сфер влияния.

Для простоты понимания можно представить себе никогда не заканчивающуюся шахматную партию. Где для простых людей – агрессия, трагедия, разрушение жизней и бизнесов, – для этих стихий это простой размен фигурами, который впрочем все равно всегда разумнее производить бескровно, без лишнего ущерба и своим силам, и тому, что делят.

Некоторые силовые кланы недавно стали ядерными. Обрели «бессмертие» за счёт доступа к ядерному оружию, убить один из них – означает уничтожить все человечество. Победа одних над другими теперь немыслима.

Ненависть к любому из них, призывы уничтожить, передать «ядерный чемоданчик» в руки другого клана – идиотизм. Это невозможно. Никакие ядерные силовые кланы не управляются отдельной личностью.

Все кого мы видим – это просто представители, действующие согласно законам этой стихии, а не собственным личностным прихотям.

Никакие ядерные силовые кланы не управляются голосами простых людей. Нигде, ни в какой стране. Большая часть переговоров на высшем уровне – проходят в кулуарах. Остальное – спектакль из заботы и уважения к незрелой психике тех кто ещё не умеет смотреть дальше своего «я».

Среди ядерных силовых кланов нет тех, кто лучше или хуже:

Везде, после победы над фашизмом, остались только адекватные идеологии – кто-то за права человека, кто-то за семейные ценности, кто-то за многонациональное единство.

Везде низкая социальная справедливость – колоссальный разрыв между богатыми и бедными. Везде это уже понимают и начинают ориентироваться на социализм.

Взаимный ядерный паритет даёт возможность больше не заниматься собственным выживанием и истреблением оппонентов, с тем чтобы стать единственным, а создаёт условия для чего-то более полезного.

То, что сейчас происходит – это ураган, стихийное бедствие в следствие того, что силовые кланы не договорились друг с другом в кулуарах. Обижаться на стихию – бесполезно. Кричать ей ура или просить ее остановиться – тоже. Единственное, что разрешит эту ситуацию – достижение договорённостей. Проявление разумности. При жестком переделе сфер влияний простые люди не выигрывают никогда. Простые люди и малый бизнес могут нормально развиваться только в условиях стабильности, когда сферы передаются плавно, в результате договорённостей и реформ. Простые люди – вообще никак не могут на эти договоренности повлиять. Лишь в некоторой мере замедлять их достижение.

Разжигание любой ненависти в медиа – только создают лишнюю инерцию. Если сейчас силовики вдруг договорятся, ещё очень долго политикам, обслуживающим их по инерции придётся публично друг друга мочить, жертвовать собственным экономическим развитием, иначе свой же электорат, уже настроенный воинственно, – не поймёт. Чем больше будет взаимного очернения, чем больше излишне горячие головы будут стремиться ужалить друг друга побольнее из неприязни, чем больше это будет приводить к жертвам – тем дольше всем нам без исключения придётся носить траур по этой трагедии.

Не мочите ни чужое правительство, ни тем более своё собственное. Это вот же никак позитивно не повлияет, и вообще ничего кроме усугубления последствий для нас же с вами это не сулит. Всем кто с этим не согласен и считает правильным проявлять сейчас ненависть к кому угодно – предлагаю предьявить разумную, чёткую и последовательную логику, как именно подобное приведёт к позитивным последствиям.

Да, я знаю, что кому-то это больно может быть читать. Да, первое что приходит на ум может быть обвиниение в оправдании “тех, кто развязывает войну”.

Простите меня. Я тоже знаю эту боль потери близких в результате чьих-то действий. Обнимаю вас. Но мне кажется не написать этого было бы еще хуже, потому что отсутствие этого понимания – только раскручивает маховик войны. А фактам – наплевать на наши чувства. Все что мы сейчас можем – утверждать мир. И продемонстрировать, что уже достаточно разумные, чтобы не вестись на поводу у эмоций и лжи. Что мы уже можем видеть реальность такой какая она есть, не отвлекаясь на то, что в ней нравится и не нравится. Достаточно разумные, что в любой ситуации остаёмся людьми друг по отношению к другу.Включайте голову, сердце и берегите друг друга.

из беседы с умным человеком
Цитата

Мнение над дракой

Оценить статью

Часть моих знакомых на всю ленту осуждают действия России в очень красочных эпитетах.

Другая часть – пребывают в ура-настроениях, мол покажем сейчас всем Кузькину мать!

Им сейчас не услышать друг друга. Нечто похожее бывает когда знакомая пара громко и со скандалом расстаётся. Если общаешься с обоими – каждый рассказывает тебе что он д’Артаньян, а другой – мягко говоря ни разу не мушкетёр. Что уж тут поделать. Обнять и попробовать показать более общую картинку, где оба – просто люди. И иногда это может помочь спустя время преодолеть вражду и не отравлять ею свою же собственную жизнь.

Если вы относитесь, к одной из этих двух групп – то имейте ввиду, – обнимаю, приподнимаю:)

Какая тут более общая картинка? Что на самом деле происходит? Вот, как я это вижу.

Человечество – это организм. Каждая страна в нем несёт свои культурные наработки, которые смогут обогащать всех, если обретёт разумность – способность выстаивать разумные гармоничные отношения с остальными.

Культур много и для простоты можно выделить Запад и Восток.

Запад – про яркую индивидуальность распространяемую вовне. Где самые сильные маркетологи и политтехнологи? Кто придумал стартапы, капитализм и американскую мечту? Запад говорит, что личность – имеет право нести себя в мир по принципу внутренней силы, кто смог и пробился – тот молодец и принёс этим остальным что-то новое. У каждого есть голос.

Восток – про глубокое коллективное, ориентированное вовнутрь. Где самые крепкие семейные ценности, традиции, уважение к старшим? Кто заложил фундамент основных религий, самопознания, и понимаете ценности культуры как таковой? Восток безмолвно утверждает что коллективное рождает более глубокие качества, которые в индивидуальном порядке просто не могли бы были проявиться, все то, что и создаёт смысл жизни и потребности тоньше самых базовых.

Благодаря давнему конфликту этих культур человечество то во многом и прогрессирует. Сталкиваясь, они обогащают друг друга.

Россия – исторически находящаяся на перекрестке одного и другого и воплощает уже своё качество. Это про многонациональное единство, – способность разных народов со своими самобытными культурами жить под одной крышей как устойчивое целое, без необходимости чтобы какая-то одна из них победила все остальные. И это тоже полезное качество для всего человечества.

Все что происходит вокруг – следствие того, что эти культуры ещё не умеют понимать друг друга и договариваться между собой. Восток – отгораживается за высоким забором и не прощает обид. Для Запада понятнее и безопаснее – когда все разбивается на маленькие страны и штаты, ведущие друг с другом бизнес по принципу должен победить самый яркий, деловой, довлеющий. Для России – когда не покушаются на многообразие ее внутренних культур и не насаждают какую-то одну, не оказывают давления, ни медийно ни санкционно, ни военными базами по соседству.

Конфликт культур – не что то эфемерное. Это реальное напряжение между группами людей, которое естественным образом нарастает до такой степени, что либо преодолевается вместе как кризис и способствует дальше лучшему взаимопониманию и миру, либо разряжается через острую фазу, хорошо если происходящую бескровно, что приводит к пониманию, что договариваться все таки нужно.

Раньше мир постоянно сотрясали кровопролитные войны, дошло до мировых. Сейчас это уже некоторое время больше сводится к более локальным конфликтам, и не к реальным, а торговым, политическим и медийным войнам. Так что надеюсь что через некоторое время и полюбовно договариваться научатся, как, например, пары освоившие осознанные отношения.

Но вряд ли это наступит раньше, чем друг с другом воевать перестанут хотя бы те, кто сейчас осуждает и говорит что им стыдно за страну и те, кто кричит «ура, давайте всем жару зададим, так им и надо».

из беседы с умным человеком

Внутреннему ребенку

Оценить статью
Я люблю тебя любого
И такого, и сякого.
И красивого и нет
В десять и в что двадцать лет.
Когда плачешь ты, смеёшься ,
Или ты за правду бьешься ,
Когда падаешь, встаёшь,
Фантазируешь и врешь.
Когда топчешь ты ножкой, я с тобою, моя крошка!
Когда ты- взрывной вулкан
и обиды океан .
Когда требуешь ты что- то, когда хочешь ты заботы .
Просто слушай голос мой, просто знай, что я с тобой!
Ты мой маленький комочек, ты- любимый мой дружочек!
В мнонголюдье и в тиши
Берегу хрусталь души.
Ты - птенец, я - мама птица.
Ты- росток, а я- теплица.
Ты- сокровище в судьбе!
Все мне дорого в тебе!
Когда помощи не просишь, когда что то не выносишь, Убаюкаю тебя,
Мое милое дитя.
Безо всякой без причины
я утешу все кручины!
Просто знай ,
что я - тобой,
Внутренний ребенок мой!
Когда даришь ты улыбки.
Когда делаешь ошибки
Мое милое дитя,
знай, что я люблю тебя!
Когда бесишься и злишься, когда много веселиться, когда много говоришь, когда бодрствуешь и спишь.
Когда страшно отчего то, когда страстно ждёшь кого-то,
Каждый, каждый Божий день
Я с тобою, словно тень!
Твои слезы и мечтанья, эйфорию и страданье,
Все заранее приму
И с любовью обниму.
Когда хочешь ты внимания, когда ждёшь ты понимания,
Я с тобой всегда, везде,
и в победах и вы беде
Когда требуешь ты
взбучки
Я беру тебя на ручки.
Я с тобой, душа моя, мое милое дитя!
Я с тобой в минуты спора,
как надёжная опора.
В будний день и выходной
Здесь я, , рядом, я с тобой!
Можешь мне не верит даже,
Только я всегда на страже.
Просто слушай голос мой, просто знай, что я - с тобой!
Я любою тебя любого...