Daniel
и склада горячего не будет
Nikolay
сычь
Daniel
и план поддержки никакой, кроме дефолтного
Alex
Alex
Это ж просто фантастика предоставлять данные которые надо дедуплицировать в csv.
Nikolay
Nikolay
эффективные менеджеры ничего кроме excel не знают
Nikolay
они не виноваты
Nikolay
что они такие
Леннарт Zh 🕊
>
Alex
Пришла мне здоровая база адресов, 200000+ строк на файл. Потому что CSV, хрен поймешь, какие значение заполнены, какие пустые. Удалять ненужные значения понятия не имею как.
В этом CSV еще и дубликаты расставлены по непонятному принципу. Писать скрипт на коленке - не до этого после 13 часов переписывания своего же говнокода.
Иду, экспортирую в Эксель. Он виснет минут на десять, потому что причина, выдаёт мне данные. Дубликаты успешно убираю, а пустые строки на Маке Эксель не умеет прослеживать. Всё равно надо поверх этого писать костыль, чтобы Питон нормально пропарсил адреса.
Alex
Кстати, там был не только csv. Ещё и vrt, но я в это поле geojson не хочу ходить - хрен знает сколько миллионов кривых файлов он мне выдаст.
Nikolay
Konstantin
я тут 2-гиговый xml парсил и распихивал по 5 таблицам, тоже весело
Nikolay
питон на раз-два такое щелкает же
Nikolay
лишь бы памяти хватило 🌚 ; в 2.7 функциональные методы выплевывают лист, в 3.х уже итераторы
Nikolay
мне прост при аналогичной задаче не хватило памяти; заюзал аналоги из itertools в 2.7
Nikolay
ну ладно, у меня просто тачка слабая, 4 гига, х86 с PAE и hdd
Sergey
lxml iterparse
Sergey
я тут 2-гиговый xml парсил и распихивал по 5 таблицам, тоже весело
Sergey
лишь бы памяти хватило 🌚 ; в 2.7 функциональные методы выплевывают лист, в 3.х уже итераторы
Nikolay
lxml вообще вещь 👍, ну я его как бекенд к bs4 только юзаю; встроенный html.parser такой медленный
Alex
Я завтра это счастье в XLSX на 200к строк буду преобразовывать в удобоваримый джейсон для проекта. Будет длиннющий массив из документов или массивов. Тоже не фонтан, но хотя бы смотреть без слёз можно будет и для питона окей.
И так ещё четыре-пять файлов.
Alex
ну ладно, у меня просто тачка слабая, 4 гига, х86 с PAE и hdd
У меня Мак Кор 2 Дуо 2.2 ГГц + 8 памяти и ССД.
Alex
Раскочегаривается до 90 градусов.
Alex
Впредь такие глупости буду на Амазоне делать, там Вин 10 стоит на 2 Xeon E5 + 8 RAM. Промо-коды спасают, конечно :)
Леннарт Zh 🕊
Леннарт Zh 🕊
нагугливаются?
Alex
нагугливаются?
Не.
Со всяких ивентов по $100 и тп. Напиши в личку, скину ссылки.
А вообще, на биткоин-форуме их завалом. За $6, $10, $20 продают. Только не надо перебарщивать, а то Амазон к этому делу нехорошо относится.
Я своему австралийцу уже продал 3 кода баксов за 90 :)
Roki
Возвращаясь к ночному спичу о зарплате и жилье. Вот исповедь сотрудника фейсбука, бывшего... https://vc.ru/p/fb-salary
Roman
Dan
террабайтник умирал потихоньку, и использовался вообще в основном исключительно для крайне редкого обращения к нему. сейчас даже не определяется, щёлкает и щёлкает. есть ли гипотетическая возможность относительно бесплатно снять инфу с него? или всё?
Dan
ценность инфы сомнительна, поэтому деньги на восстановление серьёзное тратить точно не буду )
Daniel
все, наверное
Dan
если на замену ему wd blue, это адекватно?
Daniel
я там, где скорость не нужна, ставлю грины
dm
если инфа не важна можно потренироваться https://www.youtube.com/watch?v=F5Y7BniaRXg
Dan
Dan
если во мне уже три по 50 водки - я могу попробовать? )))))
Dan
или лучше завтра?
Dan
видео просто волшебное. вообще. магия
dm
в идеале нужно еще место почище, без пыли )
maniac
https://www.youtube.com/watch?v=w2pf8iUgqqQ
я примерно вот этим уже второй день перед работой страдаю
maniac
пытаюсь оживить свой старый palm Vx
maniac
еще бы руки из плеч росли, вообще бы просто было
Anonymous
Прива всем
Anonymous
Аллоха
Logan
террабайтник умирал потихоньку, и использовался вообще в основном исключительно для крайне редкого обращения к нему. сейчас даже не определяется, щёлкает и щёлкает. есть ли гипотетическая возможность относительно бесплатно снять инфу с него? или всё?
специализированная компания спасет данные. Но денег возьмут - вагонетку.
Logan
если инфа не важна можно потренироваться https://www.youtube.com/watch?v=F5Y7BniaRXg
это гипер-опасный маневр, и после этого диск пригоден максимум к копированию данных на новый сразу же. После этого его можно смело выкинуть
Logan
и очиститель воздуха
Dan
да ну нафиг
Dan
только что из трех трупов одного живого сделал
Dan
лол
Logan
я бы побоялся
Dan
пфф
Dan
сразу видно не был женат
Dan
и детей нет
Dan
не. вручную запарковал
Дима
сурово))
Dan
пофиг. новые едут. а важные данные продублированы
Dan
у меня тут еще WD10 EADX-22TDHB0 вот ожить хочет похоже
Dan
грин
Dan
а нет, там-таки всё плохо )))
dm
еще с гелиевыми уже не прокатит такое наверное
Dan
http://pastebin.com/QzKLxm8N
Dan
зацените смарт )
Dan
дохлик, мать его, стартует, но форматироваться не хочет, там бэды видимо в самом начале
Дима
Сдох значит сдох