「CSV」カテゴリーアーカイブ

bash の危険な算術式 – どさにっき

bash の危険な算術式 - どさにっき

bash の危険な算術式 - どさにっき

■ bash の危険な算術式 _ 使ってる人がいちばん多いだろうからタイトルでは bash としてるけど、ここで取り上げることは zsh および ksh 一族(本家 ksh、pdksh、mksh)にも該当する。ash、dash などでは該当しない。 _ 以下のシェルスクリプトには脆弱性がある。わかるだろうか。 #!/bin/bash # "品目,単価,個数" の形式...

はてなブックマーク - bash の危険な算術式 - どさにっき はてなブックマークに追加

Python で大量のファイルを並列で速く読み込む – Qiita

Python で大量のファイルを並列で速く読み込む - Qiita

Python で大量のファイルを並列で速く読み込む - Qiita

from glob import glob files = glob('data/*.csv') len(files) # 10000 この 1万件の CSV ファイルを Pandas DataFrame として読み込みたい。 ちなみに検証用のデータは以下のようにして生成した。 (3列 x 10,000行 の CSV ファイル 10,000 個) import numpy as np import pandas as pd row_n = 10000 col_n = 3 column...

はてなブックマーク - Python で大量のファイルを並列で速く読み込む - Qiita はてなブックマークに追加

Kaggleで使える!Pandasテクニック集 – Qiita

Kaggleで使える!Pandasテクニック集 - Qiita

Kaggleで使える!Pandasテクニック集 - Qiita

はじめに Kaggleで使えるPandasの使い方を備忘録として残します。 随時更新していく予定です。 Pandas Basics Cheat Sheet(基本的な使い方) [引用]https://becominghuman.ai/cheat-sheets-for-ai-neural-networks-machine-learning-deep-learning-big-data-678c51b4b463 プログレスバーを表示する df.apply()やdf.map()...

はてなブックマーク - Kaggleで使える!Pandasテクニック集 - Qiita はてなブックマークに追加

Ruby 2.6.0とより高速なcsv – ククログ(2018-12-25)

Ruby 2.6.0とより高速なcsv - ククログ(2018-12-25)

Ruby 2.6.0とより高速なcsv - ククログ(2018-12-25)

Rubyの標準添付ライブラリーのcsvをメンテナンスしている須藤です。 歴史 csvは名前の通りCSVを読み書きするための便利ライブラリーです。 もともとRuby本体とは別に開発されていたのですが、Ruby 1.8.0のときにRuby本体にバンドルするようになりました。dRubyやREXMLがRuby本体にバンドルされたのも同じタイミングです...

はてなブックマーク - Ruby 2.6.0とより高速なcsv - ククログ(2018-12-25) はてなブックマークに追加

ExcelにPythonが搭載?その後 – xlwings を使おう – Qiita

ExcelにPythonが搭載?その後 - xlwings を使おう - Qiita

ExcelにPythonが搭載?その後 - xlwings を使おう - Qiita

マイクロソフトが Excel に Python を搭載することを検討しているというニュースが流れたのは1年前のことで、結構話題になりました。昨年の Python Advent Calendar 2017 では、ExcelにPythonが搭載されることを期待して「ExcelにPythonが搭載?」という記事を書きましたが、今回は、その続編を書きます。 そのニュース...

はてなブックマーク - ExcelにPythonが搭載?その後 - xlwings を使おう - Qiita はてなブックマークに追加

月数100万アクセスをDB使わず超簡単にさばく – Qiita

月数100万アクセスをDB使わず超簡単にさばく - Qiita

月数100万アクセスをDB使わず超簡単にさばく - Qiita

初Qiitaな個人開発者のひさしAppと申します @Hisashi_vc 最近「じぶんコイン」というコイン系SNSサービスを作り、月間100万~数百万アクセスを激安サーバー(1000円ちょい)でさばき中です。 じぶんコイン https://crypto-app.tokyo/qCoin/?m=hisashi_vc おまけになかなかの高負荷で、3ヶ月で数百万回送金したり、10連...

はてなブックマーク - 月数100万アクセスをDB使わず超簡単にさばく - Qiita はてなブックマークに追加

CSV に SELECT / UPDATE クエリを実行できる VS Code の拡張機能「Rainbow CSV」 – kakakakakku blog

CSV に SELECT / UPDATE クエリを実行できる VS Code の拡張機能「Rainbow CSV」 - kakakakakku blog

CSV に SELECT / UPDATE クエリを実行できる VS Code の拡張機能「Rainbow CSV」 - kakakakakku blog

定期的に CSV からデータを抽出する機会があり,抽出条件によって,今までは以下のような方法を使っていた. CSV を Excel で開いてフィルターを使う方法 CSV を grep / egrep などの Linux コマンドで絞り込む方法 CSV をAmazon S3 にアップロードして Amazon S3 Select でクエリを実行する方法 Rainbow CSV 新しい方法...

はてなブックマーク - CSV に SELECT / UPDATE クエリを実行できる VS Code の拡張機能「Rainbow CSV」 - kakakakakku blog はてなブックマークに追加

【ExcelとCSV】本気で理解したい初心者のためのCSV勉強会資料 – わえなび ワード&エクセル問題集

【ExcelとCSV】本気で理解したい初心者のためのCSV勉強会資料 - わえなび ワード&エクセル問題集

【ExcelとCSV】本気で理解したい初心者のためのCSV勉強会資料 - わえなび ワード&エクセル問題集

エクセルでCSVを保存?変換? CSVファイルをエクセルで開くと壊れる? 仕事でCSVファイルを扱うことがあります。 しかし、「CSVの意味」を本気で教えてくれる人はなかなかいません。 それは、「CSV」を本質的に理解するには、その前提となる知識が必要で、仕事中にそんな面倒くさい説明をするヒマがないからです。 今回...

はてなブックマーク - 【ExcelとCSV】本気で理解したい初心者のためのCSV勉強会資料 - わえなび ワード&エクセル問題集 はてなブックマークに追加

CSVの処理で使えそうなコマンドラインツール(column, textql, csvkit, xsv, visidata, csvtotable, daff, tabview) – もた日記

CSVの処理で使えそうなコマンドラインツール(column, textql, csvkit, xsv, visidata, csvtotable, daff, tabview) - もた日記

CSVの処理で使えそうなコマンドラインツール(column, textql, csvkit, xsv, visidata, csvtotable, daff, tabview) - もた日記

column textql csvkit xsv visidata csvtotable daff tabview CSV(またはTSV)を処理するときにはcut, sort, awk, paste, joinといったコマンドを使うことが多いが、CSVの処理で使えそうなコマンドラインツールを簡単に試してみる。 テスト用のCSVデータは下記ページで作成した。 Mockaroo - Random Data Generator and...

はてなブックマーク - CSVの処理で使えそうなコマンドラインツール(column, textql, csvkit, xsv, visidata, csvtotable, daff, tabview) - もた日記 はてなブックマークに追加