※当サイトの記事には、広告・プロモーションが含まれます。

CSV(Comma Separated Values)

Linuxのheadコマンドでマイナスを指定することで行数の上限設定ができるという話

www.itmedia.co.jp 米Google傘下のGoogle DeepMindは12月14日(現地時間)、LLM(大規模言語モデル)とLLMによる幻覚(ハルシネーション)を防止する“評価器”を組み合わせた新たなシステム「FunSearch」を発表した。長年解決不可能な数学問題とされてきた「C…

シェルスクリプトでShift-JISのCSVファイルのヘッダー行を判定するには

gigazine.net ただし、法執行機関による公共の場での生体認証技術の利用は完全には禁止されず、厳密に定義された犯罪リストに対してはAIの利用が許可されます。具体的には「重大な犯罪を犯した疑いのある人物、あるいは有罪判決を受けた人物に対象を絞った捜…

PowerShellでCSVファイルの列(カラム)の全ての値のデータ型をチェックしたい

www.itmedia.co.jp 見立てに誤りがあった原因は、引継ぎの不足だ。実は、移行を担当した人物は入社2カ月ほど。前任者からファイルサイズについては話を聞いていたものの、ファイル数については共有されていなかったという。 「Google Cloudのデータ転送で課…

Linuxのcolumnコマンドを使う時の区切り文字はカンマにするのが良さ気

jbpress.ismedia.jp ⇧ 250年って数字はどこから出てきたのか謎ですが、身体機能を保ったまま寿命を延ばせるとなった時代が到来した世界線で、定年が更に引き延ばされそうな暗い未来しか想像できない... いまの人生100年時代の定年が65歳とした場合、人生の65…

シェルスクリプトとawkのコーディング練習として、CSVファイルの加工をする

www.itmedia.co.jp TOP500は、米コロラド州デンバーで開催しているHPCの国際会議「SC23」で14日(現地時間)に公表された。米国の新型スパコン「Frontier」などが1位から3位までを占め、富岳は4位だった。AIの深層学習などに用いる単精度や半精度演算処理に…

awkでCSVファイルの内容を加工して新たなCSVファイルに出力してみる

cloud.watch.impress.co.jp gihyo.jp ⇧ 大規模なシステムになるほど、要件や仕様が定義された経緯や背景が、ドキュメントや実装から読み取れない部分が多くなってくると思うので、引継ぎした担当者はシステムに対して理解が不十分な状態で新規機能の追加や改…

シェルスクリプトで名前空間っぽいことしたい

codezine.jp github.com ⇧ 是非とも成功して欲しいプロジェクトですな、御武運長久。 シェルスクリプトで名前空間っぽいことしたい シェルスクリプトで、関数などの名前が被るのはNGということで、「名前空間」っぽいことを実現したいと思っていたところ、 y…

PythonでCSVファイルのバリデーションはなかなかに辛い...

gigazine.net ⇧ 本当に、保存期間が1万年であるのか検証しようのないところが辛いところですな... PythonでCSVファイルのバリデーションはなかなかに辛い... もしかしたら、PythonでCSVファイルのバリデーションをすることになるかもしれないということで、…

JavaのJVMのオプションの設定が分かり辛いが、明示的に設定しないとデフォルト値が使われる模様

www.itmedia.co.jp ⇧ X(旧:Twitter)で話題になってたけど、研究が続いていたんですな、餃子が食べたくなりますな。 JavaのJVMのオプションの設定が分かり辛いが、明示的に設定しないとデフォルト値が使われる模様 Javaのアプリケーションを起動する際に、…

javaコマンド実行時のオプション-Xmxの設定が効いているのか確認してみた

nazology.net ⇧ 宇宙に移住する日が来ますかな... javaコマンド実行時のオプション-Xmxとは Oracleのドキュメントによりますと、 docs.oracle.com -Xmxsize メモリー割当てプールの最大サイズ(バイト単位)を指定します。この値は、1024の倍数で、2Mバイトよ…

シェルスクリプトで日付のフォーマットだけ変数に格納したい

japan.zdnet.com GitHubは米国時間9月21日、新たなレポート「GitHub Innovation Graph」を公開した。 GitHub、「GitHub Innovation Graph」公開--日本からは247万人以上が開発に関与 - ZDNET Japan GitHub Innovation Graphは、gitプッシュ、言語、エコノミ…

Linuxでawkを使って既存CSVファイルの重複行を除外して新規CSVファイルを作成する

gigazine.net ソフトウェアにおいて、システムの安全性が保てなくなるような設計ミスなどのことを脆弱性と言います。ソフトウェア開発にはバグがつきもので、毎月のように多数の脆弱性が発見されているため、全ての脆弱性に対応するのは難しいもの。そうした…

Linuxで既存CSVファイルの範囲指定した行や列の内容を抽出して新規CSVファイルを作成する

japan.zdnet.com 今回が初来日となるStaples氏は、MicrosoftやAdobe、そしてNew Relicといった企業での経験を通して、これまで30年近くソフトウェア開発に携わってきたという。その中で、ソフトウェアが人々の生活を変え、豊かにするのを見てきたが、ソフト…

CSVファイルをExcelで編集するとzero paddingが消失するので、Javaで日付のチェックについて考えてみた

japan.cnet.com ⇧ Oh, my gosh... CSVファイルをExcelで編集するとzero paddingが消失するので、Javaで日付のチェックについて考えてみた ダウンロードしたCSVファイルをExcelで編集した後に、アップロードしたら、何故か日付データのフォーマットチェックが…