IPOC株式会社 エンジニアリング部隊

データの整備と活用を愚直に考え，データ処理プラットフォーム ETLanTIS を開発し…

IPOC株式会社 エンジニアリング部隊

データの整備と活用を愚直に考え，データ処理プラットフォーム ETLanTIS を開発しています． 株式会社アイネスさんと，ノーコードのデータ処理製品 ALZETA を共同開発しています． https://www.ipoc.co.jp/
  • 固定された記事

自己紹介に代えて - 我々の考え方と技術，その使用例について

これまで note のスタートということで，我々を知っていただくために，仕事内容と意思表明にまつわる記事をいくつか書きましたので，それを一覧にしました！ 1. 自己紹介記事我々が仕事の対象にしている問題と，アプローチの仕方について記述しました． 2. 我々が利用している技術について我々がデータ管理，処理方法の根幹として利用している，伝統的な Linux 上のフラットファイルデータ処理手法について紹介しました． また，データ処理で広く使われている Excel での困りごと

IPOC株式会社 エン…

    • ETLanTIS Excel Add-in のご紹介（2024年4月版）

      ノーコードのわかりやすさ + サーバー上での確実なデータ処理 ↓ Excel 業務を強化します！2024年2月にご紹介した ETLanTIS Excel Add-in の機能強化を行いました． 機能強化の内容 ETLanTIS 本体起動時に ETLanTIS のどの画面を起動するか選べるようになりました！ Add-in で選んだ Job を直接 ETLanTIS コックピットで開けるようになりました！ ワークシート選択範囲のアップロード時に，既存ファイルと重複した名前

      IPOC株式会社 エン…

      • 国別比較 - AWS とビッグマックの価格

        今，AWS の価格を調べています．AWS の品揃えは膨大で，サービスのカテゴリとカテゴリ内の品目と…を掛け算していくと，凄まじいマトリクスになります．サービス品目を見ていくだけでも疲れるのですが，AWS には各国に拠点（リージョン）があって，同じ品目でも各国で価格が違います． これ，個人でも会社でも結構大きな話で，仮に個人で月額 5,000円ぐらい使っていたとすると，日本リージョンからアメリカリージョンに変えるだけで，1,000円ぐらい節約できます． ※1:  仮想サーバ

        IPOC株式会社 エン…

        • ノーコードデータ処理ツール ETLanTIS が Excel から使えるようになりました！

          ノーコードのわかりやすさ + サーバー上での確実なデータ処理 ↓ Excel 業務を強化します！以前からご紹介してきた ETLanTIS（ALZETA）を Excel から便利に使用するために Excel Add-in ソフトウェアを開発しました． この Add-in は Office JavaScript API を利用した Web Add-in (※)ですので，デスクトップ版の Excel だけでなく，Office on the web（Web ブラウザ内で動く M36

          IPOC株式会社 エン…
        • 固定された記事

        自己紹介に代えて - 我々の考え方と技術，その使用例について

        IPOC株式会社 エンジニアリング部隊

        マガジン

        • データは動かしてナンボ - 駆け出し CTO のよしなしごと
          20本

        記事

          阪神の大山選手は，本当に勝負どころで打順が回ってきがちなのかどうかを検証する

          はじめに 華々しい前半戦を戦った我が阪神タイガースですが，後半戦になって勢いが落ち，今日2021年9月9日時点ではペナントレースをなんとかかろうじてリードしている状態です．光明は大山悠輔選手が復調してきてくれたことで，ここ数ゲームは彼が試合を決めてくれています． 大山選手といえば以前から，打順に関係なく，チャンスで回ってくるというジンクスが公然のように語られており，今日の以下のネット記事でも， https://news.yahoo.co.jp/articles/1db5d

          IPOC株式会社 エン…

          阪神の大山選手は，本当に勝負どころで打順が回ってきがちなのかどうかを検証する

          IPOC株式会社 エンジニアリング部隊

          twitter で流れていた Excel の問題を解いてみる 3

          今回のお題はこれです． データの準備Excel でこんなデータを作って， ALZETA にアップロードしました． 中身をプレビューすると， では，これを加工します． データ加工（やり方１）「やり方」というか，「この項目のデータってこういう位置づけなのか？」ということが絡んできますが，もともとの Twitter のお題にあった「在庫数」カラムを使わず直接計算してしまうやり方です． 「中間ファイル」PM を繋いでプレビューしてみますと， あとは，「入庫数」マイナス「

          IPOC株式会社 エン…

          twitter で流れていた Excel の問題を解いてみる 3

          IPOC株式会社 エンジニアリング部隊

          twitter で流れていた Excel の問題を解いてみる 2

          今回のお題はこれです．早速やってみます． データの準備 Excel でこんなデータを作って， ALZETA にアップロードしました． 中身をプレビューすると， データ加工（やり方１）まず，どなたにも無理ない方法です．文字 '_' で分割していくやり方です．ALZETA の「項目分割」PM を接続して，赤枠のように設定します． 「オリジナル」というカラムのデータを '_' で分割して「項目1」というカラムと「項目2」というカラムを作ります． 「中間ファイル」PM を

          IPOC株式会社 エン…

          twitter で流れていた Excel の問題を解いてみる 2

          IPOC株式会社 エンジニアリング部隊

          ある DX 事例（一汁一菜→多国籍料理）

          今回は，ある官公庁様の DX 事例をご紹介します． プロジェクトの内容については，弊社のホームページ内で簡単にご紹介しています． https://www.ipoc.co.jp/case01/ ご提案時の幸運 このプロジェクトは非常に幸運な出会いから始まりました．お客様は，バラバラの，しかも頻繁に項目定義が変更される XML ファイルで提供される帳票データをいかに検索するか，という課題をお持ちでした．そんな中，ALZETA のデモをご覧いただき，「データ項目の追加，名称変

          IPOC株式会社 エン…

          ある DX 事例（一汁一菜→多国籍料理）

          IPOC株式会社 エンジニアリング部隊

          ALZETA を使った JOB 開発プロジェクトを外部委託する場合

          以前の記事で，社内のユーザーと情シスの間で ALZETA が有効に使えることを説明しました． 同じことが，外部のシステム開発会社に JOB 作成を依頼するときにもあてはまります．ただし，外部委託の場合はどうしても契約，金銭のやり取りが発生しますので，あらかじめ進め方について双方で取り決めをしておく必要があります． その取り決めの内容を１から作成するのは大変ですので，IPOC で支援した JOB 作成プロジェクトの実績をもとに，プロジェクトガイドを作成しています．その内容を

          IPOC株式会社 エン…

          ALZETA を使った JOB 開発プロジェクトを外部委託する場合

          IPOC株式会社 エンジニアリング部隊

          NVMe over TCP を試す

          背景 NVMe は SCSI に変わるストレージ通信プロトコルで，SSD，フラッシュストレージの転送能力を最大限に活かすことができます．NVMe は PC やワークステーションの内蔵ディスクとしてよく用いられるようになってきましたが，NVMe-oF という，筐体間 NVMe を実現する規格が標準化され，対応製品が登場してきたことにより，大規模サーバー環境で用いられる SAN を NVMe で構築することができるようになってきました． iSCSI の後継としての NVMe o

          IPOC株式会社 エン…

          NVMe over TCP を試す

          IPOC株式会社 エンジニアリング部隊

          twitter で流れていた Excel の問題を解いてみる

          こんな問題を見つけました． 面白い問題だったので ALZETA で解くことができるか試してみました． 問題の定義と難しさExcel の H〜L列で，「区分1〜4の値のパターンとそれに対応する結果値」が定義されています．この定義に基づいて，A〜D列の区分1〜4値に応じた結果値を決定して E列に記入する．という問題だと解釈できます． ALZETA では，H〜L列 と A〜D列を別のデータで与えて，E列を計算するという問題にします．早速それぞれデータを Excel で作成して

          IPOC株式会社 エン…

          twitter で流れていた Excel の問題を解いてみる

          IPOC株式会社 エンジニアリング部隊

          bash ≫ python ~= awk ≫ C

          note 始め，気負ってタテマエ記事を連発しましたが，今後は素直に柔かい記事も書いていこうと思います． IT弘法は筆を択ぶ 以前の記事で ALZETA の中ではフラットファイルデータを扱っていると書きました． その時は，フラットファイルデータを扱うソフトウェアをざっくり「ツール」と呼称していました．「ツール」は別に何を選んでも構いませんが，「弘法筆を択ばず」と単純に言えないのが IT のおくゆかしいところです．ここでは簡単なお題を bash，awk，python, C （

          IPOC株式会社 エン…

          bash ≫ python ~= awk ≫ C

          IPOC株式会社 エンジニアリング部隊

          ALZETA でデータ処理の小宇宙を作る

          この記事を読んでいただきたい方 * データ分析に従事されている人／関心がある人 * 企業のデータ管理に従事されている人 * ALZETA でのデータ処理に興味を持っている人 データは溜めればよいというものではない データ活用のためにはまずデータ整備が必要，ということで DWH やデータマート製品を導入されている企業さんは多いと思います．また，そういうデータリポジトリにデータをロードするために，数多くの ETL 製品を活用されているということもあると思います．では，そうやっ

          IPOC株式会社 エン…

          ALZETA でデータ処理の小宇宙を作る

          IPOC株式会社 エンジニアリング部隊

          ユーザーと情シス，両方の味方 ALZETA

          この記事を読んでいただきたい方 * ALZETA を使ってみたいなと思っている人 * ALZETA を使ってみたいんだけどとユーザーに言われたシステム担当の人 * ALZETA でのデータ処理に興味を持っている人 前回は，ALZETA をお使いいただくにあたって，情報システムご担当（以下，情シス）の方に知っていただきたい ALZETA の機能や仕組みについてお話ししました．しかし情シスにとって，新しいソフトウェアを導入するというのは，非常に手間がかかるものです．本当にこれ

          IPOC株式会社 エン…

          ユーザーと情シス，両方の味方 ALZETA

          IPOC株式会社 エンジニアリング部隊

          情シスさん，出番です

          この記事を読んでいただきたい方 * ALZETA を使ってみたいなと思っている人 * ALZETA を使ってみたいんだけどとユーザーに言われたシステム担当の人 * ALZETA でのデータ処理に興味を持っている人 前回まで，業務で使えるデータ分析や事務データ処理の例を見てきました．Excel とは違うソフトを一つ覚えなければなりませんが，完全日本語対応ソフトということや，PM（処理モジュール）も設定に多数のパターンや階層構造がないので，覚え始めるのに抵抗はそれほどない！と

          IPOC株式会社 エン…

          情シスさん，出番です

          IPOC株式会社 エンジニアリング部隊

          （事務データではなく）事務データ「処理」ごと事業企画に渡す

          この記事を読んでいただきたい方 * 事業企画部門でデータを元に事業戦略を検討する（したい）人 * 事務データ処理の手順を開発している人 * 事務データ処理のための基幹システムの責任者 * 事務データ処理のための基幹システムを開発している人 * ALZETA でのデータ処理に興味を持っている人 前回は，データで柔軟にコントロール可能な事務データ処理 JOB を作成してみました．この JOB は請求管理部門で定期的に実行されて，粛々と割引額計算をこなしています．一方で，事業企

          IPOC株式会社 エン…

          （事務データではなく）事務データ「処理」ごと事業企画に渡す

          IPOC株式会社 エンジニアリング部隊