首页 文章
  • 0 votes
     answers
     views

    如何删除两个CSV之间的不常见行?

    我有2个CSV(从Android设备(加速度计,陀螺仪)导入),问题是加速度计的CSV有一些额外的时间戳(这本身很奇怪),这些时间戳不包含在陀螺仪的CSV中,所以有什么方法可以找到并删除不常见的行(时间戳) Reason for this question: 我正在使用来自Android设备的传感器数据进行活动识别,因此我对陀螺仪和加速度计数据的时间戳进行一对一的对应非常重要
  • 0 votes
     answers
     views

    对于Hive的日期和时间戳数据类型,Spark csv数据验证失败

    蜂巢表架构: c_date date c_timestamp timestamp 这是文本表 蜂巢表数据: hive> select * from all_datetime_types; OK 0001-01-01 0001-01-01 00:00:0...
  • 0 votes
     answers
     views

    尝试通过spark-sql查询csv格式的hive表时出现问题 . 任何人都可以解释一下原因吗?

    我在尝试查询具有属性ROW FORMAT SERDE的hive表时遇到“java.lang.ClassNotFoundException:com.bizo.hive.serde.csv.CSVSerde”异常.com.bizo.hive.serde.csv.CSVSerde'STORED AS INPUTFORMAT'org.apache.hadoop.mapred.TextInputFormat...
  • 1 votes
     answers
     views

    Magento EXPORT可配置产品

    我需要导入带有可配置产品的.csv文件 . 为此,您需要向Magento创建的原始文件添加2个新列: associated 和 configurable_attributes . 我找不到任何显示如何完成的示例 - 那么我如何创建和填充这些列? 在这种情况下不可能手动完成,因为我有20k产品 . 导出 .csv 文件时,我可以强制Magento创建这些列吗?我可以为Advanced Datafl...
  • 0 votes
     answers
     views

    Laravel 5.3从文件导入CSV而不上传

    我使用Maatwebsite / Excel导入CSV文件 . 我的代码看起来像这个教程:http://itsolutionstuff.com/post/laravel-5-import-export-to-excel-and-csv-using-maatwebsite-exampleexample.html我marged这两个函数和我的脚本获取文件并返回文件/ 但尽管经过多次尝试,我仍然无法跳过...
  • 2 votes
     answers
     views

    NiFi - ConvertCSVtoAVRO - 如何捕获失败的记录?

    将CSV转换为AVRO时,我想将所有拒绝输出到文件中(假设为error.csv) . 拒绝通常是由错误的数据类型引起的 - 例如当“字符串”值出现在“长”字段中时 . 我试图使用不兼容的输出,但不保存无法转换的行(在下面的示例中为2),它保存整个CSV文件 . 是否有可能仅以某种方式过滤掉那些无法转换的记录? (NiFi是否会为这些记录添加一些标记等?)两个处理器:RouteOnAttribute...
  • 1 votes
     answers
     views

    NiFi:Split Record处理器UTF-16 CSV到JSON

    尝试将csv制表符分隔文件转换为CSV文件为UTF-16的JSON .所有字段都是CSV和JSON字符串 . 在NiFi中使用SplitRecord处理器 . 处理器运行时没有任何错误,但转换为JSON的数据值如下所示 “\ u0000R \ u0000e \ u0000t \ u0000a \ u0000i \ u0000l .......” 我应该提到这是avro架构中的UTF-16吗?如果是...
  • 0 votes
     answers
     views

    如何在Apache NiFi中向Avro架构添加字段?

    我能够通过CSVReader获得Apache NiFi来生成模式,然后我可以使用ConvertRecord将模式写入属性 . 但是,我需要使用UpdateRecord添加字段,但这些字段不会添加到流文件或schema属性中 . 我相信这是因为这些字段不是最初推断的模式的一部分 . 我无法在注册表中创建架构,因为它是从文件中推断出来的 . 那么当架构不包含字段时,如何向记录添加字段?
  • 1 votes
     answers
     views

    无法为Prestashop中的客户创建订单历史记录CSV下载

    自从过去4天以来一直坚持这个问题,并在任何地方检查,但我找不到解决方案 . 在Prestashop,我需要为客户(针对b2b网站)提供每个订单历史记录的csv下载 . 这就是我所做的: 1-重写OrderDetailController.php并在initContent()下编写以下代码: if ( !array_key_exists('csv_download', $_GET) ) { ...
  • 0 votes
     answers
     views

    Magento产品CSV导入错误

    我对CSV产品导入有严重问题 . 当我尝试从CSV导入一个产品时(出于测试原因),我收到以下错误: SQLSTATE[23000]: Integrity constraint violation: 1452 Cannot add or update a child row: a foreign key constraint fails (admin_knygynas.catalog_product...
  • 0 votes
     answers
     views

    Prestashop出口从1.5到1.7

    我刚刚获得了Prestashop v1.5.4.1的访问权限,这就像完全毁了一样(这些人在破坏它之前很长时间) . 有很多产品和类别 . 我们想将它们导出到新的(1.7.2.4) . 问题是,我实际上可以从旧的产品中导出产品,但CSV中没有很多信息(ID,照片,名称,参考,类别,没有税的价格,包括税,数量,法规等等) . AND,我无法导出类别(按钮实际上不起作用),我无法导出属性和值等......
  • 1 votes
     answers
     views

    如何从Spark数据框中删除多个列?

    我有一个CSV,其中一些列 Headers 及其对应的值为空 . 我想知道如何删除名为 null 的列?示例CSV如下: "name"|"age"|"city"|"null"|"null"|"null" "abcd"|"21" |&quot...
  • 11 votes
     answers
     views

    如何将DataFrame保存为压缩(gzip)CSV?

    我使用Spark 1.6.0和Scala . 我想将DataFrame保存为压缩CSV格式 . 这是我到目前为止(假设我已经 df 和 sc 为 SparkContext ): //set the conf to the codec I want sc.getConf.set("spark.hadoop.mapred.output.compress", "true&q...
  • -1 votes
     answers
     views

    JSON提取到CSV

    我在大型JSON文件的每一行中有多个嵌套数据项 . JSON文件中一行的示例:{“Key1”:{“Key2”:“value2”},{“Key3”:{“Key4:”Value4“}}}} 该文件大小近2GB,我需要将其转换为CSV . 所以,这里有两个主要问题: 如何以二维CSV格式表示n维数据? 即使我想出了一种用CSV表示数据的方法,我该如何从JSON转换它? 任何想法将不胜感激 ....
  • 0 votes
     answers
     views

    批处理脚本 - Txt到CSV,如何将文本限定符添加到列?

    我试图让这个脚本自动将文本文件转换为CSV,但它由管道符“|”分隔 . 我下面的内容是在我的批处理文件中,它用逗号替换管道,我唯一的问题是,在第7列中,字符串包含逗号,所以当我在Excel中打开CSV文件时,它将这些逗号视为列并混淆列的格式 . 有没有办法只将文本限定符添加到第7列?文本限定符是字符串周围的引号 . 例 值1 |值2,AndSome |值3 有脚本将文本文件转换为: 值1, “值2...
  • 1 votes
     answers
     views

    如何将 Map 列表转换为CSV

    我需要将 Map 列表转换为CSV对象,如下所示 List<Map<String,Object>> maps = new ArrayList<Map<String,Object>>(); maps对象包含以下格式的值 Map 1: (header 1, value1) (header 2, value2) (header 3, value3) ...
  • 0 votes
     answers
     views

    使用BeautifulSoup和Python从网页中提取两个文本字符串之间的文本

    BeautifulSoup上有很多东西,但我找不到任何可以解决这个问题的东西...我想通过在代码中指定前后文本的位来提取两位html之间的文本 . 我可以使用Outwit Python模块执行此操作,但这次需要使用BeautifulSoup ... 我想要的页面位是下面的用户名: <a class="generic_class" href="/people/us...
  • 0 votes
     answers
     views

    删除/替换Azure Logic Apps中已解析的JSON输出中的字符

    你好! 是否有用于删除/替换Azure Logic Apps中JSON中所有特定字符的功能? 我正在使用Azure Logic Apps中的HTTP请求 . 我希望看到的结果是作为CSV文件的unnested JSON . 我的步骤如下所示:1.HTTP GET - > 2.Parse JSON - > 3.CSV-file 解析的JSON包含很多嵌套值,我想将其转换为列 . 我的...
  • -1 votes
     answers
     views

    从csv文件动态创建数据帧列表

    我想一次读取许多csv文件到一个大的哈希结构,在键下面(这将是csv文件的名称)可以访问特定的数据集 . AFAIK R没有哈希值,因此选择使用带有命名元素的列表(如果这不正确的方法请纠正我) . 我的代码到目前为止: csv_files <- list.files(pattern="*.csv"); datasets <- vector("list&...
  • -1 votes
     answers
     views

    将多行字符串写入CSV文件

    如何使用 encoding/csv 包将多行值写入CSV文件? fh, err := os.Create(fileName) if err != nil { log.Fatalf("Could not create file: %v", err) } defer fh.Close() w := csv.NewWriter(fh) normalValue := &quo...
  • 1 votes
     answers
     views

    如何更改MS VSTS中的列分隔符以进行Web性能测试

    我正在使用Microsoft VSTS for Performance测试Web应用程序 我正在添加一个数据池(.csv文件)来参数化多个值,但问题是.csv文件以列分隔的类型显示它,如: VariableA,VariableB,Variable3 Test1,Test2,Test3 Test4,Test5,Test6 但我想在单列中使用这些多个值,因为每当我们选择列分隔类型时,.csv文件会自动...
  • 0 votes
     answers
     views

    多表之间的范围类选择语法错误

    我一直在设计一个将文本文件导入Excel的宏 . 该程序旨在最初将所有数据导入到表1中,但在得到反馈之后,我被告知要将所有数据放入表2中 . 在代码行的开头使用 Activesheet 等命令时,此宏可以正常工作,因为sheet1始终是活动工作表 . *请注意,所有工作表都有其默认名称 . 我已经进去并试图通过输入 Worksheets("Sheet2").Range(&qu...
  • 0 votes
     answers
     views

    Kaltura批量上传CSV

    我想使用Kaltura批量上传条目CSV从ftp服务器上传一批视频 . 但是我找不到关于 Entries CSV 的用法和架构描述的任何文档 特别是我正在寻找一个类似于 this one 的文档,它提供了参数及其用法 .
  • 40 votes
     answers
     views

    获取pandas.read_csv将空值读取为空字符串而不是nan

    我正在使用pandas库来读取一些CSV数据 . 在我的数据中,某些列包含字符串 . 字符串 "nan" 是一个可能的值,因为它是一个空字符串 . 我设法让pandas读取"nan"作为字符串,但我可以't figure out how to get it not to read an empty value as NaN. Here' s样本数据和输出 O...
  • 3 votes
     answers
     views

    如何使用Python Pandas合并多个CSV文件

    我想知道如何使用Pandas合并多个CSV文件,但使用两个特定条件: I don't 想要合并值,如果它们具有公共密钥 . 就像在,我 don't 想要通过SQL Join合并数据 . 我希望所有原始数据都显示在原始CSV文件中 我希望将CSV文件值合并为新列,并将 not 合并为append函数,将值放在第一个分组下面 例如: CSV File 1Column A Column B...
  • 3 votes
     answers
     views

    如何从CSV中创建一个包含两列的字典作为Python中的键[duplicate]

    这个问题在这里已有答案: python pandas dataframe to dictionary 8个答案 我正在尝试从具有3列的CSV创建字典,其中前两列成为键,第三列成为值: 在此示例中,example.csv包含: Column-1 Column-2 Column-3 1 A foo 2 B bar...
  • 1 votes
     answers
     views

    如何在python 3.5中将现有数据格式化为csv文件中的列[重复]

    这个问题在这里已有答案: How to make separator in pandas read_csv more flexible wrt whitespace? 4个答案 我有一个csv文件,每行中的数据用空格分隔 . 我想在列中格式化这些数据 . 因此,如果我有5个值由一行中的空格分隔,那么我想创建5列 . 我的csv文件如下所示, 我想在7列上格式化它们 . 我正在使用pandas并...
  • 0 votes
     answers
     views

    Python Pandas:为csv-file中的特定行添加值

    我有一个看起来像这样的csvfile Date,A,B,C,...,X 2016/04,ColA,ColB,ColC,...,ColX 2016/05,ColA,ColB,ColC,...,ColX 2016/06,ColA,ColB,ColC,...,ColX 2016/07,ColA,ColB,ColC,...,ColX 2016/08,ColA,ColB,ColC,...,ColX 2016...
  • 0 votes
     answers
     views

    使用pandas从csv获取值的总和

    我想总结第3列中的所有值,以便在使用pandas的第一和第二列的新csv文件中获得结果,这样的思考更有效 . 可以加在一起的最大值介于0和2之间 如果存在除0.5,1或2之外的值或字符,则将忽略该加法 Sample of the csv file : https://pastebin.com/WwDWqU3U encounterId|chartTime|11885|67187|6711|6711|...
  • 2 votes
     answers
     views

    在Python中合并三个具有相同标头的csv文件

    我有多个CSV;但是,我很难合并它们,因为它们都有相同的 Headers . 这是一个例子 . CSV 1: ID,COUNT 1,3037 2,394 3,141 5,352 7,31 CSV 2: ID, COUNT 1,375 2,1178 3,1238 5,2907 6,231 7,2469 CSV 3: ID, COUNT 1,675 2,7178 3,8238 6,431 7,6...

热门问题